PyMongo

Python中MongoDB使用

MongoDB的层级为database–>collection–>document安装MongoDB，启动mongo服务PyMongo模块是Python对MongoDB操作的接口包，主要实现对MongoDB
DilemmaVF·2018-06-06 08:03

Python将SQL server 数据库导入到mongoDB数据库中

importpymssqlfrompymongoimportMongoClientconn=pymssql.connect('IP','用户名','密码','数据库')cursor=conn.cursor
ivmware·2018-06-04 20:00

Python操作mongodb的9个步骤

一导入pymongofrompymongoimportMongoClient二连接服务器端口号27017连接MongoDB连接MongoDB我们需要使用PyMongo库里面的MongoClient，一般来说传入
rottengeek·2018-06-04 08:36

python面向对象多线程爬虫爬取搜狐页面(1)

首先我们需要几个包：requests,lxml,bs4,pymongo,redis1.创建爬虫对象，具有的几个行为：抓取页面，解析页面，抽取页面，储存页面classSpider(object):def_
Charlie。·2018-05-31 16:37

pycharm和mongodb的交互

https://blog.csdn.net/kun1280437633/article/details/80512223首先引入包：pipinstallpymongo需要用到如下对象:MongoClient
天痕坤·2018-05-30 16:47

Python爬虫之女神网图片（三）

废话不说，直接来干货：环境配置：系统环境：WIN7/8/10编译环境：Python3+所需库：requests、re、os、pymongo、Beatifulsoup、timeIDE:Pycharmnvshen.py
一摩尔自由·2018-05-30 00:00

基于Selenium爬取淘宝商品+pyquery解析+MongoDB存储

selenium安装：pip3installseleniumpyquery安装：pip3installpyquerypymongo安装：pip3installpymongo配置Chro
西路·2018-05-25 11:32

Python 用pandas 进行数据清洗处理

1.数据读取importpandasaspdimportnumpyasnpimportpymongodata=pd.DataFrame(pd.read_excel('000.xlsx',index=False
瓦力冫·2018-05-23 20:18

mongodb3.4的falcon监控搭建

环境准备：mongodb3.4.1python3.3setuptools2.0pip1.5.4pyyamlrequestspymongo1.安装mongodb，安装过程如文档“正式环境的mongodb的安装与配置
13260130504·2018-05-21 17:30

MongoDB-pymongo.errors.CursorNotFound: Cursor

python,python3.先从数据库中取得所有数据db['test'].find（{}，{_id:0}），然后对结果进行for循环demos=db['demo'].find({},{"_id":0})forcursorindemos:     do_something()但是当do_something函数耗时过长，在cursor上长时间没有进行操作，引发cursor在mongodb服务端超时解
寒月谷·2018-05-16 17:13

python采集mongodb数据写入influxdb展示grafana

/usr/bin/envpython#encoding:utf=8importjsonimporttimeimporturllibimporturllib2importpymongoimportdatetimedefpost_json
修炼未成精的学生猿·2018-05-13 13:20

mac下安装mongodb pymongo,mysql

brewservicesstartmongodbsudomongod重启和停止服务brewservicesstopmongodbbrewservicesrestartmongodb在python中想要和mongodb进行交互，需要借助pyMongo
benben0729·2018-05-07 19:58

爬取贝壳租房信息存储到mongoDB

下面是贝壳找房的代码：importpymongoimportrequests,codecsi
lbship·2018-05-01 00:22

python多进程爬取上海房价并画出热力图分析

直接上代码：importrequests,codecsimportpymongo,timefromlxmlimporthtmlfrommultiprocessingimpor
lbship·2018-04-25 12:20

python简单爬虫 多线程爬取京东淘宝信息教程

需要添加的模块有lxml，Pool,requests,json,pymongo或者pymysql1，打
ElvisLing·2018-04-19 09:16

python 爬虫今日头条 多线程

-8frombs4importBeautifulSoupimportrequestsimportreimportjsonfromtimeimportctimeimportthreadingimportpymongoclient
killeri·2018-04-11 18:20

Python实现批量读取图片并存入mongodb数据库的方法示例

代码如下：#--*coding=utf-8*--fromcStringIOimportStringIOfrompymongoimportMo
windblew·2018-04-02 11:45

Python实现将数据框数据写入mongodb及mysql数据库的方法

写入mongodb代码片段（使用pymongo库）：############
开心果汁·2018-04-02 11:24

简单使用resquests爬取雪球网数据，分析股票走势

简单使用resquests爬取雪球网数据，分析股票走势importrequestsimportpymongoimportjson#数据库初始化client=pymongo.MongoClient("localhost
半吊子Py全栈工程师·2018-04-01 22:30

Python pymongo模块用法示例

本文实例讲述了Pythonpymongo模块用法。分享给大家供大家参考，具体如下：MongoDB优点MongoDB是一个为当代web应用而生的noSQL数据库，它有如下优点：1、文档型存储。
开心果汁·2018-03-31 10:48

使用搜狗接口爬取微信公众号

使用的代理池是以前使用redis和flask一起来维护的，在网上爬取的免费代理（想要详细了解的可以到前面文章了解）主文件代码如下，尽量写了备注fromurllib.parseimporturlencodeimportpymongoimportrequestsfromlxml.etreeimportXMLSyntaxErrorfromrequests.excepti
半吊子Py全栈工程师·2018-03-30 22:26

爬虫学习-爬取今日头条图集

toutiao.pyimportjsonimportosfromhashlibimportmd5importpymongoimportrequestsfrombs4importBeautifulSoupfromrequests.exceptionsimportRequestExceptionfromur
HiCodd·2018-03-30 17:25

Python连接MongoDB数据库并执行操作

redhat-release CentOS release 6.9 (Final)[root@mongodb ~]# python -VPython 2.6.61.首先确保,Mongodb数据库运行2.安装pymongo
XiaoBingZ·2018-03-30 10:22

使用python操作MongoDB数据库

MongoDB中1.使用python操作数据库'''@func:使用python脚本对数据库进行创建，插入内容@[email protected]代码块符合标准的python3的语法'''frompymongoimportMongoClient
Erice_s·2018-03-29 17:00

使用selenium爬取某出试卷的网站

fromseleniumimportwebdriverimportpymongoimportjsonimporttimeimportre#使用终极武器了.
半吊子Py全栈工程师·2018-03-20 19:58

分布式爬虫处理Redis里的数据操作步骤

py2process_youyuan_mongodb.py#process_youyuan_mongodb.py#-*-coding:utf-8-*-importjsonimportredisimportpymongodefmain
py哥·2018-03-18 17:19

Python开源项目介绍：网站日志分析工具

环境安装Python3.4+pymongo3.4.0+MongoDBserver先明确几个术语uri指请求中不包含参数的部分；request_uri
Python中文社区·2018-03-16 00:00

使用scrapy框架简单快速爬取淘宝商品信息

selenium和PhantomJS爬取了淘宝页面，但是速度方面有些欠缺，所以今天简单的利用scrapy框架来实现同样功能,并同样保存到mongo数据库中importscrapyimportreimportpymongofromtaobao.itemsimportTaobaoItemclassWeisuenSpider
半吊子Py全栈工程师·2018-03-09 19:54

python之mongodb报表开发

/usr/bin/envpython#-*-coding:utf-8-*-importConfigParserimportpymongoimportConstantsimportabcimportmongodbInitfromjshyimportexcelManagerclassDataCollectBase
jiandequn·2018-03-06 16:00

python：爬取58同城全部二手商品信息（转转网）

58ershoupython+beautifulsoup多线程爬取58同城二手全部商品信息，并在jupyter上将数据可视化项目主程序在58_index中：建立mango数据库表#连接MongoDB数据库client=pymongo.MongoClient
清沐_1412·2018-03-03 10:15

使用pymongo 来操作数据库

使用pymongo来接数据库连接mongodb#!
疯狂打码中·2018-03-02 15:49

使用pymongo 来操作数据库

使用pymongo来接数据库连接mongodb#!
疯狂打码中·2018-03-02 15:49

运维学python之爬虫高级篇（七）scrapy爬取知乎关注用户存入mongodb

1环境需求基础环境沿用之前的环境，只是增加了MongoDB（非关系型数据库）和PyMongo（Python的MongoDB连接库），默认我认为大家都已经安装好并启动了MongoDB服务。
578384·2018-02-25 21:06

一个获取大量文章标题标签的办法

ngram模型有了上述条件就可以粗略的寻找文章的标签了工具使用python以及python的nltk自然语言处理库非常方便这个是nltk中文文档方法1按照上述思路借助nltk库进行importrefrompymongoimportM
请叫我西木同学·2018-02-12 12:28

pymongo操作方法

一、MongoDB数据库操作1.连接数据库importpymongoconn=pymongo.Connection()#连接本机数据库#conn=pymongo.Connection(host="192.168.1.202
只爱写代码·2018-01-25 16:08

PyMongo 常见问题

PyMongo是线程安全的吗PyMongo是线程安全的,并且为多线程应用提供了内置的连接池PyMongo是进程安全的吗PyMongo不是进程安全的,如果你在fork()中使用MongoClient实例，
ronin47·2018-01-09 16:00

Python操作MongoDB数据库的方法示例

分享给大家供大家参考，具体如下：>>>importpymongo>>>client=pymongo.MongoClient('localhost',27017)>>>db=client.students
chengqiuming·2018-01-04 14:52

pymongo中如何生成ObjectId

如：#encoding:utf-8importpymongofrombsonimportObjectIddbconnection=pymongo.Connection('localhost',27017
fofabu2·2018-01-03 18:38

实时爬取二手房数据

8importtimeimportjsonfrommultiprocessingimportPoolimportrequestsfrombs4importBeautifulSoupimportreimportpandasaspdimportpymongoimportsysreload
coldence·2017-12-28 17:29

Python操作数据库之Mongodb

Python操作数据库之Mongodb一、安装Pymongo安装Python的MongoDB模块PyMongo1、源码安装：下载地址：https://pypi.python.org/packages/69
四京·2017-12-27 13:11

西刺代理 IP池

importrequestsfromfake_useragentimportUserAgentfrompymongoimportMongoClientfrombs4importBeautifulSoupimportlxmlimportdatetimefromurllib.parseimporturljoinimportthreadpoolua
领悟悟悟悟·2017-12-26 18:40

python数据抓取分析的示例代码（python + mongodb）

本文介绍了Python数据抓取分析，分享给大家，具体如下：编程模块：requests,lxml，pymongo，time，BeautifulSoup首先获取所有产品的分类网址：defstep():try
Rock_Song·2017-12-25 13:49

Python爬取新浪新闻

文件里面在上图中我们通过点击相关元素便能轻易的找到需要的信息，通过层层分析最后编写爬虫：代码如下：importjsonimportrequestsfrombs4importBeautifulSoupimportpymongofrompymongoimportMongoCli
God_favored_one·2017-12-17 22:57

[爬虫]用Python抓取非小号网站数字货币（一）

一、环境OS：win10python：3.6scrapy：1.3.2pymongo：3.2pycharm环境搭建，自行百度二、本节内容说明本节主要抓取非小号收录的所有数字货币的详情链接和数字货币名称。
kandy_ye·2017-12-14 22:50

[爬虫]用Python抓取非小号网站数字货币（二）

一、环境OS：win10python：3.6scrapy：1.3.2pymongo：3.2pycharm环境搭建，自行百度二、本节内容说明上节内容主要抓取非小号收录的所有数字货币的详情链接和数字货币名称
kandy_ye·2017-12-14 21:19

python3 常用爬虫库安装

系统：deepin15.5python版本：python3.5爬虫开发常用库的安装pip3installrequestsseleniumlxmlbeautifulsoup4pyquerypymysqlpymongoredisflaskdjangojupyter
Atwood_song·2017-12-11 20:43

Python数据分析之糗事百科第二弹

数据预处理导入数据importpandasaspdimportpymongoimportjieba.analyseimportnumpyasnpimportmatplotlib.pyplotasplt%
罗罗攀·2017-12-07 21:33

Scrapy连接Mongodb

piplines.py:fromscrapy.confimportsettingsimportpymongoclassMongo66Pipeline(object):def__init__(self):
只爱写代码·2017-12-07 20:07

爬虫：58大规模爬取准备阶段

成果：包含了预览页面信息和详情页面信息代码：frombs4importBeautifulSoupfrompymongoimportMongoClientimporttimeimportrequests#
泠泠七弦客·2017-12-04 01:56

MongoDB升级小结

业务代码主要是Python，在升级之前，我们已更新到了合适版本的pymongo，并在线下做了测试。为了从2.4升级到3.0由于数据兼容性的问题，需要先从2.4升级到2.6，然后再从2.6升级到3.0。
dutsoft·2017-12-02 11:18
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他