E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
pymongo
Python操作MongoDB
运行环境:python3.6.2mongodb3.0
pymongo
3.6.1获取集合from
pymongo
importMongoClientclient=MongoClient('mongodb://localhost
sunmimmy
·
2020-06-26 15:09
Python
MongoDB
python3下的数据存储 Pymysql(mysql)
Pymongo
(mongo)
安装pymysql在Python中使用MySQL,有两种方式,使用ORM(对象关系映射)框架和数据库模块,在此我们使用数据库模块pymysql(Python3)。安装pymysql:Shellpipinstallpymysql1pipinstallpymysql在爬虫程序中使用mysql我们以之前爬取今日头条的例子来扩展;之前的代码是这样的:Python#coding:utf-8importreq
songhao8080
·
2020-06-26 13:34
mongodb和python交互
import
pymongo
创建数据库连接"""host=None:ip127.0.0.1port=None端口27017"""mongo_client=
pymongo
.MongoClient(host=
小袋鼠cf
·
2020-06-26 13:51
pymongo
密码登陆问题
加密之后,python脚本验证就出了错,老是报
pymongo
.errors.OperationFailure:commandSON([('authenticate',1),('user',u'root'
新建文件夹了
·
2020-06-26 11:21
规则
就是用来打破的(底层技术)
Scrapy爬取淘宝网数据的尝试
特别是详情页面还有恶心的动态内容该例子中使用Scrapy框架中的基础爬虫(CrawlSpider还有点没搞清楚==b)先贴上整体代码importscrapyimportreimportcsvimport
pymongo
fromtmail.itemsimportTmailItemcl
shu_8708
·
2020-06-26 09:39
Python
robotframe(RF)操作mongodb数据库
1、首先安装
pymongo
库命令pipinstall
pymongo
2、安装Robotframework-MongoDB-Library,下载地址https://github.com/iPlantCollaborativeOpenSource
cq_莫离
·
2020-06-26 05:00
python爬虫-python实现抓取腾讯视频所有电影
实现的抓取腾讯视频所有电影的爬虫#-*-coding:utf-8-*-importreimporturllib2frombs4importBeautifulSoupimportstring,timeimport
pymongo
NUM
Python新手学习之家
·
2020-06-26 03:27
python爬虫
python爬虫
python
python中csv文件中数据添加到MongoDB数据库
utf-8-*-#@Time:2018/10/2111:31#@Author:deliGuo#@Site:#@File:csv文件存入mongoDB.py#@Software:PyCharm#导包from
pymongo
importMongoClientimportcsv
deli_111
·
2020-06-26 01:59
python爬虫
数据分析实战(八):北上广深租房图鉴
importosimportreimporttimeimportrequestsfrom
pymongo
importMongoClientfrominfoimportrent_type,city_infoclassRent
南山以南青如山
·
2020-06-26 00:12
数据分析专栏
爬取豆瓣电影短评并使用词云简单分析top50
先使用进程池爬取豆瓣电影短评importrequestsimportreimportrandomimporttimeimportpandasaspdfrom
pymongo
importMongoClientfrommultiprocessingimportPoolfromfake_useragentimport
yaooye
·
2020-06-25 23:06
Python爬虫 Scrapy框架基础 讲解及教程
流程将数据存储到Mongodb数据库:#将数据存储到mongo数据库import
pymongo
fromjobboleproject.itemsimportJobboleprojectItem#改造版,将配置信息写在配置文件里面
Meter_Bulacn
·
2020-06-25 20:11
爬虫
爬虫技术系统性总结
contents1.一:数据库的使用(mongoDB)2.二:python环境的安装3.三:
PyMongo
的使用4.四:正则表达式的应用一5.五:正则表达式的应用二6.六:网页内容解析7.七:网页内容选取神器
qq_39513887
·
2020-06-25 16:27
python
Xpath如何提取一个标签里的所有文本?
('string(.)').strip()实例测试:测试网页地址:测试地址代码如下:importrequestsimportreimportpymysqlfromlxmlimportetreefrom
pymongo
importMongoClientsessions
对明天的期待丶
·
2020-06-25 16:37
Python
爬取我的微博并生成词云图
importrequestsfromurllib.parseimporturlencodefrompyqueryimportPyQueryaspq#from
pymongo
importMongoClientimportjiebaimportwordcloudbase_url
代码拖拉鸡
·
2020-06-25 14:16
网络爬虫
python
TypeError: 'NoneType' object is not subscriptable
查询数据库报错复现:我在使用
pymongo
访问userscollection里的数据时,user=mongo.db.users.find_one({'username':username})由于该条数据不存在
融合xx
·
2020-06-25 13:09
技术
Python
TypeError
None
pymongo
0基础python实战:2_1homework
代码部分frombs4importBeautifulSoupimportrequestsimport
pymongo
urls=['http://sh.xiaozhu.com/search-duanzufang-p
翀Chen翀
·
2020-06-25 11:29
课时31 开始做简单的数据图表
连接数据库client=
pymongo
.MongoClient('localhost',27017)ceshi
ooocoo
·
2020-06-25 08:20
pymongo
.errors.ServerSelectionTimeoutError: 192.168.0.100:27017: timed out
pymongo
.errors.ServerSelectionTimeoutError:192.168.0.100:27017:timedout如果是yum包管理工具安装需要修改下配置文件中的bind_ip
Hongjie Shen
·
2020-06-25 07:54
Python搭建代理池爬取拉勾网招聘信息
池搭建node服务器Taro使用echarts做数据分析1、多线程爬取拉勾网招聘信息Tip:涉及知识1.Python3基础语法菜鸟教程2.requests模块快速上手3.Mongodb数据库快速安装4.
pymongo
CalmHarbin
·
2020-06-25 06:07
Python
Mongodb报错
pymongo
.errors.NetworkTimeout: ip:port: timed out问题解决
查询超时
pymongo
有个
pymongo
find().max_time_ms(500)这个可以设置,但是设置了不行。
Recar
·
2020-06-25 03:58
小技巧
一些报错解决
mongodb
python连接、操作mongodb数据库
数据库连接from
pymongo
importMongoClientimportpandasaspd#建立MongoDB数据库连接client=MongoClient('162.23.167.36',27101
阳望
·
2020-06-25 01:14
python
python连接mongo【解决
pymongo
.errors.OperationFailure: auth failed】
环境:mongo:3.4.9python:2.7一、pip安装mongo包:python2-mpip3install
pymongo
二、本地的数据库连接工具配置三、代码部分注意:mongoDB有不同的认证机制
少年阿峣_从零单排
·
2020-06-25 00:36
#
MongoDB
Python
【
数据库
】
Python MongoDB OperationFailure: Authentication failed. 问题
比如这个博客上说的https://www.oschina.net/code/snippet_2463131_52778#coding=utf-8#导入模块import
pymongo
#建立连接client
pcjdpcq
·
2020-06-24 19:20
个人学习总结
工作整理
Pymongo
DB - 简单用法
Pymongo
DB简单用法from
pymongo
importMongoClientclient=MongoClient()#client=MongoClient('xxx.xxx.xxx.xxx')db
AIHGF
·
2020-06-24 18:37
Python
python爬虫爬取bilibili弹幕数据
importjsonimportreimport
pymongo
importrequestsfrombs4importBeautifulSoupfrommuyushuixin.configimport*headers
newdas123
·
2020-06-24 17:15
python爬虫小项目
Flask+MongoDB写个最简单的页面
app.pyfromflaskimportFlask,render_templatefrom
pymongo
importMongoClientmydb=MongoClient('mongodb://用户名
miomitac
·
2020-06-24 15:33
flask通过Flask-
PyMongo
操作mongo数据库
Python开发者可以考虑把MongoDB作为一个持久化,可搜索的Python字典的“仓库”(实际上,这是如何用
PyMongo
来表示MongoDB中的“文档”)。
幸福丶如此
·
2020-06-24 12:31
缓存和nosql数据库知识
python
《利用Python进行数据分析学习笔记》学习笔记(二)
import
pymongo
client=
pymongo
.MongoClient('localhost')#连接数据库db=client.zhihu_follows#指定数据库'zhihu_follows'collecti
卜地锦
·
2020-06-24 10:40
Python 连接mongoDB出错
pymongo
.errors.OperationFailure: Authentication failed.
python连接mongoDB时,出现
pymongo
.errors.OperationFailure:Authenticationfailed.的错误,是因为没有赋予认证权限。
liujingqiu
·
2020-06-24 06:03
Mongodb
pymongo
快速批量删除,批量插入,批量更新
想使用
pymongo
实现批量操作,找了很久,终于在文档中发现
pymongo
文档原文from
pymongo
importInsertOne,DeleteOne,ReplaceOnerequests=[InsertOne
小s学技术
·
2020-06-23 17:41
解决问题
Python
数据库
python非关系型数据库存储——MongoDB 的储存
1.安装首先需要安装MongoDB并启动了服务,再安装
PyMongo
库。
宓海
·
2020-06-23 11:00
分析数据:aggregate更多用法
两个任务:1.找出每个地区销售量top3,并显示出来2.找出每种大类的成色跟价格的折线图第一个:每个地区的top3成果:地区tpo3代码:from
pymongo
importMongoClientimportchartsclient
泠泠七弦客
·
2020-06-23 09:57
pymongo
.errors.OperationFailure: Authentication failed.
import
pymongo
client=MongoClient("mongodb://host:port/")client.admin.authenticate("username"
dongbi0665
·
2020-06-23 05:26
Python 起薪和均资都高于 Java?!
和”Java”或”Python”作为筛选条件,以广州为例:爬取招聘的大体信息,具体代码如下:1from bs4 import BeautifulSoup2import requests3import
pymongo
4
CSDN资讯
·
2020-06-23 01:40
构建mongo-connector镜像
1.前提服务器需要安装docker服务需要能使用外网使用mongo-connector需要
pymongo
(连接mongo用到的)和docmanager(连接es,solr等用到的).秉承测试要多次原则,
bangpeng9337
·
2020-06-22 17:03
pymongo
看了就会啦
前言4个多月之前,写过一篇关于非关系型数据库mongodb的博文,介绍了怎么在Windows系统下来操作mongodb的细节。基础不太牢固的可以点击下面的链接http://blog.csdn.net/marksinoberg/article/details/53489989来加深一下印象。但是现在不一样了,因为我终于换系统了。之前得Windows7由于各种各样的问题,导致补丁包装不上去,间接导致了
尽情的嘲笑我吧
·
2020-06-22 08:27
PyQt+
PyMongo
实现的电影资料检索系统,支持推荐和数据更新功能
FelKub-Movie-Archive费库电影系统Git地址:https://github.com/Truedick23/FelKub-Movie-Archive借着学校实践项目而实现的一个原型,现在已经有比较完善的功能了。因为图片大小限制,劳烦大家去Github去查看它的功能演示。下面是节选Github上的README部分内容,希望这一项目能对大家有参考价值,感谢!项目依赖DevelopedD
JosephDing23
·
2020-06-22 07:37
Python
大数据
推荐系统
电影
flask 连接MogoDB数据库
#-*-encoding:utf-8-*-fromflaskimportFlask,request,jsonify,render_template#导入
pymongo
来连接mongodbfrom
pymongo
importMongoClientapp
T525174893
·
2020-06-22 06:35
python实战作业2_final
这次的作业不能说完整做出来了,不过剩下的都是网站的细节DEBUG先帖代码获取所有二手商品的代码(爬虫1)import
pymongo
importrequestsfrombs4importBeautifulSoupclient
星罹
·
2020-06-22 04:26
BUG:
pymongo
.errors.DuplicateKeyError: E11000 duplicate key error collection的原因和解决方案
BUG:
pymongo
.errors.DuplicateKeyError:E11000duplicatekeyerrorcollection的原因和解决方案一.BUG描述:使用Scrapy把数据添加到mongodb
Refrain__WG
·
2020-06-22 04:52
Python
Scrapy
Python爬虫实现抓取腾讯视频所有电影-源码【实战必学】
#-*-coding:utf-8-*-2.importre3.importurllib24.frombs4 importBeautifulSoup5.importstring,time6.import
pymongo
8
学术严谨
·
2020-06-22 04:08
python
web开发
数据挖掘
pip安装超时问题解决
解决方法:pipinstall需要安装的包-i链接地址--trusted-host域名如使用阿里云:pipinstall
pymongo
-ihttp://mirrors.aliyun.com/pypi/simple
身在迷途的白羊
·
2020-06-22 02:17
Python
mongo表更新字段
import
pymongo
importtimefromconcurrent.futuresimportThreadPoolExecutordefid2time(object_id):timeStamp=
Mr____zheng
·
2020-06-22 02:20
结巴分词,文本聚类,情感分析,词云图可视化
importreimportnumpyimportjiebaimportjieba.analyse#提取关键内容importjieba.possegaspseg#词性标注from
pymongo
importMongoClientfromsklearn.feature_extraction.textimportTfidfTransformer
Luzaofa
·
2020-06-22 00:23
关于“pip不是内部或外部命令,也不是可运行程序”的解决方式记录
解决方式记录:场景:今天需要执行pipinstall
pymongo
,但是提示我“pip不是内容或者外部命令,也不是可运行程序”的解决方式记录”处理之前忘记留图,网图大概如下:然后就在网上找了一下解决方案
IT_小赵
·
2020-06-21 22:01
Python
Python爬虫第一练,爬取13个旅游城市游客数据
1.需要用到的Python模块:BeautifulSoup、requests、
pymongo
、pylab2.方法:通过请求https://piao.qunar.com/ticket/list.htm?
HR_XIAORAN
·
2020-06-21 21:16
excise
爬虫
[862]Mongodb: Sort operation used more than the maximum 33554432 bytes of RAM
pymongo
读取大数据时报错Traceback(mostrecentcalllast):File"MongodbConvertMysql.py",line91,inmcm.mongoConvertMysql
周小董
·
2020-06-21 21:15
异常
python利用danmu实时获取斗鱼等直播网站字幕
是一个开源的直播平台弹幕接口用pythonpipinstalldanmu#-*-coding:utf-8-*-importtime,sysfromdanmuimportDanMuClientimport
pymongo
client
gu_zhi
·
2020-06-21 21:43
python
数据抓取
flask_
pymongo
的基本操作
参考文档:https://flask-
pymongo
.readthedocs.io/en/latest/初始化设置:fromflaskimportFlaskfromflask_
pymongo
import
PyMongo
app
furuiyang_
·
2020-06-21 20:05
开发实践
selenium爬取新浪微博
添加进度条无头浏览器不加载图片使用scrapy的selector解析页面fromseleniumimportwebdriverfromscrapyimportSelectorimporttimeimport
pymongo
fromtqdmimporttqdm
CoolScript
·
2020-06-21 18:33
python
上一页
14
15
16
17
18
19
20
21
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他