• 前言
  • MongoDB GUI 工具
  • PyMongo(同步)
  • Motor(异步)
  • 后记

前言

最近这几天准备介绍一下 Python 与三大数据库的使用,这是第一篇,首先来介绍 MongoDB 吧,,走起!!

MongoDB GUI 工具

首先介绍一款 MongoDB 的 GUI 工具 Robo 3T,初学 MongoDB 用这个来查看数据真的很爽。可以即时看到数据的增删改查,不用操作命令行来查看。 

PyMongo(同步)

可能大家都对 PyMongo 比较熟悉了,这里就简单介绍它的增删改查等操作。

连接

  1. # 普通连接
  2. client = MongoClient('localhost', 27017)
  3. client = MongoClient('mongodb://localhost:27017/')
  4. #
  5. # 密码连接
  6. client = MongoClient('mongodb://username:password@localhost:27017/dbname')
  7. db = client.zfdb
  8. # db = client['zfdb']
  9.  
  10. test = db.test

  1. # 增加一条记录
  2. person = {'name': 'zone','sex':'boy'}
  3. person_id = test.insert_one(person).inserted_id
  4. print(person_id)
  5. # 批量插入
  6. persons = [{'name': 'zone', 'sex': 'boy'}, {'name': 'zone1', 'sex': 'boy1'}]
  7. result = test.insert_many(persons)
  8. print(result.inserted_ids)

  1. # 删除单条记录
  2. result1 = test.delete_one({'name': 'zone'})
  3. pprint.pprint(result1)
  4. # 批量删除
  5. result1 = test.delete_many({'name': 'zone'})
  6. pprint.pprint(result1)

  1. # 更新单条记录
  2. res = test.update_one({'name': 'zone'}, {'$set': {'sex': 'girl girl'}})
  3. print(res.matched_count)
  4. # 更新多条记录
  5. test.update_many({'name': 'zone'}, {'$set': {'sex': 'girl girl'}})

  1. # 查找多条记录
  2. pprint.pprint(test.find())
  3.  
  4. # 添加查找条件
  5. pprint.pprint(test.find({"sex": "boy"}).sort("name"))

聚合

如果你是我的老读者,那么你肯定知道我之前的骚操作,就是用爬虫爬去数据之后,用聚合统计结合可视化图表进行数据展示。

  1. aggs = [
  2. {"$match": {"$or" : [{"field1": {"$regex": "regex_str"}}, {"field2": {"$regex": "regex_str"}}]}}, # 正则匹配字段
  3. {"$project": {"field3":1, "field4":1}},# 筛选字段
  4. {"$group": {"_id": {"field3": "$field3", "field4":"$field4"}, "count": {"$sum": 1}}}, # 聚合操作
  5. ]
  6.  
  7. result = test.aggregate(pipeline=aggs)

例子:以分组的方式统计 sex 这个关键词出现的次数,说白了就是统计有多少个男性,多少个女性。

  1. test.aggregate([{'$group': {'_id': '$sex', 'weight': {'$sum': 1}}}])

聚合效果图:(秋招季,用Python分析深圳程序员工资有多高?文章配图)  

Motor(异步)

Motor 是一个异步实现的 MongoDB 存储库 Motor 与 Pymongo 的配置基本类似。连接对象就由 MongoClient 变为 AsyncIOMotorClient 了。下面进行详细介绍一下。

连接

  1. # 普通连接
  2. client = motor.motor_asyncio.AsyncIOMotorClient('mongodb://localhost:27017')
  3. # 副本集连接
  4. client = motor.motor_asyncio.AsyncIOMotorClient('mongodb://host1,host2/?replicaSet=my-replicaset-name')
  5. # 密码连接
  6. client = motor.motor_asyncio.AsyncIOMotorClient('mongodb://username:password@localhost:27017/dbname')
  7. # 获取数据库
  8. db = client.zfdb
  9. # db = client['zfdb']
  10. # 获取 collection
  11. collection = db.test
  12. # collection = db['test']

增加一条记录

添加一条记录。

  1. async def do_insert():
  2. document = {'name': 'zone','sex':'boy'}
  3. result = await db.test_collection.insert_one(document)
  4. print('result %s' % repr(result.inserted_id))
  5. loop = asyncio.get_event_loop()
  6. loop.run_until_complete(do_insert())

批量增加记录

添加结果如图所暗示。

  1. async def do_insert():
  2. result = await db.test_collection.insert_many(
  3. [{'name': i, 'sex': str(i + 2)} for i in range(20)])
  4. print('inserted %d docs' % (len(result.inserted_ids),))
  5.  
  6. loop = asyncio.get_event_loop()
  7. loop.run_until_complete(do_insert())

查找一条记录

  1. async def do_find_one():
  2. document = await db.test_collection.find_one({'name': 'zone'})
  3. pprint.pprint(document)
  4.  
  5. loop = asyncio.get_event_loop()
  6. loop.run_until_complete(do_find_one())

查找多条记录

查找记录可以添加筛选条件。

  1. async def do_find():
  2. cursor = db.test_collection.find({'name': {'$lt': 5}}).sort('i')
  3. for document in await cursor.to_list(length=100):
  4. pprint.pprint(document)
  5.  
  6. loop = asyncio.get_event_loop()
  7. loop.run_until_complete(do_find())
  8.  
  9. # 添加筛选条件,排序、跳过、限制返回结果数
  10. async def do_find():
  11. cursor = db.test_collection.find({'name': {'$lt': 4}})
  12. # Modify the query before iterating
  13. cursor.sort('name', -1).skip(1).limit(2)
  14. async for document in cursor:
  15. pprint.pprint(document)
  16.  
  17. loop = asyncio.get_event_loop()
  18. loop.run_until_complete(do_find())

统计

  1. async def do_count():
  2. n = await db.test_collection.count_documents({})
  3. print('%s documents in collection' % n)
  4. n = await db.test_collection.count_documents({'name': {'$gt': 1000}})
  5. print('%s documents where i > 1000' % n)
  6.  
  7. loop = asyncio.get_event_loop()
  8. loop.run_until_complete(do_count())

替换

替换则是将除 id 以外的其他内容全部替换掉。

  1. async def do_replace():
  2. coll = db.test_collection
  3. old_document = await coll.find_one({'name': 'zone'})
  4. print('found document: %s' % pprint.pformat(old_document))
  5. _id = old_document['_id']
  6. result = await coll.replace_one({'_id': _id}, {'sex': 'hanson boy'})
  7. print('replaced %s document' % result.modified_count)
  8. new_document = await coll.find_one({'_id': _id})
  9. print('document is now %s' % pprint.pformat(new_document))
  10.  
  11. loop = asyncio.get_event_loop()
  12. loop.run_until_complete(do_replace())

更新

更新指定字段,不会影响到其他内容。

  1. async def do_update():
  2. coll = db.test_collection
  3. result = await coll.update_one({'name': 0}, {'$set': {'sex': 'girl'}})
  4. print('更新条数: %s ' % result.modified_count)
  5. new_document = await coll.find_one({'name': 0})
  6. print('更新结果为: %s' % pprint.pformat(new_document))
  7.  
  8. loop = asyncio.get_event_loop()
  9. loop.run_until_complete(do_update())

删除

删除指定记录。

  1. async def do_delete_many():
  2. coll = db.test_collection
  3. n = await coll.count_documents({})
  4. print('删除前有 %s 条数据' % n)
  5. result = await db.test_collection.delete_many({'name': {'$gte': 10}})
  6. print('删除后 %s ' % (await coll.count_documents({})))
  7.  
  8. loop = asyncio.get_event_loop()
  9. loop.run_until_complete(do_delete_many())

后记

MongoDB 的骚操作就介绍到这里,后面会继续写 MySQL 和 Redis 的骚操作。尽请期待。

【转】Python操作MongoDB数据库的更多相关文章

  1. python操作三大主流数据库(10)python操作mongodb数据库④mongodb新闻项目实战

    python操作mongodb数据库④mongodb新闻项目实战 参考文档:http://flask-mongoengine.readthedocs.io/en/latest/ 目录: [root@n ...

  2. python操作三大主流数据库(9)python操作mongodb数据库③mongodb odm模型mongoengine的使用

    python操作mongodb数据库③mongodb odm模型mongoengine的使用 文档:http://mongoengine-odm.readthedocs.io/guide/ 安装pip ...

  3. python操作三大主流数据库(8)python操作mongodb数据库②python使用pymongo操作mongodb的增删改查

    python操作mongodb数据库②python使用pymongo操作mongodb的增删改查 文档http://api.mongodb.com/python/current/api/index.h ...

  4. python操作三大主流数据库(7)python操作mongodb数据库①mongodb的安装和简单使用

    python操作mongodb数据库①mongodb的安装和简单使用 参考文档:中文版:http://www.mongoing.com/docs/crud.html英文版:https://docs.m ...

  5. Python 操作 mongodb 数据库

    原文地址:https://serholiu.com/python-mongodb 这几天在学习Python Web开发,于 是做准备做一个博客来练练手,当然,只是练手的,博客界有WordPress这样 ...

  6. python 操作mongoDB数据库

    网上关于python 操作mongoDB的相关文章相对不是很多,并且质量也不是很高!下面给出一个完整的 增删改查示例程序! #!/usr/bin/python # -*- coding: utf-8 ...

  7. python操作mongodb数据库

    一.MongoDB 数据库操作 连接数据库 import pymongo conn = pymongo.Connection() # 连接本机数据库 conn = pymongo.Connection ...

  8. python 操作mongodb数据库模糊查询

    # -*- coding: utf-8 -*-import pymongoimport refrom pymongo import MongoClient #创建连接#10.20.66.106clie ...

  9. python操作MONGODB数据库,提取部分数据再存储

    目标:从一个数据库中提取几个集合中的部分数据,组合起来一共一万条.几个集合,不足一千条数据的集合就全部提取,够一千条的就用一万减去不足一千的,再除以大于一千的集合个数,得到的值即为所需提取文档的个数. ...

随机推荐

  1. C#编译和运行过程图例

    一张图,描述C#编译和运行过程,比较容易记忆理解

  2. 第18课-数据库开发及ado.net 连接数据库.增.删.改向表中插入数据并且返回自动编号.SQLDataReade读取数据

    第18课-数据库开发及ado.net 连接数据库.增.删.改向表中插入数据并且返回自动编号.SQLDataReade读取数据 ADO.NET 为什么要学习? 我们要搭建一个平台(Web/Winform ...

  3. [C#]非阻塞监听键盘输入

    摘要 最近需要调研监控用户键盘输入的内容,然后收集数据进行用户行为分析.然后就用控制台程序弄了一个demo. 代码如下 class Program { static void Main(string[ ...

  4. Java多线程--并行模式与算法

    Java多线程--并行模式与算法 单例模式 虽然单例模式和并行没有直接关系,但是我们经常会在多线程中使用到单例.单例的好处有: 对于频繁使用的对象可以省去new操作花费的时间: new操作的减少,随之 ...

  5. redis-java基础操作

    安装 windows版的Redis,打开即可,默认端口6379 导入两个jar包  commons-pool2-2.3.jar   jedis-2.7.0.jar 一 写配置文件 redis.setM ...

  6. Digital Square(hdu4394)搜索

    Digital Square Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others)Total ...

  7. java post请求的表单提交和json提交简单小结

    在java实现http请求时有分为多种参数的传递方式,以下给出通过form表单提交和json提交的参数传递方式: public String POST_FORM(String url, Map< ...

  8. 前端了解即可:postman(接口测试)的使用

    postman的使用,前端了解即可.因为都是一些工具的应用,截图比较多,之前在有道云笔记上总结记录过,在这不在写了,展示一张笔记截图. 此文仅做参考一下,有不足之处,欢迎指正:

  9. (三)MongoDB数据库注意

    1.数据库名 数据库也通过名字来标识.数据库名可以是满足以下条件的任意UTF-8字符串. 不能是空字符串(""). 不得含有' '(空格)...$./.\和\0 (空字符). 应全 ...

  10. art-template辅助函数和子模板

    art-template 前端使用 用途:主要用来处理数据和优化性能,与其他的一些模块化处理数据的插件相比,art-template处理性能好 不废话,上代码 1.art-template基本语法使用 ...