Django(ORM查询1)

day69

参考：http://www.cnblogs.com/liwenzhou/p/8660826.html

在Python脚本中调用Django环境

orm1.py

import os

if __name__ == '__main__':
    os.environ.setdefault("DJANGO_SETTINGS_MODULE", "ormday69.settings") #ormday69项目下的settings
    import django
    django.setup()

    from app01 import models

    books = models.Book.objects.all()
    print(books)

一般操作

必知必会13条

<1> all():                 查询所有结果

<2> filter(**kwargs):      它包含了与所给筛选条件相匹配的对象

<3> get(**kwargs):         返回与所给筛选条件相匹配的对象，返回结果有且只有一个，如果符合筛选条件的对象超过一个或者没有都会抛出错误。

<4> exclude(**kwargs):     它包含了与所给筛选条件不匹配的对象

<5> values(*field):        返回一个ValueQuerySet——一个特殊的QuerySet，运行后得到的并不是一系列model的实例化对象，而是一个可迭代的字典序列

<6> values_list(*field):   它与values()非常相似，它返回的是一个元组序列，values返回的是一个字典序列

<7> order_by(*field):      对查询结果排序

<8> reverse():             对查询结果反向排序，请注意reverse()通常只能在具有已定义顺序的QuerySet上调用(在model类的Meta中指定ordering或调用order_by()方法)。

<9> distinct():            从返回结果中剔除重复纪录(如果你查询跨越多个表，可能在计算QuerySet时得到重复的结果。此时可以使用distinct()，注意只有在PostgreSQL中支持按字段去重。)

<10> count():              返回数据库中匹配查询(QuerySet)的对象数量。

<11> first():              返回第一条记录

<12> last():               返回最后一条记录

<13> exists():             如果QuerySet包含数据，就返回True，否则返回False

数据：

实践：

     # 查询所有的人
     ret = models.Person.objects.all()
     print("all:", ret)
     # get查询
     ret = models.Person.objects.get(name="小黑")
     print("get:", ret)
     # filter
     ret = models.Person.objects.filter(id=2)  # 不存在返回一个空的QuerySet，不会报错
     print("filter:", ret)
     # 就算查询的结果只有一个，返回的也是QuerySet，我们要用索引的方式取出第一个元素
     ret = models.Person.objects.filter(id=2)[0]
     print("filter索引:", ret)

     print("exclude".center(80, "*"))  # 将exclude放中间
     # exclude id为1 的内容
     ret = models.Person.objects.exclude(id=1)
     print(ret)

     print("values".center(80, "*"))
     # values 返回一个QuerySet对象，里面都是字典。 不写字段名，默认查询所有字段
     ret = models.Person.objects.values("name", "birthday")
     print("字典：", ret)

     print("values_list".center(80, "*"))
     # values_list 返回一个QuerySet对象，里面都是元祖。 不写字段名，默认查询所有字段
     ret = models.Person.objects.values_list()
     print("元组：", ret)

     print("order_by".center(80, "*"))
     # order_by 按照指定的字段排序
     ret = models.Person.objects.all().order_by("birthday")
     print("按生日排序：", ret)

     print("reverse".center(80, "*"))
     # reverse 将一个有序的QuerySet 反转顺序
     # 对有序的QuerySet才能调用reverse
     ret = models.Person.objects.all().order_by("birthday").reverse()
     print("反向排序：", ret)

     print("count".center(80, "*"))
     # count 返回QuerySet中对象的数量
     ret = models.Person.objects.all().count()
     print("对象的数量：", ret)

     print("first".center(80, "*"))
     # first 返回QuerySet中第一个对象
     ret = models.Person.objects.all().first()
     print("按生日排序后的第一个：", ret)

     print("last".center(80, "*"))
     # last 返回QuerySet中最后一个对象
     ret = models.Person.objects.all().last()
     print("按生日排序后的最后一个：", ret)

     print("exists".center(80, "*"))
     # exists 判断表里有没有数据
     ret = models.Person.objects.exists()
     print(ret)

结果：

all: <QuerySet [<Person: 暗示>, <Person: 嘟嘟>, <Person: 格尔玛>, <Person: 薏米>, <Person: 小黑>, <Person: 哗哗>]>
get: 小黑
filter: <QuerySet [<Person: 薏米>]>
filter索引: 薏米
************************************exclude*************************************
<QuerySet [<Person: 暗示>, <Person: 嘟嘟>, <Person: 格尔玛>, <Person: 薏米>, <Person: 哗哗>]>
*************************************values*************************************
字典： <QuerySet [{'birthday': datetime.date(2018, 2, 16), 'name': '暗示'}, {'birthday': datetime.date(2019, 2, 6), 'name': '嘟嘟'}, {'birthday': datetime.date(2019, 2, 13), 'name': '格尔玛'}, {'birthday': datetime.date(2019, 2, 14), 'name': '薏米'}, {'birthday': datetime.date(2019, 2, 27), 'name': '小黑'}, {'birthday': datetime.date(2020, 2, 3), 'name': '哗哗'}]>
**********************************values_list***********************************
元组： <QuerySet [(6, '暗示', 21, datetime.date(2018, 2, 16)), (5, '嘟嘟', 23, datetime.date(2019, 2, 6)), (3, '格尔玛', 34, datetime.date(2019, 2, 13)), (2, '薏米', 33, datetime.date(2019, 2, 14)), (1, '小黑', 18, datetime.date(2019, 2, 27)), (4, '哗哗', 12, datetime.date(2020, 2, 3))]>
************************************order_by************************************
按生日排序： <QuerySet [<Person: 暗示>, <Person: 嘟嘟>, <Person: 格尔玛>, <Person: 薏米>, <Person: 小黑>, <Person: 哗哗>]>
************************************reverse*************************************
反向排序： <QuerySet [<Person: 哗哗>, <Person: 小黑>, <Person: 薏米>, <Person: 格尔玛>, <Person: 嘟嘟>, <Person: 暗示>]>
*************************************count**************************************
对象的数量： 6
*************************************first**************************************
按生日排序后的第一个： 暗示
**************************************last**************************************
按生日排序后的最后一个： 哗哗
*************************************exists*************************************
True

单表查询之神奇的双下划线

models.Tb1.objects.filter(id__lt=10, id__gt=1)   # 获取id大于1 且 小于10的值

models.Tb1.objects.filter(id__in=[11, 22, 33])   # 获取id等于11、22、33的数据
models.Tb1.objects.exclude(id__in=[11, 22, 33])  # not in

models.Tb1.objects.filter(name__contains="ven")  # 获取name字段包含"ven"的
models.Tb1.objects.filter(name__icontains="ven") # icontains大小写不敏感

models.Tb1.objects.filter(id__range=[1, 3])      # id范围是1到3的，等价于SQL的bettwen and

类似的还有：startswith，istartswith, endswith, iendswith　

date字段还可以：
models.Class.objects.filter(first_day__year=2017)

实践：

 # 单表查询之神奇的双下划线
     # 查询id值大于1小于4的结果
     ret = models.Person.objects.filter(id__gt=1, id__lt=4)
     print("查询id值大于1小于4的结果:", ret)
     # in
     # 查询 id 在 [1, 3, 5, 7]中的结果
     ret = models.Person.objects.filter(id__in=[1, 3, 5, 7])
     print("查询 id 在 [1, 3, 5, 7]中的结果:", ret)
     ret = models.Person.objects.exclude(id__in=[1, 3, 5, 7])
     print("排除后：", ret)

     # contains 字段包含指定值的
     # icontains 忽略大小写包含指定值
     ret = models.Person.objects.filter(name__contains="小")
     print("字段包含指定值的:", ret)

     # range
     # 判断id值在 哪个区间的 SQL语句中的between and  1<= <=3
     ret = models.Person.objects.filter(id__range=[1, 3])
     print("包含：", ret)

     # 日期和时间字段还可以有以下写法
     ret = models.Person.objects.filter(birthday__year=2017)
     print("按年查：", ret)
     ret = models.Person.objects.filter(birthday__year=2018, birthday__month=2)
     print("按月查：", ret)

结果：

查询id值大于1小于4的结果: <QuerySet [<Person: 格尔玛>, <Person: 薏米>]>
查询 id 在 [1, 3, 5, 7]中的结果: <QuerySet [<Person: 丈母娘>, <Person: 嘟嘟>, <Person: 格尔玛>, <Person: 小黑>]>
排除后： <QuerySet [<Person: 暗示>, <Person: 薏米>, <Person: 哗哗>]>
字段包含指定值的: <QuerySet [<Person: 小黑>]>
包含： <QuerySet [<Person: 格尔玛>, <Person: 薏米>, <Person: 小黑>]>
按年查： <QuerySet [<Person: 丈母娘>]>
按月查： <QuerySet [<Person: 暗示>]>

Process finished with exit code 0

ForeignKey操作

正向查找

对象查找（跨表）

语法：

对象.关联字段.字段

 

示例：

book_obj = models.Book.objects.first()  # 第一本书对象
print(book_obj.publisher)  # 得到这本书关联的出版社对象
print(book_obj.publisher.name)  # 得到出版社对象的名称

字段查找（跨表）

语法：

关联字段__字段

示例：

print(models.Book.objects.values_list("publisher__name"))

实践：

 class Publisher(models.Model):
     id = models.AutoField(primary_key=True)
     name = models.CharField(max_length=32, unique=True)

     def __str__(self):
         return self.name  # 打印对象时输出

 class Book(models.Model):
     id = models.AutoField(primary_key=True)
     title = models.CharField(max_length=32)
     # 外键  默认关联id，也可关联name  , to_field="name"
     publisher = models.ForeignKey(to="Publisher", on_delete=models.CASCADE)

     def __str__(self):
         return self.title  # 打印对象时输出

Book往Publisher查，正向查找；Publisher->Book反向。

对象查找，和字段查找。

 '''
     外键的查询操作
     正向查询
     基于对象 跨表查询
     '''
     book_obj = models.Book.objects.all().first()  # 找出书对象
     print("找到的书：", book_obj)
     ret = book_obj.publisher  # 和我这本书关联的出版社对象
     print("和我这本书关联的出版社对象:", ret, type(ret))
     ret = book_obj.publisher.name  # 和我这本书关联的出版社对象
     print("和我这本书关联的出版社对象的名字:", ret, type(ret))

     # 查询id是1的书的出版社的名称   publisher__name
     # 利用双下划线     跨表查询   book -> publisher
     # 双下划线就表示跨了一张表
     ret = models.Book.objects.filter(id=2).values_list("publisher__name")
     print("查询id是2的书的出版社的名称:", ret)

结果：

找到的书： linux
和我这本书关联的出版社对象: 下沙出版社 <class 'app01.models.Publisher'>
和我这本书关联的出版社对象的名字: 下沙出版社 <class 'str'>
查询id是2的书的出版社的名称: <QuerySet [('下沙出版社',)]>

===================================================================================================================================

反向操作

对象查找

语法：

obj.表名_set

示例：

publisher_obj = models.Publisher.objects.first()  # 找到第一个出版社对象
books = publisher_obj.book_set.all()  # 找到第一个出版社出版的所有书
titles = books.values_list("title")  # 找到第一个出版社出版的所有书的书名

字段查找

语法：

表名__字段

示例：

titles = models.Publisher.objects.values_list("book__title")

实践：

    '''
     # 反向查询
     # 1. 基于对象查询
     '''
     publisher_obj = models.Publisher.objects.get(id=2)  # 得到一个具体的对象
     ret = publisher_obj.books.all()
     # ret = publisher_obj.books.all()
     print("查到该出版社关联的书：", ret)

     # 2. 基于双下划线
     ret = models.Publisher.objects.filter(id=1).values_list("books__title")
     print("基于双下划线:", ret)

结果：

要注意以下内容中的publisher_obj.book_set.all(),表示该该出版社对应的书的全部.

前端中同理:

注意：

外键中

ManyToManyField

class RelatedManager

"关联管理器"是在一对多或者多对多的关联上下文中使用的管理器。

它存在于下面两种情况：

1. 外键关系的反向查询
2. 多对多关联关系

简单来说就是当 点后面的对象 可能存在多个的时候就可以使用以下的方法。

实践：

数据表:

以上可以看出小明写了5本书。

程序：

     '''
     # 多对多
     # 查询
     '''
     author_obj = models.Author.objects.first()
     print("第一个作者：", author_obj.name)
     # 查询小明写过的书
     ret = author_obj.books.all()
     print("该作者写过的所有的书：", ret)
     print("输出关联管理器：", author_obj.books, type(author_obj.books))

结果：

第一个作者： 小明
该作者写过的所有的书： <QuerySet [<Book: linux>, <Book: 繁华>, <Book: C++>, <Book: CSS>, <Book: 金老板自传>]>
输出关联管理器： app01.Book.None <class 'django.db.models.fields.related_descriptors.create_forward_many_to_many_manager.<locals>.ManyRelatedManager'>

Process finished with exit code 0

结果小明写了五本书。

方法

create()

创建一个新的对象，保存对象，并将它添加到关联对象集之中，返回新创建的对象。

>>> import datetime
>>> models.Author.objects.first().book_set.create(title="番茄物语", publish_date=datetime.date.today())

add()

把指定的model对象添加到关联对象集中。

添加对象

>>> author_objs = models.Author.objects.filter(id__lt=3)
>>> models.Book.objects.first().authors.add(*author_objs)

添加id

>>> models.Book.objects.first().authors.add(*[1, 2])

set()

更新model对象的关联对象。

>>> book_obj = models.Book.objects.first()
>>> book_obj.authors.set([2, 3])

remove()

从关联对象集中移除执行的model对象

>>> book_obj = models.Book.objects.first()
>>> book_obj.authors.remove(3)

clear()

从关联对象集中移除一切对象。

>>> book_obj = models.Book.objects.first()
>>> book_obj.authors.clear()

注意：

对于ForeignKey对象，clear()和remove()方法仅在null=True时存在。

举个例子：

ForeignKey字段没设置null=True时，

class Book(models.Model):
    title = models.CharField(max_length=32)
    publisher = models.ForeignKey(to=Publisher)

没有clear()和remove()方法：

>>> models.Publisher.objects.first().book_set.clear()
Traceback (most recent call last):
  File "<input>", line 1, in <module>
AttributeError: 'RelatedManager' object has no attribute 'clear'

当ForeignKey字段设置null=True时，

class Book(models.Model):
    name = models.CharField(max_length=32)
    publisher = models.ForeignKey(to=Class, null=True)

此时就有clear()和remove()方法：

>>> models.Publisher.objects.first().book_set.clear()

注意：

1. 对于所有类型的关联字段，add()、create()、remove()和clear(),set()都会马上更新数据库。换句话说，在关联的任何一端，都不需要再调用save()方法。

实践：

 '''
     # 多对多
     # 查询
     '''
     author_obj = models.Author.objects.first()
     print("第一个作者：", author_obj.name)
     # # 查询小明写过的书
     # ret = author_obj.books.all()
     # print("该作者写过的所有的书：", ret)
     # print("输出关联管理器：", author_obj.books, type(author_obj.books))
     #
     # # 1. create
     # # 通过作者创建一本书,会自动保存
     # # 做了两件事：
     # # 1. 在book表里面创建一本新书，2. 在作者和书的关系表中添加关联记录
     # author_obj.books.create(title="金老板自传", publisher_id=2)  # 书名 和 出版社id
     #
     # # 2. add
     # # 在 author_obj 小明 关联的书里面，再加一本id是5的书
     # book_obj = models.Book.objects.get(id=5)
     # author_obj.books.add(book_obj) # author_obj为第一个作者
     #
     # # 添加多个
     # book_objs = models.Book.objects.filter(id__lt=5)
     # author_obj.books.add(*book_objs)  # 要把列表打散再传进去
     # # 直接添加id
     # author_obj.books.add(9)  # 直接给作者添加编号为9的书

     # remove
     # 从 小明 关联的书里面把 自传 删掉
     book_obj = models.Book.objects.get(title="金老板自传")
     author_obj.books.remove(book_obj)
     # 从小明关联的书里面把 id是7的记录 删掉
     author_obj.books.remove(7)  # 直接删id=7的书

     # clear
     # 清空
     # 把 小明 关联的所有书都删掉
     jing_obj = models.Author.objects.get(id=1)
     jing_obj.books.clear()

     # 额外补充的，外键的反向操作
     #
     # 找到id是1的出版社
     publisher_obj = models.Publisher.objects.get(id=2)  # 上图详解
     publisher_obj.books.clear()

聚合查询和分组查询

聚合（aggregate）

aggregate()是QuerySet 的一个终止子句，意思是说，它返回一个包含一些键值对的字典。

键的名称是聚合值的标识符，值是计算出来的聚合值。键的名称是按照字段和聚合函数的名称自动生成出来的。

用到的内置函数：

from django.db.models import Avg, Sum, Max, Min, Count

实践：

数据：

 # 聚合
     from django.db.models import Avg, Sum, Max, Min, Count
     ret = models.Book.objects.all().aggregate(price_avg=Avg("price"))
     print("书的平均价格：", ret)

     ret = models.Book.objects.all().aggregate(price_avg=Avg("price"), price_max=Max("price"), price_min=Min("price"))
     print(ret)
     print(ret.get("price_max"), type(ret.get("price_max")))

结果：

书的平均价格： {'price_avg': 23.91}
{'price_avg': 23.91, 'price_max': Decimal('90.00'), 'price_min': Decimal('0.99')}
90.00 <class 'decimal.Decimal'>

=================================================================================================================================

分组（annotate）

我们在这里先复习一下SQL语句的分组。

数据：

程序：

 # 分组查询

     # 查询每一本书的作者个数
     ret = models.Book.objects.all().annotate(author_num=Count("author"))
     # print(ret)
     for book in ret:
         print("书名：{}，作者数量：{}".format(book.title, book.author_num))  # 书名和作者数

     # 查询作者数量大于1的书                                                  # 过滤
     ret = models.Book.objects.all().annotate(author_num=Count("author")).filter(author_num__gt=1)
     print("查询作者数量大于1的书 :", ret)

     # # 查询各个作者出的书的总价格
     ret = models.Author.objects.all().annotate(price_sum=Sum("books__price")).values_list("name", "price_sum")
     print("作者和其书的总价格：", ret)
     ret = models.Author.objects.all().annotate(price_sum=Sum("books__price"))
     print("是一个作者对象列表：", ret)
     for i in ret:  # i为ret中的一个作者对象
         print(i, i.name, i.price_sum)
     print(ret.values_list("id", "name", "price_sum"))

结果：

书名：linux，作者数量：0
书名：繁花，作者数量：1
书名：C++，作者数量：0
书名：jQuery，作者数量：2
书名：CSS，作者数量：1
书名：金老板自传，作者数量：1
查询作者数量大于1的书 : <QuerySet [<Book: jQuery>]>
作者和其书的总价格： <QuerySet [('小明', Decimal('26.08')), ('小红', Decimal('23.99')), ('小伟', Decimal('0.99')), ('小华', Decimal('0.99'))]>
<QuerySet [<Author: 小明>, <Author: 小红>, <Author: 小伟>, <Author: 小华>]>
小明 小明 26.08
小红 小红 23.99
小伟 小伟 0.99
小华 小华 0.99
<QuerySet [(1, '小明', Decimal('26.08')), (2, '小红', Decimal('23.99')), (3, '小伟', Decimal('0.99')), (4, '小华', Decimal('0.99'))]>

Process finished with exit code 0

小明写了两本书，总共价格26.08元。

F查询和Q查询

F查询

在上面所有的例子中，我们构造的过滤器都只是将字段值与某个常量做比较。如果我们要对两个字段的值做比较，那该怎么做呢？

Django 提供 F() 来做这样的比较。F() 的实例可以在查询中引用字段，来比较同一个 model 实例中两个不同字段的值。

两个字段做数值上的比较。

查询出 库存数 大于 卖出数的 所有书（两个字段做比较）  /   刷单 把第一本书的卖出数 乘以3   /   给每一本书的书名后面加上 第一版

    ret = models.Book.objects.filter(price__gt=9.99)  # 价格大于9.99的书
    print("价格大于9.99的书:", ret)

    # 查询出 库存数 大于 卖出数的 所有书（两个字段做比较）
    from django.db.models import F
    ret = models.Book.objects.filter(store__gt=F("sold"))
    print("库存数 大于 卖出数的 所有书:", ret)

    # 刷单 把第一本书的卖出数 乘以3
    obj = models.Book.objects.first()
    obj.sold = obj.sold * 3
    obj.save()  # 并保存
    # 具体的对象没有update()，QuerySet对象才有update()方法。

    models.Book.objects.update(sold=(F("sold")+1)*3)  # 卖出数乘3

    # 给每一本书的书名后面加上 第一版
    from django.db.models.functions import Concat
    from django.db.models import Value

    models.Book.objects.update(title=Concat(F("title"), Value("(第一版)")))

效果：

Q查询

filter() 等方法中的关键字参数查询都是一起进行“AND” 的。 如果你需要执行更复杂的查询（例如OR语句），你可以使用Q对象。

数据表：

 1      # Q查询
     from django.db.models import Q
     # 查询 卖出数大于1000，并且 价格小于100的所有书
     ret = models.Book.objects.filter(sold__gt=300, price__lt=100)
     print("查询 卖出数大于300，并且 价格小于100的所有书:", ret)
     # 查询 卖出数大于1000，或者 价格小于100的所有书
     ret = models.Book.objects.filter(Q(sold__gt=2000) | Q(price__lt=20))
     print("卖出数大于160，或者 价格小于20的所有书:", ret)
     # Q查询和字段查询同时存在时， 字段查询要放在Q查询的后面
     ret = models.Book.objects.filter(Q(sold__gt=160) | Q(price__lt=100), title__contains="金老板")
     print("包含某内容：", ret)

注意：第10行，如果出现Q 对象，它必须位于所有关键字参数的前面。字段查询要放在Q查询的后面。

结果：

查询 卖出数大于300，并且 价格小于100的所有书: <QuerySet [<Book: linux(第一版)>, <Book: 繁花(第一版)>, <Book: C++(第一版)>, <Book: CSS(第一版)>]>
卖出数大于160，或者 价格小于20的所有书: <QuerySet [<Book: linux(第一版)>, <Book: C++(第一版)>, <Book: jQuery(第一版)>, <Book: 金老板自传(第一版)>]>
包含某内容： <QuerySet [<Book: 金老板自传(第一版)>]>

Process finished with exit code 0

Django终端打印SQL语句

在Django项目的settings.py文件中，在最后复制粘贴如下代码：

LOGGING = {
    'version': 1,
    'disable_existing_loggers': False,
    'handlers': {
        'console':{
            'level':'DEBUG',
            'class':'logging.StreamHandler',
        },
    },
    'loggers': {
        'django.db.backends': {
            'handlers': ['console'],
            'propagate': True,
            'level':'DEBUG',
        },
    }
}

即为你的Django项目配置上一个名为django.db.backends的logger实例即可查看翻译后的SQL语句（复制进setting.py中）。