以图搜图功能实现(windows10版)
1,原理
存储:通过Core项目调取python接口,python通过使用towhee把图片转成向量存在milvus向量数据库中。
查询:通过Core项目调取python接口,python根据查询的图片,转成向量数据,再在向量数据库中根据L2模式进行相近查询
2,安装
2.1安装docker
2.1.1 在windows功能中打开Hyper-V 和 容器
2.1.2 进入https://www.docker.com/ ,下载windows版本进行安装
2.2安装Milvus
milvus官网地址:https://milvus.io/
2.2.1 在任意一个盘符下创建一个文件夹(可以任意起名,例如dockermilvus),在dockermilvus中创建五个文件夹,分别为conf,db,logs,pic,wal。在conf中存放docker-compose.yml和server_config.yaml文件。
注:docker-compose.yml是在https://github.com/milvus-io/milvus/releases/download/v2.0.2/milvus-standalone-docker-compose.yml 这个路径下下载,并改名为docker-compose.yml.
2.2.2 使用命令提示符进入dockermilvus/conf文件夹中,执行docker-compose up -d 命令,执行安装。安装成功后再次执行此docker-compose up -d命令,查看安装文件运行状态。
2.2.3 在命令提示符中执行 docker run -p 3000:3000 -e HOST_URL=http://192.168.10.171:3000 -e MILVUS_URL=192.168.10.171:19530 milvusdb/milvus-insight:latest 命令(运行数据库进入界面,数据库网页界面须通过3000接口进入19530接口界面)。
2.2.4 milvus数据库迁移部署:
1》把docker中运行的milvus镜像打包成.tar文件
2》在命令提示符中进入个空文件夹中,执行命令
docker save -o minio.tar minio/minio
docker save -o etcd.tar quay.io/coreos/etcd
docker save -o milvus-insight.tar milvusdb/milvus-insight
docker save -o milvus.tar milvusdb/milvus
3》在另一台电脑安装docker,在创建个文件夹(dockermilvus),文件中创建conf,db,logs,pic,wal五个文件夹,conf文件夹中放docker-compose.yml和server_config.yaml文件。
4》minio.tar,etcd.tar,milvus-insight.tar,milvus.tar 这四个文件放到dockermilvus文件夹中
5》执行docker load -i minio.tar
docker load -i etcd.tar
docker load -i milvus-insight.tar
docker load -i milvus.tar
docker load -i minio.tar
6》在命令提示符中进入conf中执行docker-compose up -d
7》再进入dockermilvus文件夹中执行命令:docker load -i milvusdb/milvus-insight.tar
8》在命令提示符中执行 docker run -p 3000:3000 -e HOST_URL=http://192.168.10.171:3000 -e MILVUS_URL=192.168.10.171:19530 milvusdb/milvus-insight:latest 命令
2.3 docker搭建python运行环境容器
Python版本3.8.6
2.3.1,创建个新的文件夹pyContainer,pyContainer文件夹中创建ty文件夹(这里放python代码),
2.3.2,pyContainer文件夹中创建Dockerfile文件,没有后缀。
文件内容:
# 建立 python3.7 环境
FROM python:3.8
# 镜像作者
MAINTAINER LALALA
# 设置 python 环境变量
ENV PYTHONUNBUFFERED 1
# 设置pip源为国内源
COPY pip.conf /root/.pip/pip.conf
# 在容器内创建mysite文件夹
RUN mkdir -p /var/www/html/mysite
# 设置容器内工作目录
WORKDIR /var/www/html/mysite
# 将当前目录文件加入到容器工作目录中(. 表示当前宿主机目录)
ADD . /var/www/html/mysite
RUN pip install towhee
# pip安装依赖
RUN pip install -r requirements.txt
RUN mkdir -p /app/
ADD /ty /app
WORKDIR /app/
EXPOSE 8000 #对外端口
CMD ["python", "manage.py", "runserver", "0.0.0.0:8000"] 对内端口
2.3.3 pyContainer文件夹中创建pip.conf文件
文件内容:
[global]
index-url = https://pypi.tuna.tsinghua.edu.cn/simple
[install]
trusted-host=mirrors.aliyun.com
2.3.4 pyContainer文件夹中创建requirements.txt
文件内容:
Django==3.2.12
towhee==0.9.0
pymilvus==2.2.1
2.3.5 在命令提示符中进入pyContainer文件夹,执行命令docker build -t mm_python .
2.3.6 在命令提示符中执行命令docker run -it -d- p 9111:8000 mm_python启动容器。
注意:启动容器后,通过9111端口请求python接口,这时容器会在git上下载容器内缺少的环境依赖(如CV2,resnet50_a1_0-14fe96d1.pth等,这个大概需要下载9G左右的环境包)
2.3.7 把容器生成镜像,再打包
在命令提示符中执行命令
docker commit -a "镜像作者" -m "说明" a404c6c174a2 pycontainer:v1
a404c6c174a2 --- 容器Id
pycontainer:v1 --- 镜像名称
2.3.8 打包镜像
docker save -o pycontainer.tar pycontainer
2.3.9 在其他docker中打开镜像包
docker load -i pycontainer.tar
2.3.10 运行镜像
docker run -it -d -p 9111:8000 pycontainer
以图搜图功能实现(windows10版)的更多相关文章
- 以图搜图(一):Python实现dHash算法(转)
近期研究了一下以图搜图这个炫酷的东西.百度和谷歌都有提供以图搜图的功能,有兴趣可以找一下.当然,不是很深入.深入的话,得运用到深度学习这货.Python深度学习当然不在话下. 这个功能最核心的东西就是 ...
- Google 以图搜图 - 相似图片搜索原理 - Java实现
前阵子在阮一峰的博客上看到了这篇<相似图片搜索原理>博客,就有一种冲动要将这些原理实现出来了. Google "相似图片搜索":你可以用一张图片,搜索互联网上所有与它相 ...
- Google 以图搜图 - 相似图片搜索原理 - Java实现 (转)
前阵子在阮一峰的博客上看到了这篇<相似图片搜索原理>博客,就有一种冲动要将这些原理实现出来了. Google "相似图片搜索":你可以用一张图片,搜索互联网上所有与它相 ...
- 以图搜图之模型篇: 基于 InceptionV3 的模型 finetune
在以图搜图的过程中,需要以来模型提取特征,通过特征之间的欧式距离来找到相似的图形. 本次我们主要讲诉以图搜图模型创建的方法. 图片预处理方法,看这里:https://keras.io/zh/prepr ...
- 使用 selenium 实现谷歌以图搜图爬虫
使用selenium实现谷歌以图搜图 实现思路 原理非常简单,就是利用selenium去操作浏览器,获取到想要的链接,然后进行图片的下载,和一般的爬虫无异. 用到的技术:multiprocessing ...
- [No000007]搜索引擎以图搜图的原理
之前,Google把"相似图片搜索"正式放上了首页. 你可以用一张图片,搜索互联网上所有与它相似的图片.点击搜索框中照相机的图标. 一个对话框会出现. 你输入网片的网址,或者直接上 ...
- php 以图搜图
感知哈希算法count < =5 匹配最相似count > 10 两张不同的图片var_dump(ImageHash::run('1.jpg’, '2.jpg’)); <?php c ...
- 谷歌百度以图搜图 "感知哈希算法" C#简单实现
/// <summary> /// 感知哈希算法 /// </summary> public class ImageComparer { /// <summary> ...
- iOS去广告最简单方案!+以图搜漫
iOS去广告 ️推荐 | 通过下载.安装.启用(一般默认启用)描述文件,即可实现通过私人dns来达到全系统的广告拦截.隐私保护功能 ️注意: 限 iOS 14 及以上版本系统使用 复制链接需在 saf ...
- protel DXP的类矢量图功能
一.概述 在写论文的过程中,我们经常需要将protel DXP上的原理图贴入到WORD中.我们可以选择使用截图工具,然后再导入到WORD中.但是由于普通截图图形文件都是位图文件,当我们将图形文件导入W ...
随机推荐
- [python] 向量检索库Faiss使用指北
Faiss是一个由facebook开发以用于高效相似性搜索和密集向量聚类的库.它能够在任意大小的向量集中进行搜索.它还包含用于评估和参数调整的支持代码.Faiss是用C++编写的,带有Python的完 ...
- 升级csproj文件为vs2017工程格式(SDK样式)
csproj文件在VS2017后格式变更为SDK样式.framework项目如果需要源链接等等功能,需要进行手动升级. 升级过程 升级需要Project2015To2017Nuget包. > d ...
- 1. 使用 fluent-bit 采集文件
1. 使用 fluent-bit 采集文件 简介 Fluent Bit是一款快速.灵活的日志处理器,旨在收集.解析.过滤日志,并将日志发送到远程数据库,以便执行数据分析. 数据分析通常发生在数据存储和 ...
- 真正“搞”懂HTTP协议09之这个饼干不能吃
我们在之前的文章中介绍HTTP特性的时候聊过,HTTP是无状态的,每次聊起HTTP特性的时候,我都会回忆一下从前辉煌的日子,也就是互联网变革的初期,那时候其实HTTP不需要有状态,就是个浏览页面,没有 ...
- Goby安装与使用
前言 Goby是一款基于网络空间测绘技术的新一代网络安全工具,它通过给目标网络建立完整的资产知识库,进行网络安全事件应急与漏洞应急. Goby可提供最全面的资产识别,目前预置了超过10万种规则识别引擎 ...
- Flutter新版本2.X系列--01创建项目
1.新建项目,打开Android studio,点击红圈部分 2.选择第一个 3.设置你的项目名称,flutter sdk位置,以及项目存储路径 4.设置包名,这个要唯一 5.好啦 ~ 作为一名前端开 ...
- day14-JdbcTemplate-01
JdbcTemplate-01 看一个实际需求: 如果希望使用spring框架做项目,Spring框架如何处理对数据库的操作呢? 方案一:使用之前的JdbcUtils类 方案二:spring提供了一个 ...
- JavaScript 中更安全的 URL 读写
前言 URL对于我们开发人员来讲,应该是非常熟悉了.在对URL进行参数拼接时,我们一般都会直接进行字符串拼接或使用模版字符串,因为这样非常方便,但是我们这样其实会在不知不觉中以不安全的方式编写 URL ...
- Scanner概述-Scanner使用步骤
Scanner概述 了解了API的使用方式,我们通过Scanner类,熟悉一下查询API,并使用类的步骤. 什么是Scanner类 一个可以解析基本类型和字符串的简单文本扫描器. 例如,以下代码使用户 ...
- Task记录1.CancellationToken 取消Task任务的操作
//1.创建取消令牌数据 CancellationTokenSource tokenSource = new CancellationTokenSource(); //2.创建取消令牌 Cancell ...