caffe实战笔记
Caffe简要介绍:
Caffe还没有windows版本,所以我需要远程登录linux服务器
Caffe主要处理图片/图片序列
Caffe读取的数据格式
从专用的数据库中读取(lmdb、leveldb) |
直接读取图片 |
从内存中读取(会占很多内存) |
从HDF5文件中读取 |
从滑动窗口中读取(在大图中滑动一次作为一张小图) |
最常用的是前面两种方式。默认是从lmdb数据库格式中读取,因此需要先把图片文件转换成lmdb格式文件。直接读取图片会导致无法减均值。如果不考虑减均值的情况,可直接读取图片。
Caffe操作1----准备数据
Step1:得到文件列表清单
上面的图片源自FER库,其中单张图表示一个表情,写代码自动生成txt文档
Step2:转换成imdb格式
命令原理:
其中包括上面四个参数,粉色参数可以选择不设,其中--表示可以不调整
实际操作:
在根目录home下的/caffe路径下打开终端,输入sudo命令,输入密码,进入最大权限:
输入命令:(输入时注意空格)
在caffe中,作者为我们提供了这样一个文件:convert_imageset.cpp,存放在根目录下的tools文件夹下。编译之后,生成对应的可执行文件放在 buile/tools/ 下面,这个文件的作用就是用于将图片文件转换成caffe框架中能直接使用的imdb文件。
屏幕上显示:
查看结果:
在目标目录下新增了我命名的一个文件夹
文件夹里包括两个子文件,data.mdb存放数据;lock.mdb存放标签
基础知识补充
Linux下的文件夹与目录
/home |
根目录,分区时分得最大 |
/bin |
存放系统命令 |
/user |
最大的目录,存放应用程序和文件 |
/etc |
存放配置文件 |
/dev |
设备特殊文件 |
/mnt |
用于临时挂载硬盘、光盘 |
/src |
里面放源文件如cpp |
如何生成train.txt文件以及如何在转imdb格式时调整图片格式,见:http://www.cnblogs.com/denny402/p/5082341.html
Step3:计算均值
减去均值,可以提高精度。当然也可以选择不减均值。
扩展名必须是binaryproto
实际代码:
其中包括两个参数,一个是放置imdb数据的文件地址,另一个是保存均值文件的地址及文件名字
得到binarypro均值文件
扩展阅读:http://www.cnblogs.com/denny402/p/5102328.html
Caffe操作2----构建网络结构
在运行的整个流程中,可以分为三个阶段:训练阶段、验证阶段和测试阶段。网络结构在不同的阶段是不同的,都存放在prototxt文件里面。为了方便,一般将训练阶段和验证阶段的网络结构放在一个文件里,测试阶段的网络结构单独放在一个文件里:
一个layer表示一层
layer是可以复制可以嵌套的
1)数据层
Name可以随便取
Type是系统自带的,不可以自己命名
Top表示向上传送数据,bottom表示从下面接收数据,通过这个top还是bottom就决定了数据的流向以及不同层之间的链接关系
Phase:train表示只有训练时调用这层
Mirror表示翻转
Cropsize表示一张图变为40*40*10,使得样本数增加
Batchsize是2的倍数,表示批量处理
http://www.cnblogs.com/denny402/p/5070928.html
2)卷积层
Decay=0表示不衰减
Num_output 卷积核个数/节点数目
Kernal_size 一般是3*3 5*5 7*7 不能太大
Padding 卷积后图变小,所以固定填充0,如果=2,表示周边上下左右填充2个pixel
Gaussian表示用高斯方法对w与b进行初始化
http://www.cnblogs.com/denny402/p/5071126.html
3)激活层
常用relu,sigmod
http://www.cnblogs.com/denny402/p/5072507.html
4)池化层
caffe只支持max和average,stochastic是随机的意思
Stride不能写1,否则就没有池化功能
http://www.cnblogs.com/denny402/p/5071126.html
5)全连接层
Xvaier初始化方法很好,默认值为0
Type类型都不变
http://www.cnblogs.com/denny402/p/5072746.html
6)其它层
Loss层加在全连接层后面
如果要测试,还加一层softmax层
Deploy.prototxt文件用于测试阶段,测试数据没有标签值,因此数据输入层与其它两个阶段不同。
Caffe自动会复制灰度图变为3通道图
Caffe操作3----配置参数solver.prototxt
这里设置全局参数
每训练完成一个interval以后就验证一次是否>449
基础学习率决定收敛不收敛
Step:每隔多少变化一次
Stepshot:每训练多少保存一次参数
http://www.cnblogs.com/denny402/p/5074049.html
Caffe操作4----训练模型
这一步会生成caffe 的model文件,把参数训练完成
例:
build/tools/caffe train -solver /home/bnu/fer/solver.prototxt
http://www.cnblogs.com/denny402/p/5076285.html
Caffe操作5----测试模型
Classification.bin是自带的可执行体
http://www.cnblogs.com/denny402/p/5111018.html
caffe实战笔记的更多相关文章
- Caffe学习笔记2--Ubuntu 14.04 64bit 安装Caffe(GPU版本)
0.检查配置 1. VMWare上运行的Ubuntu,并不能支持真实的GPU(除了特定版本的VMWare和特定的GPU,要求条件严格,所以我在VMWare上搭建好了Caffe环境后,又重新在Windo ...
- mysql颠覆实战笔记(五)--商品系统设计(二):定时更新商品总点击量
继续回到沈老师的MYSQL颠覆实战,首先回顾下上一节课的内容,请大家会看下上节课写的存储过程. 打开prod_clicklog表, 我们只要把日期(不含时分秒)的部分存在数据库中, 如果同一日期有相同 ...
- mysql颠覆实战笔记(四)--商品系统设计(一):商品主表设计
版权声明:笔记整理者亡命小卒热爱自由,崇尚分享.但是本笔记源自www.jtthink.com(程序员在囧途)沈逸老师的<web级mysql颠覆实战课程 >.如需转载请尊重老师劳动,保留沈逸 ...
- mysql颠覆实战笔记(一)--设计一个项目需求,灌入一万数据先
版权声明:笔记整理者亡命小卒热爱自由,崇尚分享.但是本笔记源自www.jtthink.com(程序员在囧途)沈逸老师的<web级mysql颠覆实战课程 >.如需转载请尊重老师劳动,保留沈逸 ...
- mysql颠覆实战笔记(七)--白话理解事务
今天我们学习web开发级mysql颠覆实战课程第9课没MYSQL事务(一):白话理解事务.前面有两节课第7讲:商品系统设计(四):商品属性设计之自定义属性,第8讲:商品系统设计(五):一维属性的商品价 ...
- mysql颠覆实战笔记(六)--商品系统设计(三):商品属性设计之固定属性
今天我们来讲一下商品属性 我们知道,不同类别的商品属性是不同的. 我们先建一个表prod_class_attr:
- mysql颠覆实战笔记(三)-- 用户登录(二):保存用户操作日志的方法
版权声明:笔记整理者亡命小卒热爱自由,崇尚分享.但是本笔记源自www.jtthink.com(程序员在囧途)沈逸老师的<web级mysql颠覆实战课程 >.如需转载请尊重老师劳动,保留沈逸 ...
- mysql颠覆实战笔记(二)-- 用户登录(一):唯一索引的妙用
版权声明:笔记整理者亡命小卒热爱自由,崇尚分享.但是本笔记源自www.jtthink.com(程序员在囧途)沈逸老师的<web级mysql颠覆实战课程 >.如需转载请尊重老师劳动,保留沈逸 ...
- Unity3D项目实战笔记(10):Unity3D编译IPA的PostEvents–节约时间利器
最近,SDK支付等接入差不多了,就从Unity3D生成IPA (企业版License), 然,需要手动执行的PostEvents竟然多大10项+, 这些我默默的承受了1周时间,每次约浪费20分钟-额外 ...
随机推荐
- [kuangbin带你飞]专题九 连通图B - Network UVA - 315
判断割点的性质: 如果点y满足 low[y]>=dfn[x] 且不是根节点 或者是根节点,满足上述式子的有两个及其以上. 就是割点 如果是起点,那么至少需要两个子节点满足上述条件,因为它是根节点 ...
- 解析xml的方式
1.DOM 理论:将标记文档语言一次性加载进内存,在内存中形成DOM树. 优点:操作方便,可以对文档进行CRUD(增删改查)操作,适用于服务端操作 缺点:占内存,不适用与手机,智能家居等内存容量小的设 ...
- 洛谷P2486 [SDOI2011]染色 题解 树链剖分+线段树
题目链接:https://www.luogu.org/problem/P2486 首先这是一道树链剖分+线段树的题. 线段树部分和 codedecision P1112 区间连续段 一模一样,所以我们 ...
- [转]1.2 java web的发展历史
前言 了解java web的发展历史和相关技术的演进历程,非常有助于加深对java web技术的理解和认识. 阅读目录 1.Servlet的出现 2.Jsp的出现 3.倡导了MVC思想的Servlet ...
- 2018-4-29-C#-金额转中文大写
title author date CreateTime categories C# 金额转中文大写 lindexi 2018-04-29 09:50:38 +0800 2018-04-02 21:4 ...
- H3C 入站包过滤工作流程
- #干货#小微信贷风控中类IPC模式和集中审批模式
浅析小微信贷风控中类IPC模式和集中审批模式 席占斌 常言道瑕不掩瑜,反过来讲瑜自然也不能掩瑕,看问题需要客观公正辩证. 在小微信贷中,风控模式依旧是核心,目前比较流行和占比较大的风控模式有很经典的I ...
- Vue-axios 在vue cli中封装
common/post.js import axios from 'axios' // 引入axios import qs from 'qs' // 引入qs axios.defaults.baseU ...
- linux oops 消息
大部分 bug 以解引用 NULL 指针或者使用其他不正确指针值来表现自己的. 此类 bug 通 常的输出是一个 oops 消息. 处理器使用的任何地址几乎都是一个虚拟地址, 通过一个复杂的页表结构映 ...
- tf.truncates_normal()
转载自:https://blog.csdn.net/uestc_c2_403/article/details/72235565 tf.truncated_normal(shape, mean, std ...