一.前言 安装环境: Anaconda Ubuntu 二.安装步骤 我们分几步进行,anconda的安装和使用方法就不讲解了.我们直接安装caffe和tensorflow. 1.创建虚拟环境 我们先创建一个用于caffe和tensorflow共存的虚拟环境: conda create -n caffe-tf python=3.6 直接回车,安装即可.安装好后,进入到caffe-tf虚拟环境: source activate caffe-tf 2.安装caffe 我们先安装caffe,一定要先安装…
前言:anaconda是一个python Data Science Platform.安装它的契机是因为要用tensorflow. 安装完后感觉用它来管理python运行环境还是挺方便的,常用的conda命令: 升级conda: conda update conda 安装conda环境: conda create -n env_name python=version_number 卸载conda环境:conda remove -n env_name --all 查看当前所有的conda环境: c…
注意!注意!!注意!!! (重要的事情说三遍) 安装前检查: 1.Tensorflow不支持Anaconda2,Tensorflow也不支持python2.7和python3.7(满满的辛酸泪!) 2.Tensorflow版本和Keras版本越高越好,避免各种Bug 安装过程出现的Bug: 1.报错提示:"from pip._internal.main import main ModuleNotFoundError: No module named 'pip._internal.main&quo…
2019-03-25 17:10:51 Anaconda 给不同的项目创建不同的环境真的非常重要,最近在使用flask的时候在base环境中安装flask-bootstrap,竟然将我原本的py3.7的conda直接删除,完全降到了py2.最后只能重新安装anaconda. 这个事件给我一个启示就是尽量不要在初始环境中安装各种包,而是使用anaconda的环境,来给不同的项目分配各自的环境. Anaconda创建环境: //下面是创建python=3.6版本的环境,取名叫py36 conda c…
Anaconda创建环境: //下面是创建python=3.6版本的环境,取名叫py36 conda create -n py36 python=3.6  删除环境(不要乱删啊啊啊) conda remove -n py36 --all 激活环境 //下面这个py36是个环境名 source activate py36 退出环境 source deactivate 作者:SleepingBug 来源:CSDN 原文:https://blog.csdn.net/H_O_W_E/article/de…
最近在Windows10上安装了caffe和tensorflow,折腾了好久.在此记录一下. 安装caffe的过程已在另一篇博客中进行了记录,在此不再赘述.而tensorflow也是非常简单的,也不再详细说明. 安装caffe和tensorflow比较重要的一点是,要确保把依赖正确安装好.GPU版本的caffe需要7+版本的CUDA和5.5/5.0的CUDNN.而GPU版本的tensorflow在1.5.0以上的版本则需要CUDA9和CUDNN7.两个框架对CUDA和CUDNN的不同要求造成了小…
  本文为原创作品,未经本人同意,禁止转载,禁止用于商业用途!本人对博客使用拥有最终解释权 欢迎关注我的博客:http://blog.csdn.net/hit2015spring和http://www.cnblogs.com/xujianqing 本文主要是介绍在ubuntu16.04下,怎么配置当下流行的深度学习框架,cuda8.0+cudnn+caffe+theano+tensorflow 安装英伟达显卡驱动 首先去官网上查看适合你GPU的驱动 (http://www.nvidia.com/…
紧接着上一篇的文章<深度学习(TensorFlow)环境搭建:(二)Ubuntu16.04+1080Ti显卡驱动>,这篇文章,主要讲解如何安装CUDA+CUDNN,不过前提是我们是已经把NVIDIA显卡驱动安装好了 一.安装CUDA CUDA(Compute Unified Device Architecture),是英伟达公司推出的一种基于新的并行编程模型和指令集架构的通用计算架构,它能利用英伟达GPU的并行计算引擎,比CPU更高效的解决许多复杂计算任务,想使用GPU就必须要使用CUDA.…
昨天想运行一段机器学习的代码,在win10系统下配置了一天的python环境,真的是头疼,准备写篇博客来帮助后面需要配置环境的兄弟. 1.下载Anaconda 根据昨天的经历,发现Anaconda真的是好用.下载地址:https://www.anaconda.com/download/  我下的是64位的 下好后就是安装了,安装过程十分简单,这里就不写了,不过建议是添加到环境变量中去,省的后面还要自己加,麻烦. 在菜单栏中找到Anaconda Prompt,以管理员身份运行.我们需要设置 Ana…
今天动手开始搭建TensorFlow开发环境, 用PyCharm来跑MNIST中的例子.记录过程如下 下载安装 (1)首先安装AnaConda, AnaConda可以帮忙去管理安装包,帮忙创建虚拟环境,有了它连 Python都可以不用单独下载https://www.anaconda.com/download/安装过程很简单 这里有详细的指导https://www.zhihu.com/question/58033789安装好后, 可以参考tensorflow安装说明:https://tensorf…
一.虚拟环境 virtual environment 它是一个虚拟化,从电脑独立开辟出来的环境.通俗的来讲,虚拟环境就是借助虚拟机docker来把一部分内容独立出来,我们把这部分独立出来的东西称作“容器”,在这个容器中,我们可以只安装我们需要的依赖包,各个容器之间互相隔离,互不影响.譬如,本次学习需要用到Django,我们可以做一个Django的虚拟环境,里面只需要安装Django相关包就可以了,需要Scrapy库,就在开辟一个独立空间来学习Scrapy库相关就行了. 二 .为什么要用虚拟环境…
title: Machine-learning subtitle: 1. 机器学习之TensorFlow编程环境_TensorFlow_Estimator date: 2018-12-13 10:17:28 --- 1. 预创建的 Estimator 本文档介绍了 TensorFlow 编程环境,并展示了如何在 TensorFlow 中解决鸢尾花分类问题. 安装TensorFlow TensorFlow在以下64位系统上经过测试和支持: Ubuntu 16.04或更高版本 Windows 7或更…
最近我在用Macbook Pro练习PyTorch的时候,发现明明在终端已经用pip安装了PyTorch,但在pycharm运行时总是报错:No module named torch. 但是我把同样的代码用Spyder跑就没有问题,感动很费解,找了很多资料,终于弄明白了.原来Pycharm.Spyder和终端用的不是同一个环境,在终端安装的地方没有用在pycharm里面. 下面记录一下解决办法: 1.安装Anaconda3之后,有一个Anaconda Navigator应用程序,打开它,可以在其…
conda+豆瓣源配置tensorflow+keras环境 安装anaconda 打开Anaconda Prompt 创建虚拟环境 conda create -n myenv python=3.5 activate myenv 安装dependency pip install keras==2.0.8 -i https://pypi.douban.com/simple/ pip install tensorflow==1.1 -i https://pypi.douban.com/simple/…
Tensorflow开发环境配置及其基本概念 1.1. 安装Tensorflow开发环境 1.1.1. 安装pycharm 1.1.2. 安装pythe3.6 1.1.3. 安装Tensorflow 1.2. Tensorflow基本概念 1.2.1. 声明Tensor 1.2.2. 变量和占位符 1.2.2.1. 变量 1.2.2.2. 占位符 1.2.3. 计算图(The Computational Graph) 1.2.4. 矩阵操作 1.2.5. 声明运算符 1.1. 安装Tensorf…
库名称 开发语言 支持接口 安装难度(ubuntu) 文档风格 示例 支持模型 上手难易 Caffe c++/cuda c++/python/matlab *** * *** CNN ** MXNet c++/cuda python/R/Julia ** *** ** CNN/RNN * TensorFlow c++/cuda/python c++/python * ** * CNN/RNN/- *** 安装难度: (简单) –> **(复杂) 文档风格: (一般) –> **(好看.全面)…
Google发布了TensorFlow1.4正式版 在anaconad搜索依旧是1.2的版本,通过一番查阅,找到了方法 1,打开anaconda-prompt 2,激活你要安装的环境 activate 环境名称 3,查看各个版本: anaconda search -t conda tensorflow 4,找到自己pc环境对应的最新TensorFlow后,查看安装命令 anaconda show <USER/PACKAGE> 5,输入y,确认要下载安装的包就可以了. 6,查看版本和安装路径,…
在单GPU下,所有这些工具集都调用cuDNN,因此只要外层的计算或者内存分配差异不大其性能表现都差不多. Caffe: 1)主流工业级深度学习工具,具有出色的卷积神经网络实现.在计算机视觉领域Caffe仍然是最流行的工具包,他有很多扩展,但是由于 一些遗留的架构问题,它对递归网络和语言建模的支持很差.此外,在caffe种图层需要使用C++定义,而网络则使用protobuf定义. 2)caffe支持pycaffe接口,但这仅仅是用来辅助命令行接口的,而即便是是使用pycaffe也必须使用Proto…
其实我一直都在想,搞算法的不仅仅是服务,我们更是要在一个平台上去实现服务,因此,在工业领域,板子是很重要的,它承载着无限的机遇和挑战,当然,我并不是特别懂一些底层的东西,但是这篇博客希望可以帮助有需要的人. 首先我们回到原点,就是jetpack 3.3刷完机后,现在要装tensorflow和keras.自然的,我们可以想到,需要 miniconda或anaconda cuda和cudnn tensorflow keras 其实jetpack3.3里面已经有了python2和cuda9.0,cud…
前几天把刚拿到了2台GPU机器组装好了,也写了篇硬件配置清单的文章——<深度学习(TensorFlow)环境搭建:(一)硬件选购和主机组装>.这两台也在安装Ubuntu 16.04和1080Ti显卡驱动,在安装Ubuntu的时候,踩过无数个坑,心力憔悴(...(。•ˇ‸ˇ•。)…),因此将踩过的坑以及对于的解决方案汇总出来,让大家少踩那些坑,过程实在是太磨人了. 一.配置 系统:Ubuntu16.04.3 GPU:GTX1080Ti 二.总体流程步骤 安装Ubuntu16.04 安装1080T…
库名称 开发语言 支持接口 安装难度(ubuntu) 文档风格 示例 支持模型 上手难易 Caffe c++/cuda c++/python/matlab *** * *** CNN ** MXNet c++/cuda python/R/Julia ** *** ** CNN/RNN * TensorFlow c++/cuda/python c++/python * ** * CNN/RNN/… *** 安装难度: (简单) –> **(复杂) 文档风格: (一般) –> **(好看.全面)…
TensorFlow CPU环境 SSE/AVX/FMA 指令集编译 sess.run()出现如下Warning W tensorflow/core/platform/cpu_feature_guard.cc:45] The TensorFlow library wasn't compiled to use SSE4.1 instructions, but these are available on your machine and could speed up CPU computation…
配置GitHub 和Gitee共存环境 前言 Git共有三个级别的config文件,分别是system.global和local 在当前环境中,分别对应 %GitPath%\mingw64\etc\gitconfig 文件 %RepoPath%\.git\config 文件 $home\.gitconfig 文件 note: 其中%GitPath%为 Git的安装路径,%RepoPath%为某仓库的本地路径. 所以 system 配置整个系统只有一个,global 配置每个账户只有一个,而 lo…
Anaconda 创建 32位python虚拟环境 ​ 最近实习在做一个接口自动化数据上传的功能,因为数据是更新的,需要每次上传都查询数据库调用匹配,就不得不面对 python 连接 oracle .一直很排斥这玩意,我觉得python连接oracle是一个很蹩脚的东西.网上教程其实挺多的,首先安装cx_oracle,安装的时候要注意两个东西: oracle-client架构(有64,也有32) python 架构(一般是64位) ​ 然后python oracle-client 和cx_ora…
[源码解析] TensorFlow 分布式环境(1) --- 总体架构 目录 [源码解析] TensorFlow 分布式环境(1) --- 总体架构 1. 总体架构 1.1 集群角度 1.1.1 概念 1.1.2 示意图 1.1.3 创建 1.1.3.1 创建集群 1.1.3.2 创建任务 1.1.3.3 指定设备 1.2 分布式角度 1.2.1 概念 1.2.2 示意图 1.3 系统角度 1.3.1 概念 1.3.2 示意图 1.4 图操作角度 1.5 通信角度 2. Server 2.1 接…
[源码解析] TensorFlow 分布式环境(2)---Master 静态逻辑 目录 [源码解析] TensorFlow 分布式环境(2)---Master 静态逻辑 1. 总述 2. 接口 2.1 接口规范 2.2 MasterInterface 2.3 调用 3. LocalMaster 3.1 定义 3.2 注册 3.3 查找 3.4 功能 4. GrpcRemoteMaster 4.1 定义 4.2 功能 4.2.1 CreateSession 4.2.2 Master Service…
[源码解析] TensorFlow 分布式环境(3)--- Worker 静态逻辑 目录 [源码解析] TensorFlow 分布式环境(3)--- Worker 静态逻辑 1. 继承关系 1.1 角色概念 1.2 接口 1.3 WorkerInterface 派生类 2. GrpcRemoteWorker 2.1 定义 2.2 生成 2.3 发送请求 3. Worker Service 3.3.1 WorkerInterface 3.3.2 概念梳理 3.3.4 WorkerInterface…
[源码解析] TensorFlow 分布式环境(4) --- WorkerCache 目录 [源码解析] TensorFlow 分布式环境(4) --- WorkerCache 1. WorkerCache 1.1 如何使用 1.2 配置 1.3 工厂类 1.3.1 ParseChannelSpec 1.3.2 NewGrpcChannelCache 1.3.3 NewGrpcWorkerCacheWithLocalWorker 1.4 WorkerCacheInterface 1.4.1 接口…
[源码解析] TensorFlow 分布式环境(5) --- Session 目录 [源码解析] TensorFlow 分布式环境(5) --- Session 1. 概述 1.1 Session 分类 1.2 会话流程 1.2.1 MasterSession 生命周期 1.2.2 WorkerSession 生命周期 2. GrpcSession 2.1 定义 2.2 注册&工厂类 2.3 创建GrpcSession 2.4 创建MasterSession 2.4.1 GrpcRemoteMa…
[源码解析] TensorFlow 分布式环境(6) --- Master 动态逻辑 目录 [源码解析] TensorFlow 分布式环境(6) --- Master 动态逻辑 1. GrpcSession 1.1 运行 1.2 GrpcRemoteMaster 2. Master 2.1 总体概述 2.2 建立 & 剪枝 2.2.1 建立计算图 2.2.2 剪枝 2.3 切分注册 2.2.1 原理 2.2.2 配置 2.2.3 切分 2.2.3.1 Partition 2.2.3.2 AddD…