最近听了一个关于大数据的大牛的经验分享,在分享的最后大牛给我们一个他之前写好的关于大数据和地理应用demo.这个demo需要在Linux环境上搭建Hadoop平台.这次就简单的分享一下我关于在 Linux虚拟机上搭建Hadoop平台的一些经验和遇到的一些问题以及问题的解决办法. 首先我们这次搭建的环境是hadoop.hadoop实现了分布式文件系统,它可以部署在一些廉价的硬件环境上,并且提供了高吞吐量来访问应用程序的数据,非常适合那些有着大数据集的应用程序.而且最重要的是,hadoop是开源的.…
1. 更新和安装依赖项 在编译安装uhd和gnuradio之前,确保已安装所需依赖项.Ubuntu系统运行: sudo apt-get update 安装UHD和GNURadio所需依赖项: On Ubuntu 16.04 systems, run: libusb--dev libudev-dev libncurses5-dev libfftw3-bin libfftw3-dev libfftw3-doc libcppunit--dev fort77 libsdl1.-dev python-wx…
Legacy安装win7和Ubuntu14.04双系统 安装环境 Legacy启动模式(传统引导) 笔记本已安装win7 硬盘启动顺序为: U盘 硬盘 光驱 安装方法 制作U盘启动盘 在Ubuntu官网下载的64位镜像,切记网速不稳定的同学要记得校验md5码.然后用软通碟UltraISO软件刻录U盘启动盘. 做好备份 毫无疑问,新手必备,信心满满不做也行. 前期工作 在win7下右击计算机 - 管理 - 磁盘管理,选择一个较大的分区,新建卷(建议50G或以上,至少20G,不然用户体验不高),然后…
DL服务器主机环境配置(ubuntu14.04+GTX1080+cuda8.0)解决桌面重复登录 前面部分是自己的记录,后面方案部分是成功安装驱动+桌面的正解 问题的开始在于:登录不了桌面,停留在重复输入密码界面 博文中分析的结论: 虚拟机中不能直接调用物理显卡进行 CUDA 编程:虚拟机中运行 CUDA 需要硬件和软件的配合才能使用,对于一般使用者可能暂时不太可能的. 参考博文: 深度学习主机环境配置: Ubuntu16.04+Nvidia GTX 1080+CUDA8.0 深度学习主机环境配…
其实,基本思路跟如下差不多,我就不多详细说了,贴出主要图. 博主,我是直接借鉴下面这位博主,来进行安装的!(灰常感谢他们!) 在线和离线安装Cloudera CDH 5.6.0  Cloudera Manager 5和CDH5离线安装 Ubuntu14.04用apt在线/离线安装CDH5.1.2[Apache Hadoop 2.3.0 https://www.zybuluo.com/ncepuwanghui/note/474966  ClouderManager官网 https://www.cl…
特别说明: Caffe 官网地址:http://caffe.berkeleyvision.org/ 本文为作者亲自实验完成,但仅限用于学术交流使用,使用本指南造成的任何不良后果由使用者自行承担,与本文作者无关,谢谢!为保证及时更新,转载请标明出处,谢谢! 本文旨在为新手提供一个参考,请高手勿要吐槽,有暴力倾向者,请绕道,谢谢! 本文使用2016年3月22日下载的caffe-master版本,运行平台为:Ubuntu 14.04,CUDA7.0,cuDNN v4,Intel Parallel St…
详细步骤见原链接:http://brianway.github.io/2016/01/18/linux-win7-ubuntu-setup-by-USBandCD/ 安装Linux步骤 1. 在win7中为Linux预留一个硬盘空间 一般,我们是在已经安装好win7的情况下,进行Linux系统安装. 2. 在win7中将Linux系统刻录到U盘中 教程:http://blog.csdn.net/liangcaiyun2013/article/details/10410797 3. 插入U盘按照引…
首先强调,我们实验室的机器是3.3w的机器,老板专门买来给我们搞深度学习,其中显卡是NVIDIA GeForce  GTX1080(最近新出的,装了两块),cpu是intel i7处理器3.3Ghz,主板华硕,两个480固态硬盘 ,内存16G,磁盘1T容量,这个配置真是没得说,刚买来2个礼拜,最近重装几次ubuntu,开机变得特别慢,不知道为什么,囧! ---------------------------------------------------------------分割线------…
一.去ubuntu官网下载长期支持版的系统,64位还是32位由物理内存而定,4G以下用32位,4G以上(包括4G)使用64位. 二.若64位的系统,下载下来的文件名应该是ubuntukylin-14.04.1-desktop-amd64.iso.然后将其刻录进DVD光盘中,使NERO就可以,不建议使用Ustraiso. (PS:我使用的是老师给的优盘,是ubuntu 14.04.3) 三.如果是XP系统,使用diskgenius软件,压缩出60G左右的空间:如果是Windows7或Windows…
第一步:准备安装软件 httpd-2.4.7.tar.gz, apr-1.4.6.tar.gz, apr-util-1.4.1.tar.gz,mysql-5.5.tar.gz,php-5.4.tar.gz 第二步:安装准备环境 yum -y instal gcc gcc-c++ ncurses-devel python-devel libxml2 libxml2-devel libxpm-dev libtool libtool-ltdl pcre-devel -----安装libmcrypt--…