R语言无网络安装R包,彻底解决依赖问题!
R version: 3.5.3, 3.6.3
更新日期: 2020-9-10
大家测试后多提建议哈, 有问题我会持续更新的
在工作中,我们使用的服务器通常是不能联外网的,这在安装R包的时候产生了巨大的不便。网上有很多帖子使用tools::package_dependencies这个工具下载依赖,但是这个工具是有坑的,相信尝试过的同学依然会发现有些依赖包在下载时被漏掉了,查了很多帖子,这个问题一直没有很好的解决。
今天,我就来解决这个问题,一来,方便自己,二来,服务他人。
我们就用R自己来解决自己的问题吧!
在本地有网络的环境中下载需要的R包:
library(rvest)
library(stringi)
library(stringr)
dir <- 'c:/work/R/packages/' # 设置一个空目录存放R包
pknames <- c('Seurat') # 这是想要安装的包名称,可以设定多个包哦
第一个函数,用于生成repo的下载地址:
get_addr <- function(name,repo='https://cloud.r-project.org/'){
addr <- paste0(repo,'web/packages/',name,'/index.html')
return(addr)
}
第二个函数,获得一个包的次级依赖:
get_dep <- function(name){
addr <- get_addr(name)
gettry <- try(page <- read_html(addr),silent = T)
if('try-error' %in% class(gettry)){
return('-')
}
gettry <- try(pkg_table <- page %>% html_node("table") %>% html_table(fill = TRUE),silent = T)
if('try-error' %in% class(gettry)){
return('-')
}
dep_pkgs1 <- c()
dep_pkgs2 <- c()
if(length(which(pkg_table[,1]=='Imports:'))>0 ){
tmp <- str_replace_all(pkg_table[which(pkg_table[,1]=='Imports:'),2],'\\(.*?\\)','')
tmp <- str_split(tmp,'\\,')[[1]]
tmp <- str_replace_all(tmp,'\\(.*\n.*\\)','')
dep_pkgs1 <- trimws(tmp, which = c("both", "left", "right"))
# return(dep_pkgs)
}
if( length(which(pkg_table[,1]=='LinkingTo:'))>0 ){
tmp <- str_replace_all(pkg_table[which(pkg_table[,1]=='LinkingTo:'),2],'\\(.*?\\)','')
tmp <- str_split(tmp,'\\,')[[1]]
tmp <- str_replace_all(tmp,'\\(.*\n.*\\)','')
dep_pkgs2 <- trimws(tmp, which = c("both", "left", "right"))
}
if( length(dep_pkgs1)>0 & length(dep_pkgs2)>0 ){
return( c(dep_pkgs1,dep_pkgs2) )
}else if(length(dep_pkgs1)>0 & length(dep_pkgs2)==0){
return( dep_pkgs1 )
}else if(length(dep_pkgs1)==0 & length(dep_pkgs2)>0){
return( dep_pkgs2 )
}else{
return('-')
}
}
第三个函数,获得需要安装的所有包的全部依赖:
get_all_dep <- function(pknames){
all_list <- c()
all_list <- c(all_list,pknames)
top <- 1
for (i in 1:length(all_list)) {
one <- get_dep(all_list[i])
if(all(one != '-')){
all_list <- c(all_list,one)
}
top <- top + 1
}
while(top <= length(all_list)){
cat('finding dep of',all_list[top],'...\n')
cat( 'length=',length(all_list),'\n' )
cat( 'top=',top,'\n' )
if( all_list[top] %in% all_list[(top+1):length(all_list)] ){
top <- top + 1
next
}else{
one <- get_dep(all_list[top])
if(length(one) == 1 && one == '-'){
top <- top + 1
next
}else{
all_list <- c(all_list,one)
top <- top + 1
}
}
}
res_list <- c()
for (i in length(all_list):1) {
if( ! all_list[i] %in% res_list ){
res_list <- c(all_list[i],res_list)
}
}
return(res_list)
}
好了,现在在联网的环境下调用这个函数:
res <- get_all_dep(pknames) # 不要管报错,没啥问题
现在下载res中的记录的包,路径就是dir:
download.packages(res,destdir = dir)
split_list <- str_split(list.files(dir),'_')
download_pkgs1 <- unlist(split_list)[seq(1,length(split_list)*2,2)]
download_pkgs2 <- unlist(split_list)[seq(2,length(split_list)*2,2)]
res <- cbind(res,NA)
for (i in 1:length(res[,1])) {
if( res[i,1] %in% download_pkgs1 ){
name <- download_pkgs1[which(download_pkgs1 == res[i,1])]
version <- download_pkgs2[which(download_pkgs1 == res[i,1])]
res[i,2] <- paste0(name,'_',version )
}
}
save(res,file= paste0(dir,'install_list.RData') )
本地的工作结束了,现在将dir目录打包上传到服务器,用服务器上的R运行以下代码,将服务器对应的目录设置为wdir:
wdir <- '/home/you/packages/'
load(file = paste0(wdir,'install_list.RData'))
installed_packages <- row.names(installed.packages())
for (i in length(res[,1]):1) {
if( res[i,1] %in% installed_packages | is.na(res[i,2]) ){
next
}else{
install.packages(pkgs=paste0(wdir,res[i,2]),repos = NULL,type = 'source')
}
# a = readline('continue?')
# if(a != ''){
# break
# }
# 这里可以注释掉,我要装131个包,一个个敲回车太累了,可以先运行一遍,再去掉注释运行一遍,以防某些依赖库缺失的情况
}
不出意外的话,所有的包就装好了,反正我的好了哈哈,以后就用这个啦。
R语言无网络安装R包,彻底解决依赖问题!的更多相关文章
- centos7离线安装rpm包自动解决依赖
离线安装rpm包自动解决依赖参照https://blog.csdn.net/u011396718/article/details/80153515当生产环境由于安全原因处于断网状态的时候.通过本地源的 ...
- 离线安装rpm包并解决依赖(升级vsftpd为例)
背景 实际开发中,我们的linux服务器是处理离线状态的,并不能访问互联网.如果此时要在linux上安装或者升级软件,就只能通过rpm包的安装方式.rpm包安装有一个缺陷,就是不能处理安装包的依赖问 ...
- R语言·文本挖掘︱Rwordseg/rJava两包的安装(安到吐血)
每每以为攀得众山小,可.每每又切实来到起点,大牛们,缓缓脚步来俺笔记葩分享一下吧,please~ --------------------------- R语言·文本挖掘︱Rwordseg/rJava ...
- R语言—如何安装Github包的解决方法,亲测有效
R语言—如何安装Github包的解决方法,亲测有效 准备安装材料: R包-REmap GitHub下载地址:https://github.com/lchiffon/REmap R包-baidumap ...
- R语言︱文本挖掘之中文分词包——Rwordseg包(原理、功能、详解)
每每以为攀得众山小,可.每每又切实来到起点,大牛们,缓缓脚步来俺笔记葩分享一下吧,please~ --------------------------- 笔者寄语:与前面的RsowballC分词不同的 ...
- R语言中动态安装库
R语言中动态安装库 在一个R脚本中,我们使用了某些library,但是发现运行环境中没有这个library,如果能检测一下有没有这个包,没有就自动安装该多好.而R中非常方便地支持这些,只要联网. 代码 ...
- R语言入门级实例——用igragh包分析社群
R语言入门级实例——用igragh包分析社群 引入—— 本文的主要目的是初步实现R的igraph包的基础功能,包括绘制关系网络图(social relationship).利用算法进行社群发现(com ...
- R语言数据分析利器data.table包—数据框结构处理精讲
R语言数据分析利器data.table包-数据框结构处理精讲 R语言data.table包是自带包data.frame的升级版,用于数据框格式数据的处理,最大的特点快.包括两个方面,一方面是写的快,代 ...
- R语言- 实验报告 - 利用R语言脚本与Java相互调用
一. 实训内容 利用R语言对Java项目程序进行调用,本实验包括利用R语言对java的.java文件进行编译和执行输出. 在Java中调用R语言程序.本实验通过eclipse编写Java程序的方式,调 ...
随机推荐
- CSP-S 2020全国开放赛前冲刺模拟训练题1 T4 二维码
组合 首先可以考虑一个状态合法的条件,可以发现的是最后得到的矩阵一定是至少有一行或是有一列全$0$或$1$,如果把这一列或这一行删掉那么将剩下的子矩阵拼接起来又是一个子问题,同样的也是至少有一列或一行 ...
- [POJ 2821]TN's Kindom III(任意长度循环卷积的Bluestein算法)
[POJ 2821]TN's Kindom III(任意长度循环卷积的Bluestein算法) 题面 给出两个长度为\(n\)的序列\(B,C\),已知\(A\)和\(B\)的循环卷积为\(C\),求 ...
- R语言factor类型转numeric
R 语言中为了进行数据分析,比如回归分析,这时候对于数据表格中的factor类型的数据会带来弊端,比如对因子的每一个数据都进行一次回归,这样就显得很复杂,且违背了我们的初衷,需要把factor转换为n ...
- 微信小程序获取普通二维码
using System; using System.Collections.Generic; using System.Linq; using System.Text; using System.T ...
- leetcode6:binary-tree-postorder-traversal
题目描述 求给定的二叉树的后序遍历. 例如: 给定的二叉树为{1,#,2,3}, 1↵ ↵ 2↵ /↵ 3↵ 返回[3,2,1]. 备注:用递归来解这道题太没有新意了,可以给出迭代的解法么? Give ...
- 数据治理方案技术调研 Atlas VS Datahub VS Amundsen
数据治理意义重大,传统的数据治理采用文档的形式进行管理,已经无法满足大数据下的数据治理需要.而适合于Hadoop大数据生态体系的数据治理就非常的重要了. 大数据下的数据治理作为很多企业的一个巨大的 ...
- # Maven:Could not transfer artifact org.springframework:spring-webmvc:pom:。。。(系统找不到文件),从网上clone到本地的项目报红
解决办法: 确保maven配置正确,在maven的setting.xml配置文件中, 配置本地仓库路径 <localRepository>D:\Maven\文件名</localRep ...
- 【linux】led子系统
目录 前言 linux子系统 led子系统 led子系统实战-系统调用-ARM平台 前言 接下来记录的是 led子系统 目前不涉及驱动源码 linux子系统 在 Linux 系统中 绝大多数硬件设备都 ...
- LinkedHashMap实现 LRU
一.leetcode 题目 运用你所掌握的数据结构,设计和实现一个 LRU (最近最少使用) 缓存机制 . 实现 LRUCache 类: LRUCache(int capacity) 以正整数作为容 ...
- 【JVM第七篇】执行引擎
写在前面的话:本文是在观看尚硅谷JVM教程后,整理的学习笔记.其观看地址如下:尚硅谷2020最新版宋红康JVM教程 执行引擎是Java虚拟机中的核心组成部分. 执行引擎的作用就是解析虚拟机字节码指令, ...