[R语言]关联规则2---考虑items之间严格的时序关系
前面介绍了关联规则1---不考虑用户购买的items之间的时序关系,但在一些情况下用户购买item是有严格的次序关系了,比如在某些休闲游戏中,用户购买了道具A才能购买道具B,且道具A和B只能购买一次,也就是说购买了道具A是购买道具B的充分条件,如果购买道具A的用户通常会购买道具A,在不考虑时序关系的时候,会得出“BàA”这样的关联规则,这会给运营的同事这样的结论:“购买了道具B的用户也非常有可能会购买道具A,当用户购买了道具B时应向其推荐道具A”,这从数据角度来说是没有问题的,但是从业务的角度来看是完全错误的,因为购买了道具B的用户一定是已经购买了道具A,且道具AB只能购买一次,再次向其推荐道具A是没用的。
基于这样的背景,本文介绍的是--- 考虑items之间严格的时序关系,来分析用户道具购买路径以及关联规则挖掘。(本文所需的代码和数据集可以在这里下载)
本文重点讲解的是关联规则的R语言实现以及关联规则的可视化,这里不对关联规则的原理进行讲解,可以参考百度百科---关联规则、维基百科--- Apriori algorithm、维基百科--- Association rule learning
目录
0.创建购买记录的数据集
1.将购买记录转换为0-1矩阵
2.得到每个用户的道具购买路径
3.执行apriori算法并删除冗余规则
4.关联规则的可视化
0.创建购买记录的数据集
下面创建一个1W条购买记录的数据集,一行代表一个用户,列分别是:用户id、道具名称pname、付费金额amount、购买时间time
数据的样式如下:
创建模拟数据集的代码详细讲解,请参考上一讲,这里只贴出代码:
rm(list=ls())
setwd("E:/cnblogs") #下面创建一个1W条购买记录的数据集:
#列分别是:用户id、道具名称pname、付费金额amount、购买时间time ###有放回地抽取1W个从10000000到10002000,作为用户id
uid<-sample(10000000:10002000,10000,replace=T) ###将日期限定在20160401 10:01:01~20160408 10:01:01
start_time<-as.numeric(as.POSIXct("2016/04/01 10:01:01", format="%Y/%m/%d %H:%M:%S"))
end_time<-as.numeric(as.POSIXct("2016/04/08 10:01:01", format="%Y/%m/%d %H:%M:%S"))
time<-sample(start_time:end_time,10000,replace=T)
#将两者合并成一个数据框orders
orders<-data.frame(uid,time)
head(orders) ###下面用P1~P20来表示购买的道具名称
pname_list<-c(1:20)
for(i in 1:20){
pname_list[i]<-paste('P',i,sep="")
} #随机将道具名称传递到1W行上
orders$pname<-'P1' for(i in 1:20){
orders[sample(1:nrow(orders),1000,replace=T),'pname']<-pname_list[i]
} orders$pname<-as.factor(orders$pname) #随机将付费金额amount(1到50)传递到1W行上
orders$amount<-10
for(i in 1:50){
orders[sample(1:nrow(orders),1000,replace=T),'amount']<-i
} head(orders)
summary(orders) #将数据集写回本地
write.table(orders,'orders_test.txt',sep='\t',row.names = F,col.names = T)
1.将购买记录转换为0-1矩阵
以上只是完成了第一步:创建数据集。下面进行第二步:将购买记录转换为0-1矩阵形式,其中行表示用户,列表示商品,用1表示用户购买了该道具。
#读取数据集
payer<-read.table("orders_test.txt",sep='\t',header=T)
head(payer)
dim(payer)
#将数据按照uid,pname,time 同一个用户id中购买的道具“pname”,按照购买时间time从小到大排序
library(sqldf)
payer2<-sqldf("select uid,pname,time from payer group by uid,pname,time order by uid,time")
#数据样式如下
head(payer2)
#从数据来看记录已经按照时间先后顺序来排列,将第3列时间去掉
payer3<-payer2[,-3]
#将用户id转换为因子型,是为了后面split函数使用
payer3$uid<-as.factor(payer3$uid)
2.得到每个用户的道具购买路径
#将道具名称pname按照相同的uid进行分组
trans.list<-split(payer3[,'pname'],payer3[,'uid'])
#此时相当于得到了用户的购买路径了,但是其中可能会有一个用户重复购买某个道具的情况
head(trans.list)
str(trans.list)#共有1991个用户的购买路径
#测试一下,看用户的购买次序是不是按时间的先后次序
trans.list['']#查看uid=10000003的用户购买道具的情况。
payer2[which(payer2$uid==10000003),]
从测试来看,trans.list中的数据是按照时间的先后次序来排列的
#####将数据变成关联规则函数Apriori可用的transactions形式
library(arules)
trans<-as(trans.list,'transactions')
#因为存在“一个用户重复购买某个道具的情况”,所以出现了以下错误:
Error in asMethod(object) :
can not coerce list with transactions with duplicated items
########因此这里需要加一步:在player3中将uid和pname重复的记录删除(为了后面transactions转换)
index<-duplicated(payer3[,c(1,2)])
payer6<-payer3[!index,] trans.list<-split(payer6[,'pname'],payer6[,'uid'])
head(trans.list)#此时相当于“道具去重后”的用户购买路径了
str(trans.list)
#转换为apriori函数可以用的transactions形式
arules<-as(trans.list,'transactions')
3.执行apriori算法并删除冗余规则
######下面执行apriori算法(此部分与上一篇的内容相同,这里就不再进行详述,可参考上一篇)
rules<-apriori(arules,parameter = list(support=0.01,confidence=0.5))
inspect(rules) #可以按照提升度排序
sorted_lift<-sort(rules,by='lift')
inspect(sorted_lift)
#规则较多,需要删除冗余规则:如果rules2的lhs和rhs是包含于rules1的,而且rules2的lift小于或者等于rules1,则称rules2是rules1的冗余规则。
subset.matrix<-is.subset(rules,rules)#生成一个所有规则的子集矩阵,行和列分别是每条rules,其中的值是TRUE和FALSE,当rules2是rules1的子集时,rules2在rules1的值为TRUE
subset.matrix[lower.tri(subset.matrix,diag=T)]<-NA#将矩阵对角线以下的元素置为空,只保留上三角
redundant<-colSums(subset.matrix,na.rm=T)>=1#R会将矩阵中的TRUE当做1,统计每列的和(忽略缺失值),如果该列的和大于等于1,也就是表示该列(规则)是别的规则的子集,应该删除。
which(redundant) rules.pruned<-rules[!redundant]#去掉冗余的规则
inspect(rules.pruned) #写回本地
#write(rules.pruned,"rules_pruned.txt",col.names=NA)
4.关联规则的可视化
########关联规则的可视化(此部分与上一篇的内容相同,这里就不再进行详述,可参考上一篇)
library("arulesViz") #关联规则的散点图
plot(rules)# 直接plot画出散点图 plot(rules,interactive=TRUE)#可以使用interactive=TRUE来实现散点图的互动功能 plot(rules, method = "grouped")#类似“气泡图”的展现形式 plot(rules.pruned, method = "graph")#通过箭头和圆圈来表示关联规则,利用顶点代表项集,边表示规则中关系。
(本文所需的代码和数据集可以在这里下载)
[R语言]关联规则2---考虑items之间严格的时序关系的更多相关文章
- [R语言]关联规则1---不考虑items之间的时序关系
本文介绍的是关联规则,分为两部分:第一部分是---不考虑用户购买的items之间严格的时序关系,每个用户有一个“购物篮”,查找其中的关联规则.第二部分--- 考虑items之间的严格的时序关系来分析用 ...
- R语言 关联规则
在用R语言做关联规则分析之前,我们先了解下关联规则的相关定义和解释. 关联规则的用途是从数据背后发现事物之间可能存在的关联或者联系,是无监督的机器学习方法,用于知识发现,而非预测. 关联规则挖掘过程主 ...
- R语言︱关联规则+时间因素=序贯关联规则
序贯模型=关联规则+时间因素. 了解这个模型可以参考李明老师的<R语言与网站分析 [李明著][机械工业出版社][2014.04][446页]>,第九章,第二节的"序列模型关联分析 ...
- R语言︱SNA-社会关系网络 R语言实现专题(基础篇)(一)
每每以为攀得众山小,可.每每又切实来到起点,大牛们,缓缓脚步来俺笔记葩分享一下吧,please~ --------------------------- 笔者寄语:这里所有的应用代码都来自与igrap ...
- 大数据时代的精准数据挖掘——使用R语言
老师简介: Gino老师,即将步入不惑之年,早年获得名校数学与应用数学专业学士和统计学专业硕士,有海外学习和工作的经历,近二十年来一直进行着数据分析的理论和实践,数学.统计和计算机功底强悍. 曾在某一 ...
- 关联规则-R语言实现
关联规则code{white-space: pre;} pre:not([class]) { background-color: white; }if (window.hljs && ...
- 用GA算法设计22个地点之间最短旅程-R语言实现
数据挖掘入门与实战 公众号: datadw 相关帖子 转载︱案例 基于贪心算法的特征选择 用GA算法设计22个地点之间最短旅程-R语言实现 ----------------------------- ...
- R语言实现关联规则与推荐算法(学习笔记)
R语言实现关联规则 笔者前言:以前在网上遇到很多很好的关联规则的案例,最近看到一个更好的,于是便学习一下,写个学习笔记. 1 1 0 0 2 1 1 0 0 3 1 1 0 1 4 0 0 0 0 5 ...
- python调用R语言,关联规则可视化
首先当然要配置r语言环境变量什么的 D:\R-3.5.1\bin\x64; D:\R-3.5.1\bin\x64\R.dll;D:\R-3.5.1;D:\ProgramData\Anaconda3\L ...
随机推荐
- java代码求阶乘n!
面试过程中总是遇到要求写一段Java代码求阶乘.下面就是就是两种求阶乘 n! 的方法: 1.使用递归求解n! public int doFactorial(int n){ if(n<0){ re ...
- BigDecimal的setScale()方法无效(坑)
最近在使用BigDecimal进行四舍五入时,发现setScale()方法设置的精度值并没有起作用,一度让我怀疑起是否jdk有bug,代码如下: 错误代码 double d = 7.199999999 ...
- 2017中国人工智能公司榜单发布,颠覆AT的AI独角兽全在这
每年12月,创业邦研究中心评选并报道“中国创新成长企业100强”,这个榜单我们已经连续做了8年,是中国最有潜力的创业新贵榜,受到了业内广泛认可.从2015年开始我们发现,人工智能上榜企业明显增多,20 ...
- Linux内核分析——第一周学习笔记20135308
第一周 计算机是如何工作的 第一节 存储程序计算机工作模型 1.冯·诺依曼结构模型:冯·诺依曼结构也称普林斯顿结构,是一种将程序指令存储器和数据存储器合并在一起的存储器结构.程序指令存储地址和数据存储 ...
- 《linux内核分析》第六周:分析fork函数对应的系统调用处理过程
一. 阅读理解task_struct数据结构http://codelab.shiyanlou.com/xref/linux-3.18.6/include/linux/sched.h#1235: 进程是 ...
- iOS国际化——通过脚本使storyboard翻译自增
一. 针对两种文件的国际化处理 代码中即.m文件的国际化 首先在你需要进行国际化处理的字符串外面加一层NSLocalizedString,注意中文也是可以的哦 textfield.text = [NS ...
- java 封装,继承,多态基础
什么是封装? 1,对象数据和在.操作该对象的指令都是对象自身的一部分,能够实现尽可能对外部隐藏数据. 2,实际项目开发中,使用封装最多的就是实体类. 什么是继承? 1,继承是面向对象程序设计能提高效率 ...
- Photoshop一些常用的快捷键
1.按住Alt键,点击图层上的小眼睛,只显示当前图层 2.新建纯色图层,抠图 3.Fn+ num 调整不透明度 4.Shift + num 调整流量 5.调整图层透明度,在移动工具状态下,输入数字:0 ...
- Alpha 冲刺五
团队成员 051601135 岳冠宇 051604103 陈思孝 031602629 刘意晗 031602248 郑智文 031602234 王淇 会议照片 项目燃尽图 项目进展 暂无实质性进展. 项 ...
- Windows 7 上面 redis 启动报错的处理
Windows 7或者是 win10 上面 安装redis 的windows 3.2.100 的版本 启动报错: Creating Server TCP listening socket *:: li ...