依据二度人脉推荐好友sql

friend表结构 DROP TABLE IF EXISTS FRIEND; create table friend( uid bigint not null comment '用户标识', friend_uid bigint not null comment '申请加为好友的用户标识', sys_create_date datetime not null comment '申请时间', sys_last_update datetime not…

使用MapReduce实现二度人脉搜索算法

一,背景介绍在新浪微博.人人网等社交网站上,为了使用户在网络上认识更多的朋友,社交网站往往提供类似“你可能感兴趣的人”.“间接关注推荐”等好友推荐的功能,其中就包含了二度人脉算法. 二,算法实现原始数据集测试: a b b c a c b d c e e c e f 数据集说明:为关注关系,即a关注b,b关注c和d,所以a的二度人脉应该是d和c,而c已经被a关注,所以应该舍去,自己不能二度人脉是自己,如c关注e,而e又关注c 代码实现,代码用了两个Job实现的难点:两个job如何先后执行…

海量数据的二度人脉挖掘算法（Hadoop 实现）

最近做了一个项目,要求找出二度人脉的一些关系,就好似新浪微博的“你可能感兴趣的人” 中,间接关注推荐:简单描述:即你关注的人中有N个人同时都关注了 XXX . 在程序的实现上,其实我们要找的是:若 User1 follow了10个人 {User3,User4,User5,... ,User12}记为集合UF1,那么 UF1中的这些人,他们也有follow的集合,分别是记为: UF3(User3 follow的人),UF4,UF5,...,UF12:而在这些集合肯定会有交集,而由最多集合求交产生的…

hadoop计算二度人脉关系推荐好友

https://www.jianshu.com/p/8707cd015ba1 问题描述: 以下是qq好友关系,进行好友推荐,比如:老王和二狗是好友 , 二狗和春子以及花朵是好友,那么老王和花朵或者老王和春子就有可能也认识,可以对老王推荐春子和或花朵作为好友. 注意以下是制表符:tab建,所以程序中用 /t进行分割老王二狗老王二毛二狗春子二狗花朵老王花朵花朵老王春子菊花问题分析问题分析: 主 ---> 从从 --->主分别列出每一个关系,然后都列出从--&g…

MapReduce实现二度好友关系

一.问题定义我在网上找了些,关于二度人脉算法的实现,大部分无非是通过广度搜索算法来查找,犹豫深度已经明确了2以内:这个算法其实很简单,第一步找到你关注的人:第二步找到这些人关注的人,最后找出第二步结果中出现频率最高的一个或多个人(频率这块没完成),即完成. 但如果有千万级别的用户,那在运算时,就肯定会把这些用户的follow 关系放到内存中,计算的时候依次查找:先说明下我没有明确的诊断对比,这样做的效果一定没基于hadoop实现的好:只是自己,想用hadoop实现下,最近也在学:若有不足的地…

Spark 计算人员二度关系

1.一度人脉:双方直接是好友 2.二度人脉:双方有一个以上共同的好友,这时朋友网可以计算出你们有几个共同的好友并且呈现数字给你.你们的关系是: 你->朋友->陌生人 3.三度人脉:即你朋友的朋友的朋友就是这个陌生人.你们的关系是你->朋友->朋友->陌生人 4.四度人脉:比三度增加一度,你们的关系是,你->朋友->朋友->朋友->陌生人 5.五度人脉:你->朋友->朋友->朋友->朋友->陌生人 ,像上面这张图片表示的就…

Hadoop MapReduce实现人员二度关系运算

基于Spark GraphX计算二度关系

关系计算问题描述二度关系是指用户与用户通过关注者为桥梁发现到的关注者之间的关系.目前微博通过二度关系实现了潜在用户的推荐.用户的一度关系包含了关注.好友两种类型,二度关系则得到关注的关注.关注的好友.好友的关注.好友的好友四种类型. 如果要为全站亿级用户根据二度关系和四种桥梁类型推荐桥梁权重最高 TopN 个用户,大致估算了下总关系量在千亿级别,按照原有的 Mapreduce 模式计算整个二度关系,需要以桥梁用户为 Key,把它的关注和粉丝两个亿级的表做 Join,如果活跃用户按照亿计,平均关…

<转>“人脉投资”的10条建议

谁都知道人脉很重要,所以有些人非常勤奋的“做人脉”,他们往往会这样做—— 积极的参与各类线下活动,逢人就换名片.加微信. 见到名人或者重要人物必合影,而且他们还会掏出手机来给你看. 逢年过节,给所有他觉得重要的人发一条相同的祝福微信,比较有心的会在复制的时候改一下前面的名字,以示重视. 动不动喜欢拉一个微信群,名字一般叫什么“XX行业精英群”,每天早晨准时在群里说早安.发心灵鸡汤. 和你聊天的时候,会本能的提及他“认识”的一些大人物.如果名字是两个字的,他们喜欢叫“老X”,比如称呼马云为“老马”…

二十五、oracle pl/sql进阶--控制结构(分支，循环，控制)

一.pl/sql的进阶--控制结构在任何计算机语言(c,java,pascal)都有各种控制语句(条件语句,循环结构,顺序控制结构...),在pl/sql中也存在这样的控制结构.在本部分学习完成后,希望大家达到:1.使用各种if语句2.使用循环语句3.使用控制语句——goto和null(goto语句不推荐使用): 二.条件分支语句pl/sql中提供了三种条件分支语句if—then,if–then–else,if–then–else if–then.这里我们可以和java语句进行一个比较. 1).…

【网易官方】极客战记（codecombat）攻略-地牢-Kithmaze 二度历险

关卡连接: https://codecombat.163.com/play/level/the-second-kithmaze 很多人试过,但只有少数人能穿过此迷宫. 简介: 记住,你只需一个 while-true 循环.它会反复执行! 默认代码 # 使用while-true循环穿越迷宫! while True: hero.moveRight() # 再输入3条控制命令通过迷宫概览请仔细数下在你的 while-true 循环里要多少移动才能走出这个迷宫! 记住,每一关里应…

周末聊聊IT人员的人脉观：关于帮妹子找兼职有感

背景: 前几天,有个认识了好几年的网友,现在是大学生,在厦门读大一,说和她同学要一起到广州找兼职,看我有没有介绍. 像我这么积极热心善良的人,就说帮她找找看,结果问了几次,没消息,只好诚实的回复人家,没找着. 木有想到,妹子突然就杀到了广州,说已经在在她广州的朋友那里了,既然到广州了,就只能继续帮人家找了. 以前,我又为找兼职是一件很容易的事,找过一圈,才发现:理论和实践的距离,在哪里都如天地间般遥远. 然后以下就是我整个找帮找兼职的过程: 寻找过的六道无回: 1:作为园子里的资深人员,我在园子…

[No000009]学习重要还是经营人脉重要？

大说数人的朋友圈都是这样的:雪中送炭的寥寥无几,锦上添花的大多数人连你自己都不认识,碰到倒霉的时候还能遇到落进下石的.人脉是很重要,可相对自身的学习来说,就没有想象中那么重要了. 有一次在北大讲座,遇到一位学生问我,“老师,你说学习重要,还是经营人脉重要?”看着他一脸大杂烩的表情,我先拿出本子记下了这个问题,然后告诉他说,这是个比较大的话题,我会仔细写篇文章放在网上的,然后给了他我的博客地址.而后又补了一句,“相信我,所谓的人脉就算重要,也根本没他们说的那么重要”. 你愿意与什么样的人成为朋友?…

二度云抢先成为首批中国工信部（.vip/.xyz/.club）域名注册管理机构

今天,工信部官网的公示文件显示,新通用顶级域名.vip..xyz以及.club域名注册局已正式获得工信部审批,成为中国境内合法的顶级域名注册管理机构,这标志着.vip..xyz以及.club域名成为首批通过工信部资质审批的境外新顶级域名,使用这些域名在境内建站的客户,可以提交网站备案了. 新通用顶级域名.vip..xyz以及.club域名皆是全球注册量排名前10的域名,在全球有着广阔的用户基础,在中国市场的占有率更是首屈一指.其中,作为26个字母的最后三个字母,.xyz域名含义通俗,其注册量已突…

windows10删除开始菜单中的xbox、人脉、邮件等应用

1.右键单击PowerShell,选择“以管理员身份运行” 2.输入下面的命令回车,会列出系统中所有已安装应用列表. Get-AppxPackage -AllUsers 从列表中找到你要卸载的应用,并找到其全名称,即PackageFullName Remove-AppxPackage PackageFullName 例子: # 新闻 Remove-AppxPackage Microsoft.BingNews_4.3.193.0_x86__8wekyb3d8bbwe # 体育 Remove-App…

如何卸载Win10自带Xbox、人脉、天气等应用？

Win10中的Modern应用一般可在右键菜单中进行卸载,不过某些自带的Modern应用,比如Xbox.天气.人脉.照片等应用是无法在右键菜单中进行卸载的.如果你有卸载这些应用的需求,可参考下面的方法. • 首先点击任务栏中的搜索(Cortana图标)输入PowerShell,在搜索结果中右键单击PowerShell,选择“以管理员身份运行”. • 输入下面的命令回车,PS会列出系统中所有已安装应用列表. Get-AppxPackage -AllUsers • 从列表中找到你要卸载的应用,并找到…

FreeSql （二十四）Linq To Sql 语法使用介绍

原本不支持 IQueryable 主要出于使用习惯的考虑,如果继承 IQueryable,编写代码的智能总会提示出现一堆你不想使用的方法(对不起,我有强迫症),IQueryable 自身提供了一堆没法实现的方法,还有外部入侵的扩展方法,严重影响编码体验.如下图: 原以为必须实现 IQueryable 才可以实现,结果一次惊喜,原来只要有对应的方法就成. 虽然支持了,但是还是推荐使用[链式 + lambda] !!! 特别说明这次功能更新,ISelect 增加了 5个方法,对[链式 + lamb…

Mahout之（二）协同过滤推荐

协同过滤 —— Collaborative Filtering 协同过滤简单来说就是根据目标用户的行为特征,为他发现一个兴趣相投.拥有共同经验的群体,然后根据群体的喜好来为目标用户过滤可能感兴趣的内容. 协同过滤推荐 —— Collaborative Filtering Recommend 协同过滤推荐是基于一组喜好相同的用户进行推荐.它是基于这样的一种假设:为一用户找到他真正感兴趣的内容的最好方法是首先找到与此用户有相似喜好的其他用户,然后将他们所喜好的内容推荐给用户.这与现实生活中的“口碑传…

二十六、oracle pl/sql 分页

一.无返回值的存储过程古人云:欲速则不达,为了让大家伙比较容易接受分页过程编写,我还是从简单到复杂,循序渐进的给大家讲解.首先是掌握最简单的存储过程,无返回值的存储过程. 案例:现有一张表book,表结构如下:书号.书名.出版社. CREATE TABLE book( ID NUMBER(4), book_name VARCHAR2(30), publishing VARCHAR2(30)); 请写一个过程,可以向book表添加书,要求通过java程序调用该过程. --注意:in->表示这是一…

二十四、oracle pl/sql 变量

一.变量介绍在编写pl/sql程序时,可以定义变量和常量:在pl/sql程序中包括有:1).标量类型(scalar)2).复合类型(composite) --用于操作单条记录3).参照类型(reference) --用于操作多条记录4).lob(large object) 二.标量(scalar)——常用类型1).在编写pl/sql块时,如果要使用变量,需在定义部分定义变量.pl/sql中定义变量和常量的语法如下:identifier [constant] datatype [not null]…

mybatis（二）接口编程、动态sql 、批量删除、动态更新、连表查询

原理等不在赘述,这里主要通过代码展现. 在mybatis(一)基础上,新建一个dao包,并在里面编写接口,然后再在xml文件中引入接口路径,其他不变,在运用阶段将比原始方法更节约时间,因为不用再去手动的引用sql,我们只需调用dao层的方法,然后让dao层的方法去找配置文件,去找sql,sql查询数据并赋值给对象,或者设置对象参数值在经过sql更新到数据库,小伙伴们这就是 orm对象关系映射模型!(个人见解,不对之处请指正.) 新增后项目: 一.新建一个com.ckx.dao包,并new一个(…

[置顶] 图书推荐：SQL Server 2012 T-SQL基础 Itzik Ben-Gan

经过近三个月的不懈努力,终于翻译完毕了.图书虽然是基础知识,但是,即使你已经使用T-SQL几年,很多地方还是能够弥补你的知识空白.大师级的人物写基础知识,或许你想知道这基础中还有哪些深奥,敬请期待吧. 这次是邮电出版社负责组织翻译的,非常感谢杜洁女士的努力,才使得这样精彩的东西能够与国人有缘. 前言很高兴Itzik能够有时间和精力来编写一本有关T-SQL基础知识的图书.多年来,Itzik一直以他丰富的Microsoft SQL Server教学.辅导和咨询经验在编写高级编程方面的图书,这导致了…

SQL server学习（二）表结构操作、SQL函数、高级查询

数据库查询的基本格式为: select ----输出(显示)你要查询出来的值 from -----查询的依据 where -----筛选条件(对依据(数据库中存在的表)) group by -----对筛选后的数据进行分组 having ----- 筛选条件(对分组后的结果再次筛选) order by -----将结果进行排序注意:基本语法格式顺序不能变,顺序不能变,但可以缺省表结构操作表结构操作是需要去修改表结构,使用的关键字是alter,其他方式无法对表进行操作的时候,比如,新增列,…

kali linux 网络渗透测试学习笔记（二）OWASP ZAP工具扫描SQL injection漏洞失败

按照惯例,利用OWASP ZAP工具扫描SQL injection漏洞时,应该很快就可以扫描出来,但是在笔者进行扫描的时候,却遇到了以下状况: 这说明了该工具根本就没能够扫描出SQL注入的漏洞,不知道该如何解决.因此我还是推荐大家用其他工具进行扫描,比如APPscan等工具,扫描的结果会在后续公布出来.…

二、工作中常用的SQL优化

除了给table建立索引之外,保持良好的SQL语句编写. 1.通过变量的方式来设置参数比如动态查询的时候,尽量这样写好:string strSql=" SELECT * FROM PEOPLE P WHERE P.ID=? ";坏:string strSql=" SELECT * FROMM PEOPLE P WHERE P.ID= "+ID; 数据库的SQL解析和执行会保存在缓存中,SQL只要有变化,就要重新解析.而"where p.id="…

【入门推荐】SQL注入进行WebShell渗透测试的基础概览

作者:zero 本文为SQL基本注入的进阶文章,如有任何疑问请查看: SQL基本注入演示:https://www.cnblogs.com/anbus/p/10082452.html 导语: 利用SQL注入进行攻击来获取WebShell其实就是在向服务器写文件.(注意:这里我们需要得到网站的绝对路径)如何理解?引入余弦老哥的一句话: 黑客通过输入提交“特殊数据”,特殊数据在数据流的每个层处理,如果某个层没处理好,在输出的时候,就会出现相应层的安全问题. 也就是“输入输出”,余弦老哥举的这个例子就很…