面向多类信息网络的链路预测方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:suitky
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在现实世界中,实体连同关联关系构成了一种网络关系结构即信息网络。这里的实体可以是商品、文章、会议、人、图片、电影或者导演等个体,关联关系可以是购买、发表、观看、出演或者指导等关联。链路预测是指通过已知的网络节点以及网络结构等信息来预测网络中尚未产生连边的两个节点之间产生链路或产生某种符号链路的可能性。这些被预测出的链路可以是实际存在但未被观察到的链路,也可以是未来可能会出现的链路。链路预测已经成为数据挖掘领域中一个重要的研究方向,它可以更好地帮助用户理解网络的结构生成和演化规律。
  尽管当前的链路预测技术有很多,但面对信息网络的异构性、不完备性及互补性等特点,仍存在不足:首先,这些技术通常将所有实体和关联关系都同等对待或独立分析,而忽略了不同实体类型及关联关系之间的相关性,且缺乏对多种特征的有效融合。其次,现有的链路预测方法通常只关注已标注符号的链路来提取特征,而大多数信息网络中已标注的链路较少,缺乏足够的样本数据进行模型训练。第三,现有技术主要依赖于社交链路的特征,而忽略了用户的行为特征。另外,当前的链路预测技术大多倾向于单一任务,而忽略多个任务之间的协调促进作用。
  针对上述问题,本文面向四种信息网络(包括:异构信息网络、不完备符号网络、社交推荐网络以及多信息网络),综合运用图论、信息论、机器学习等理论和技术,分别提出了相应的链路预测模型和算法。本文的主要创新点如下:
  (1)针对异构信息网络,本文提出了一种基于层次化混合特征图(HierarchicalHybridFeatureGraph,简称HHFG)的链路预测方法。首先,提出了一种层次化混合特征图模型——HHFG。不同于传统的链路预测技术,HHFG利用实体特征和边特征来区分不同类型的实体及关联关系,并将异构信息网络的拓扑特征、语义特征和时序特征进行层次化表示,对异构信息网络所表达的丰富特征进行有效组织。其次,提出了一种基于HHFG的链路预测算法:一方面,基于混合特征在HHFG上做随机游走,通过计算随机游走概率来评估节点之间产生链路的可能性;另一方面,采用梯度下降法学习特征权重和转移系数等参数,有效地保证了链路预测的准确性。最后,通过与其它链路预测方法进行对比实验,验证了基于HHFG的链路预测方法的可行性和有效性。
  (2)针对不完备符号网络,本文提出了一种基于非标注边的链路预测方法(UnlabeledTiesbasedLinkPrediction,简称UTLP),用于预测非标注边的符号。首先,与传统符号链路预测方法不同,UTLP模型基于社交感知理论来进行预测,利用该理论可同时获取已标注边和非标注边的特征。其次,提出了一种基于迁移学习的链路预测算法,对源网络的训练样本采用加权的方式加以区分,有效解决了目标样本数据不足的问题。最后,将Epinions、Slashdot和Wiki-RfA作为实验数据集进行实验,实验结果表明,与传统方法相比,UTLP模型具有较高的预测准确度。
  (3)针对社交推荐网络,本文提出了一种符号预测与行为预测相结合的链路预测方法(SignPredictionwithBehaviorPrediction,简称SPBP)。首先,采用基于深度学习的节点嵌入技术来学习节点的嵌入表示,在此基础上提出了两种相关性量化模型,分别计算用户之间的社交相关性和行为相关性。其次,提出了一种符号预测与行为预测相结合的迭代式预测算法,充分利用符号预测与行为预测的相互促进作用来提高预测的准确性:一方面,针对符号预测问题,基于社交心理学理论将已标注链路和非标注链路的特征相结合,提出了一种基于迁移学习的符号预测算法;另一方面,针对行为预测问题,充分考虑了用户间的社交特征——正链路和负链路,为行为预测提供了更详实的证据。最后,通过对真实的社交推荐网络进行实验可知,与传统方法相比,SPBP模型具有较高的预测准确度。
  (4)针对多信息网络,本文提出了一种基于多任务协调的信息网络融合模型(InformationNetworksFusionModelbasedonMulti-taskCoordination,简称MC-INFM)。与传统模型不同,MC-INFM模型将融合问题转化为概率推理问题,通过执行多个任务(包括:实体识别、链路预测和关系匹配)来推断融合后的最终结果。首先,分别定义了任务内特征和任务间特征,并将这些特征建模为因子图。其次,使用条件随机场(ConditionalRandomField,简称CRF)模型来学习每个任务内特征和任务间特征的权重。第三,提出了一种基于多任务协调的迭代推理算法,通过执行最大概率推理来迭代地推断这些任务的结果。最后,通过在真实数据集上的实验,验证了本文提出的MC-INFM模型的有效性。
其他文献
随着互联网的快速发展,信息与通信技术的日益提高,使得基于互联网的服务与应用和人们的生活越来越密不可分。社会网络、经济、医疗保健、工业和科学等领域产生海量数据,加上网络边界的消失以及攻击类型的多样化,增加了网络入侵的风险。如果没有敏捷的安全基础设施,基于物联网技术发展的智能城市将无法可靠运行。网络入侵检测系统(Intrusion Detection System,IDS)已成为监控网络活动和检测入侵
学位
信息爆炸时代的来临和云存储的高速发展造成了数据量成倍的增长,物联网的发展也使物和物之间增多了联系,信息技术的蓬勃发展带来了社会的欣欣向荣,同时都造成了数据量日益增加,数据存储的承载量和存储设备可靠性问题受到业界人们的关注,科研人员希望寻找有效的办法来应对这类挑战。RAID-6存储系统相比其它的RAID存储系统具有更高的数据可靠性,通过纠删码在RAID中的应用,设计出高效的扩容方案一直探索的方向。在
学位
The goal of this thesis is to examine how video games are designed and to see how different game mechanics work and how to use them in the development of a game,as well as examine what are both the po
学位
In recent years, image recognition has become important in computer vision and image processing.Additionally, it is used in many fields such as driverless vehicles, healthcare, face recognition, searc
随着互联网时代的到来,社交网络已得到了极大的普及,用户通过社交网络可享受各类社交服务,如豆瓣为用户提供图书、电影、音乐分享服务,知乎提供问答服务,微博提供自媒体广播服务,用户为满足不同的服务需求,往往不会局限于单一社交网络中,而是参与到多个社交网络活动之中。因此,跨社交网络用户识别问题逐渐引起了学者的关注,跨社交网络用户识别将有效集成分散于各个网络中的用户资源,大大提高用户推荐、广告投放、用户组形
室内定位技术泛指在卫星信号无法穿透的环境提供位置信息的技术,它广泛应用于矿山、隧道、楼宇、厂房等环境,为智能感知、人员安全监管、仓储物流系统等应用提供基础位置信息。它在物联网(Internet of Things,IoT)、无线传感器网络(Wireless Sensor Networks,WSN)、信息物理系统(Cyber-Physical Systems,CPS)中都扮演着非常重要的角色。基于卫
学位
战略侦查、电子对抗、军事打击、精细农业、空中遥感和快递等诸多应用一直刺激着无人机军用与民用市场的增长。MarketsandMarketsTM预计2025年无人机全球销量从2019年约193亿美元将增长到458亿美元,其中军用无人机市场将达268亿美元。由于无人机在机上无人类操作员,导航或调整飞行姿态完全依赖于卫星信号、控制数据和机载传感器数据的实时有效传输。因此,在无人机市场快速增长的同时,其通信
2016年,国务院安委会下发《金属非金属地下矿山采空区事故隐患治理工作方案》,明确指出地下矿山开采安全管理工作的重要性。通过物联网(IoT,Internet of Things)技术在矿山部署传感器,可以实现数据的识别、定位、监管等功能,因此,基于物联网技术进行矿山安全施工监测具有重要意义。鉴于矿井下应急救援的需求,在矿井塌陷的情况下,无法采用常规的供电方式,因此现有的技术方案大多数是基于IEEE
学位
当今,数据处理的应用飞速增长,数据管理技术尤其是关系型数据库管理系统(DataBase Management Systems)被广泛应用在各个行业,例如大到航天飞行器的数据系统,小到百姓日常的购物消费系统等都和数据库息息相关。随着日益快速发展的互联网技术,尤其是伴随着未来5G市场的爆发以及万物互联的设备持续增多,数据库管理系统必将持续成为当前以及未来的研究热点。最近十多年计算机硬件的性能发生了质的
学位
数据中心网络作为现代分布式计算的基础架构,决定了分布式应用的通信性能。随着大数据技术的快速发展和云计算基础设施的不断成熟,数据中心承载了越来越多的分布式计算任务,其底层网络的设计也面临着严峻的挑战。为了保证性能和可靠性,现代数据中心网络通常采用专用的结构化多径拓扑。具体地,以Fat-tree为代表的多径网络已成为大规模数据中心网络设计的首选方案。但是多路径网络由于其路由方式的不同,使得传统路由算法