传播IB方法的研究

项目来源

国家自然科学基金(NSFC)

项目主持人

叶阳东

项目受资助机构

郑州大学

立项年度

2017

立项时间

未公开

项目编号

61772475

项目级别

国家级

研究期限

未知 / 未知

受资助金额

62.00万元

学科

信息科学-计算机科学-信息安全

学科代码

F-F02-F0206

基金类别

面上项目

关键词

传播IB ; 信息度量 ; 传播机制 ; 分层模型 ; 多源异构数据 ; Propagation Information Bottleneck ; Information Measurement ; Multiple Heterogeneous Data ; Propagation Mechanism ; Hierarchical Model

参与者

姬波;卢红星;朱真峰;娄铮铮;吴云鹏;闫小强;吴宾;胡世哲;时增林

参与机构

郑州大学

项目标书摘要:本项目针对现有IB方法处理多源异构数据存在的局限性,提出传播IB方法,拟解决相关模型确定、传播机制构建、综合平衡参数调整、深度度量函数确定及应用适用性等关键问题。基于多信息和交互信息度量,对传播IB方法相关模型中变量间关系进行建模,构建模式参数确定策略;以因子图结构为核心,构建信息传播机制,使传播IB方法充分考虑异构数据对象的关联性和模式结构的层次性;使用自适应LASSO求解传播IB方法中的综合平衡参数;基于传播IB方法度量复杂数据的层次模型,用K-近邻估计法计算复杂数据模型中各层间、各层与相关变量间的互信息,提高深度度量方法的鲁棒性;开展隐藏信息分析、多传感器监控以及信息推荐的应用研究,力图发现传播IB方法所适用问题的特征及规律。该项目在传播机制、复杂数据模型度量方面的研究是原创性的,对多源异构数据处理的研究将进一步拓展IB方法的应用范围。项目的相关研究力图将IB方法推向新的研究阶段。

Application Abstract: This project proposes a propagation Information Bottleneck(IB)method which aims at remedying the limitations of current solutions on multiple heterogenous data.It intends to solve important problems such as determining related model,generating propagation mechanism,adjusting a series of balance parameters,selecting deep measurement function,and practicality of application.Based on criteria such as multi-information and interactive-information,we model the relationship of the latent variables in propagation IB method and propose a framework for determining the pattern parameters.Propagation IB can make use of the correlation of hetergeneous data object and the hierarchy of pattern structure by constructing the information propagation mechanisms based on the factor graph structure.The adaptive LASSO method is used to get the values of a series of balance parameters in propagation IB.To measure the complex data hierarchical models by propagation IB,K-Nearest Neighbor estimation method is used to compute the mutual information of each layers and the mutual information between each layer and relevant variables in complex data models.As a result,the robustness of the deep measurement function can be guaranteed.We will apply propagation IB to various application fields,including the analysis of hidden information,the warning of multi-sensor surveillance and information recommendation,in order to find the common patterns in problems which are solvable by propagation IB.The original contributions include the research on propagation mechanism and the measurement of complex data model.The research therein on multiple heterogeneous data will extend the field of IB method application.The works in this project will fill the research gap in literature and further open a new page for IB method.

项目受资助省

河南省

项目结题报告(全文)

项目针对传播IB方法及相关算法进行了深入的研究,超额完成了申报书中的任务,取得了丰硕的研究成果。1在传播IB方法中信息传播模型及相关算法的研究方面,提出了基于关联关系传播IB模型、双层关联的传播 IB模型、融合异构特征的协作IB模型、联合个性和共性信息的传播IB模型、视觉上下文IB模型、多任务联合IB算法、面向高维共现数据的交互IB模型,并研究了相关的优化算法。2在传播IB方法的权重学习研究方面,引入了不同的权重学习机制,提出了簇加权多视角IB算法、动态自动加权多视角联合IB聚类算法、基于内容和上下文的加权多视角IB聚类算法、双重加权的多视角IB聚类算法,实现了自动赋权和算法优化互相促进,从而提高了传播IB方法的有效性和灵活性。3在传播IB方法中信息度量及互信息最大化研究方面,提出了深度互信息最大最小化方法、组约束信息最大化聚类方法、多任务图像聚类的深度相关性挖掘方法、异构双任务聚类方法、基于信息最大化的多任务视频聚类算法、聚类模式参数的确定算法。4在传播IB方法的应用适应性研究方面,进行了传播IB方法在推荐系统、人群计数、多模态数据分析等方面的应用拓展研究,提出了相应的模型和相关算法,充分验证了传播IB方法的有效性和适应性。项目取得的研究成果发表在国内外重要会议或期刊上,如CVPR 2018、AAAI2021、SDM 2020、IEEE ICASSP 2020、IEEE Transactions on Image Processing、IEEE Transactions on Knowledge and Data Engineering、IEEE Transactions on Cybernetics、IEEE Transaction on Industrial Informatics、IEEE Transactions on Multimedia、Information Fusion、Pattern Recognition、ACM Transactions on Knowledge Discovery from Data、Information Sciences、Expert Systems with Applications、Knowledge-Based Systems、Applied Soft Computing、中国科学:信息科学、计算机学报等。

  • 排序方式:
  • 1
  • /
  • 1.一种联合成对排序的协同过滤推荐算法研究

    • 关键词:
    • 物品推荐;成对排序;协同过滤;隐式反馈;矩阵分解
    • 陈允
    • 指导老师:郑州大学 叶阳东
    • 学位论文

    随着互联网和信息技术的快速发展,大量信息快速地涌入互联网,丰富的信息在给用户带来便利的同时,也导致了信息过载。信息检索领域一直被认为是解决信息过载问题的有效方法之一,帮助用户快速地从海量信息中获取有价值的信息。相比于传统的信息检索技术而言,推荐系统能够主动向用户提供可能感兴趣的信息且无需用户的明确需求等特性,而成为缓解信息过载问题的重要工具之一,并在业界得到了广泛研究与应用。众多电子商务网站和多媒体平台在现有的系统基础上能够较为容易地嵌入个性化推荐技术,例如,亚马逊购物网站可以帮助用户推送感兴趣的商品信息,今日头条向用户推送当日其可能感兴趣的新闻信息。推荐技术的使用在一定程度上不仅增加了用户的参与度及对应用的信任度和依赖度,而且为使用该技术应用上的商家带来可观的收入,例如电影,新闻和POI推荐等。在现实生活中,用户的消费行为复杂而多样,通常受到许多因素的影响。用户所做出购买决策不仅出于自身喜好,还会考虑历史购买物品与即将购买的物品在功能上的关系。本文主要贡献点如下:(1)现有的推荐算法大多仅从用户的角度更细粒度地构建模型,而忽略了物品之间在功能上的互补关系对用户做出购买决策的影响。针对此问题,本文从用户和物品这两个角度,依据用户-物品之间的交互关系和物品之间在功能上的互补关系分别对特定用户和物品构建样本对,提出了联合成对排序推荐模型。(2)对于成对排序方法而言,负样本的选取将直接影响模型的收敛速度和推荐精度。在依据上述两种关系分别对用户和物品构建样本对时,为加快模型的收敛速度,构建了一种新颖的排序感知采样策略。该策略根据正样本排名位置,选取更为有效的负样本并定义了权重函数动态控制模型学习梯度。(3)设计了一种高效的协同过滤推荐算法CPR。在四个数据集上的实验结果表明,本文算法在在多个指标(Precision、Recall、MAP和NDCG)及收敛速度上均优于当前主流的推荐算法。

    ...
  • 排序方式:
  • 1
  • /