快讯科技财经汽车社会旅游娱乐时尚健康生活科学教育

热搜：菜鸟发布" 长八甲火箭互联网流量 2026年7月P 好评中国｜经酒泉航天文跨界温情联个人没有营

首页 > 科技

通用图大模型HiGPT：一己之力建模任何图结构关系！来自港大数据智能实验室&百度

发布时间: 2024-03-26 17:06:44 来源：量子位

观看：328

GraphGPT原班人马出品

一个模型建模所有图结构关系——

香港大学数据智能实验室最新图结构大模型来了。

它叫HiGPT，由GraphGPT原班人马打造。

后者是将图数据与大模型结合的代表方法之一：

通过用图指令微调将图数据与大模型对齐，在下游任务上一度彰显了惊人的泛化性（Zero-Shot）。

不过，GraphGPT仅针对同质图进行了验证，对于生活中更常出现的异质图 “无能为力”。

简而言之，也就是只擅长简单的任务，复杂的还不行。

（异质图：即结点和边的类型更多样。例如社交网络中用户、帖子和评论之间的关系）

基于此，HiGPT诞生，专攻复杂的异质图学习任务，并真正做到了“一个模型，建模任意关系类型”。

通用图大模型HiGPT：一己之力建模任何图结构关系！来自港大数据智能实验室&百度

由此，一个通用图大模型就诞生了。

以后我们无论是用大模型做社交网络分析、生物信息还是城市计算这些常见图任务，都能hold更多有难度的case了。

Hi，异质图GPT

想要一个模型实现所有异质结构关系的泛化，面临的挑战有三：

C1. 关系类型异质性偏移：

当前几乎所有的异质图神经网络在建模异质关系是常常会为单个异质图的每个节点和关系类型定制参数，这使得当不同异质图之间结点和关系类型发生改变时，即关系类型异质性偏移，zero-shot的泛化将非常困难。

C2. 复杂异质图结构：

由于异质图存在多种多样的异质结点和关系类型，如何让大语言模型具有分辨不同异质类型的能力，从而提取有用的异质结构信息，进一步完成各种下游任务的泛化也是需要考虑的问题。

C3. 模型微调的数据稀缺：

在图学习研究社区，数据不足或者数据确实问题是公认的挑战。如何在有限的监督信号下学习得到更强泛化的模型也是不可避免的问题。

那么，具体来看看，HiGPT是如何实现的。

该方法的框架图如下所示：

针对C1，C2，C3，作者分别提出S1，S2，S3对应解决：

S1. 上下文异质图Tokenizer。

为了在具有不同节点和边类型的各种异质图场景中实现泛化性，我们引入了上下文异质图Tokenizer。

这个Tokenizer捕捉到了不同异质图中存在的各种语义关系，提供了一个统一的建模方法。

它包括两个重要组件：1）上下文参数化异质性投影器：利用自然语言对不同的节点和边类型进行编码；2）参数分配器：动态地为Tokenizer分配定制的参数。

为了优化性能并将Tokenizer无缝集成到HiGPT框架中，作者采用了轻量级的文本-图对比对齐范式来预训练Tokenizer。

预训练之后，直接将Tokenizer集成到HiGPT中，经过预训练的Tokenizer提高了其语义建模能力，并确保了其在整个模型架构中运行平稳。

S2. 异质图指令微调。 作者引入了一种新颖的异质图指令微调框架，该框架引入了跨类型和同类型token匹配任务来微调大语言模型。

框架专门针对提高大语言模型对异质关系感知和同质关系感知的理解。通过这些任务，作者的目标是增强大语言模型在以下方面的能力：
（i）区分不同类型的图tokens（异质关系感知），（ii）区分相同类型的图tokens直接的对应关系（同质关系感知），以及（iii）在下游任务中有效利用异质关系感知和同质关系感知能力。

设计的指令微调任务的指令模版如下表所示：

S3. Mixture-of-Thought指令增强。 为了解决异质图学习下游任务监督信号不足的问题，作者引入了一种用于增强图指令的新机制Mixture-of-Thought（MoT），即混合各种提示技术结合使用。

这种集成使我们能够生成一组多样化和全面的信息丰富的下游任务指令。

通过无缝地将这些增强的图指令集成到框架中，将有效地解决数据稀疏性的挑战。

具体地，作者结合了四种常见的提示技术，即Chain-of-Thought，Tree-of-Thought，PanelGPT和Generated Knowledge Prompting，通过ChatGPT模拟正确的推理结果，最后将多样的推理结果作为下游任务指令微调的训练数据，做到不增加监督信号的情况下增加（增强）了训练数据规模。

工作流程如下图所示：

具体提示与增强指令模版如下图所示：

HiGPT不仅在监督学习（Supervised）和零样本（Zero-shot）学习中超越了一众主流模型：

同时，作者探索了用训练得到的HiGPT进行图上下文学习（Graph In-Context Learning），然后惊奇地发现，在不优化模型参数，仅仅添加图问答示例就可以使得在1 shot训练的模型打败60 shot模型。

进一步的案例分析作者发现HiGPT不仅可以根据问题灵活调整回答推理模式，甚至会从主动从图数据角度分析问题，有了一定的图-意识（Graph-Awareness）。

研究团队

本项研究由港大数据智能实验室的GraphGPT原班人马以及百度等机构的研究人员完成。

港大数据智能实验室由黄超老师带领，在图学习，推荐系统，城市计算等诸多数据挖掘领域都有持续的探索，尤其是近期与大语言模型的诸多开源工作：GraphGPT，HiGPT，LLMRec，RLMRec，UrbanGPT，GraphEdit等。

欢迎大家来Github进一步探索！

传送门：
论文：https://arxiv.org/abs/2402.16024
代码：https://github.com/HKUDS/HiGPT
项目网站：https://higpt-hku.github.io/
https://sites.google.com/view/chaoh/group-join-us
https://github.com/HKUDS

　　马斯克开源3140亿参数的Grok，大模型争相开源所为何求？　　作者：刘晓洁　　特斯拉CEO埃隆・马斯克(Elon Musk)给大模型领域投下一枚重磅炸弹。　　北京时间3月18日凌晨，马斯克旗下大模型公司 xAI 在官网宣布开源 3140 记者3月21日从安徽农业大学获悉，该校生命科学学院韩毅教授课题组与国内外专家合作，发现了植物避盐性的关键基因。该研究对于提高植物耐盐性，帮助盐碱地下的农作物稳产具有重要理论指导意义。相据一项在本周举行的美国心脏协会会议上提交的新研究，每天进食时间控制在8小时内的间歇性禁食方法可能与心脏病死亡风险上升相关。近年来越来越流行的间歇性禁食指限制进食时间，在每天或每周的一加Ace 3V刚发布，就被红米砍了一刀！随着昨天一加Ace 3V的发布，新一轮中端机的内卷终于拉开了序幕。而且这电话售价居然还不增反降，直接1999起步。先来回顾下它的配置，外观相比上一代有所变化，依旧是 3月24日消息，今天数码博主“厂长是关同学”曝光了huaweiMate 70系列电话的部分配置信息。该博主表示，huawei全新的Mate 70系列首发会搭载新的芯片，芯片的性能差不多可以比肩5.5nm，还是值得期待的。同 3月25日消息，国内一场经济高峰论坛上，iPhone总裁蒂姆·库克再次成为焦点。然而，引起人们关注的并非库克的讲话内容，而是一张自拍照片。在论坛现场，一位观众与库克自拍合影，但引人注目的是她手中。

本文链接：通用图大模型HiGPT：一己之力建模任何图结构关系！来自港大数据智能实验室&百度http://www.sushuapos.com/show-2-4229-0.html

声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。

上一篇： Kimi宕机打醒巨头！阿里百度360连夜出手，大模型商业化厮杀开始

下一篇： Sora三巨头首次解密幕后信息，CTO：最快年内开放

通用图大模型HiGPT：一己之力建模任何图结构关系！来自港大数据智能实验室&百度

Hi，异质图GPT

研究团队

热门资讯

推荐资讯

科技最热文章

通用图大模型HiGPT：一己之力建模任何图结构关系！来自港大数据智能实验室&#038;百度

Hi，异质图GPT

研究团队

热门资讯

推荐资讯

科技最热文章

通用图大模型HiGPT：一己之力建模任何图结构关系！来自港大数据智能实验室&百度