目前,预训练语言模型已成为自然语言处理领域的基础模型。研究者可以通过训练大规模语料构建预训练模型,再将其迁移到一系列下游任务上,并实现性能的显著提升。同时Transformer已成为自然语言处理领域最主流网络架构。随着预训练语言模型的规模越来越大,在小样本学习领域的性能显著提升,研究者越来越关注这个领域的发展和变化。
这些现象是否预示着自然语言处理领域和知识图谱领域更为深刻的范式转变?在大模型成为主流的情况下,有哪些新兴研究热点和机会?本章中,青源会自然语言处理和知识图谱方向的学者探讨了这一领域的范式转变情况,并对未来研究方向的发展提出了见解。
来源:青源会,报告节选如下














互联网的一些事





访谈
更多乌镇声音|郑启良:将安全防护前置,守住AI应用下载第一关
2026年世界互联网大会乌镇峰会期间,卡巴斯基大中华区总经理郑启良接受光明网采访,谈人工智能时代的安全防…
郭留成谈机器触觉:让材料成为传感器,提升感知能力
在2026年世界互联网大会乌镇峰会期间,触零科技申报的“AI赋能感知:面向物理智能的多模态触觉感知关键技术…
三大开源大模型负责人乌镇峰会探讨安全治理
11月3日,2026年世界互联网大会乌镇峰会在浙江桐乡乌镇举行,主题聚焦“开源开放 共建共享”。在主论坛“人…