报告题目：可视化赋能大语言模型：从语义标注 到跨模态理解的探索

报告人：张慧杰

时间：2026 年 5 月 28 日 上午 10:00-11:30

地点：知行楼 B703 室

主办单位： 长春大学计算机科学技术学院

报告人简介：

张慧杰 博士，毕业于吉林大学计算机科学与技术学院，2017年 6 月晋升为东北师范大学信息科学与技术学院教授，博士生导师，智能大数据可视化与可视分析实验室负责人，美国俄亥俄州立大学访问学者，中国图像图形学会(CSIG)可视化与可视分析专委会常务委员，吉林省 D 类人才。主持国家自然科学基金青年基金项目，主持面上项目 3 项、吉林省重点研发项目等。出版个人学术专著 1 部，授权发明专利 12 项。

讲座内容摘要：

本报告主要介绍可视化赋能大语言模型的两个探索性工作：一方面针对传统程序化弱监督（PWS）文本分类依赖专家编写代码化的标签函数，门槛高且静态训练易放大噪声问题，报告中提出一套由大模型与领域专家协作的提示式标签函数开发流程，并构建了配套的交互式可视分析系统。另一方面针对视觉语言模型（VLM）在细粒度图像文本对齐时常受限于分割不一致、模型黑盒性及微调缺乏指导等问题，提出并设计了 AlignmentVis 可视分析系统，通过对称径向可视化等交互手段，帮助专家直观探索对齐过程、诊断偏差并指导模型微调。该工作通过可视化交互将人类知识闭环融入大模型的语义标注与跨模态理解过程，降低了使用门槛并提升了模型性能与可解释性。