2024年12月13日下午,“教育强市区县行”语言脑健康先导技术发展交流合作会在四川外国语大学东区博文楼401报告厅举行。重庆大学计算机学院副院长钟将教授、邹东升副教授、魏楷文博士及在读博士生肖欣和杨钰铭应邀与会。本次交流会旨在促进语言学、脑科学、教育学领域与人工智能、大数据、脑解码等相关技术的深度融合,推动语言脑机接口研学产一体化,助力语言脑健康先导技术的创新与发展。会议由语言智能学院(通识教育学院)院长、语言脑科学研究中心主任、重庆市沙坪坝区国际语言脑机接口联合研究院院长姜孟教授主持,语言脑科学研究中心团队成员参加了此次活动。
会场合影
邹东升副教授对其所在的重庆大学计算机学院的历史沿革、人才培养、学科构建以及实验研究基地进行了详尽的阐述,全面展示了学院在行业大数据模型、跨模态机器视觉、多模态人工智能等研究领域取得的突破性进展与重要研究成果。他特别指出,所在实验室成功研发了一系列应用平台,包括四联优待智慧养老平台、语言神经智能服务云平台等,广泛应用教育、医疗保健、老年社区服务、家庭与企业等多个场景。邹老师的讲解深入浅出,内容丰富多元,文图影音并茂,生动形象,体现了其精深的学术造诣。
邹东升副教授做报告
肖欣博士详细介绍了多模态大脑解码。她阐释了一种创新方法,利用通用的大脑编码器和固定的多模态大语言模型,实现了大脑信号与图像精准对齐。此外,肖博士还提出了一种针对跨受试者训练的新策略,学习跨受试者的通用表示,突破了传统针对特定受试者训练的局限。这一策略使得在仅有数据极少量的情况下,依然能够进行弱监督自适应训练。她还介绍了BrainHub这一基准测试平台,该平台是对NSD(神经科学数据)的多模态大脑理解能力的重要扩展。BrainHub结合了功能性磁共振成像(fMRI)数据与视觉刺激中的语义概念及空间定位信息,为研究者提供了一个集评估任务和指标于一体的综合测试环境。
肖欣博士做分享
杨钰铭博士探讨了如何使大模型具备类似人脑的思考能力。他详细阐述了蒙特卡洛树搜索(MCTS)在决策制定中的应用,并深入分析了大模型与蒙特卡洛树搜索之间的关系。MCTS通过不断模拟每种可能的行动路径,直至终局,记录每种路径的模拟总次数N与胜局次数W,从而估算出每种路径的胜率为W/N。这一过程涵盖了策略导向、方案生成、方案测试和经验反思等环节,与人类思维过程密切相关。杨博士还概述了大语言模型(LLM)的常规训练和使用流程,包括通过大量数据的预训练阶段向LLM注入知识,利用特定数据的微调阶段(如SFT, RLHF)赋予LLM执行某些特定任务的能力,并通过用户输入的推理过程来执行特定功能的操作。
杨钰铭博士做分享
最后,姜孟院长介绍了语言智能学院的基本概况,并重点阐述了学院有组织科研开展情况。他指出,学院正稳步推进“144”计划,即成立一个语言脑机接口研究分院,建立四个语言脑机接口创新小团队,出版一批专著、一批译著、发表一批论文、研发一批产品。他指出,团队依托外国语大学的外国语言文学学科优势,在国际语言脑机接口联合研究院的支持下,近年来致力于将部分科研成果转化为产业应用,正在加紧推出一系列轻量便携、涵盖多应用场景、聚焦语言老化与语言障碍的语言康复系列产品。
姜孟教授介绍语言智能与新文科建设情况
座谈会结束之际,姜孟院长作总结发言。他指出,此次“教育强市区县行”语言脑健康先导技术发展交流合作会内容充实、成果丰硕、令人振奋,不仅为两所高校搭建了互通有无、携手共进的桥梁,也为推动语言脑健康技术的发展注入了新的活力。双方将以此次交流会为契机,进一步加强跨学科、跨领域的协同合作,充分发挥各自优势,在理论研究、成果转化与技术开发等方面开展深度合作,推动语言脑健康领域的技术突破与产业化进程,为促进健康中国建设贡献智慧和力量。
参会人员合影留念
语言脑科学研究中心
语言智能学院(通识教育学院)
川外学坛
2024 年 12 月 13 日