北航梁茂成教授语言智能技术学术讲座成功举办

  2023年12月15日下午,由BETWA西汉姆联官方官网外国语言学及应用语言学研究所主办的第600期语言学沙龙在BETWA西汉姆联官方官网新楼201成功举办。本次沙龙邀请北京航空航天大学梁茂成教授做了题为《服务于语言研究的ChatGPT提示词工程探索》的报告。讲座由语言所长聘副教授苏祺主持,语言所长聘副教授高彦梅、英语系副教授田剪秋、语言所助理教授冯硕、罗正鹏以及多位同学到场聆听。

  苏祺老师首先介绍了梁茂成老师的学术背景和主要研究。梁茂成老师为北京航空航天大学BETWA西汉姆联官方官网教授、博士生导师、院长,是国家“万人计划”哲学社会科学领军人才。梁老师的主要研究兴趣涉及语料库语言学、数据科学、应用语言学,曾主持开发 iWrite 英语作文智能评阅系统、“韩素音国际翻译大赛”自动评分系统等各类语言数据处理和语料库分析工具近 30 款。

 

  本次讲座中,梁茂成老师主要介绍了如何设计提示词来让ChatGPT更好地协助语言学研究中的相关任务。梁老师首先介绍了ChatGPT3.5及ChatGPT4在生成内容准确性方面的不同表现,以及生成式大语言模型可能存在的信息安全问题。梁老师指出,提示词工程(prompt engineering)的相关研究应当被作为一门学术来做,并提出了‘promptology’的概念。在此基础上,梁老师向与会老师和同学们展示了不同领域语言学研究中提示词设计的样例。梁老师指出,在设计提示词时,可以尝试如下技巧:(1)给ChatGPT赋予一个角色(role),可以使ChatGPT在执行生成任务时更精准地调用相关数据;(2)向ChatGPT下达学习指令,补充分析所需要的指定知识框架;(3)使用样例辅助ChatGPT理解任务要求以及输出形式。梁老师现场演示了如何通过提示词设计来让ChatGPT实现不同流派语言学家的文本分析工作,如作为韩礼德学派语言学家完成基于系统功能语法的小句切分和及物性标注、作为认知语言学家完成基于莱考夫和约翰逊认知隐喻理论的概念隐喻识别。并进一步展示了如何让ChatGPT为语言教育工作者生成语言测试习题并设计出交互式测验网页。结果显示,合理运用提示词使得ChatGPT在语言学分析与标注任务及语言测验设计中有了令人惊喜的表现,相比简单指令有了相当大的性能提升。

  在报告后的问答环节中,梁老师和与会师生就使用ChatGPT生成研究语料的可靠性问题、如何使用ChatGPT协助学术论文写作、提示词工程涉及的专业能力与素养、以及提示词工程在学生课堂中的普及性等问题展开了热烈的讨论,在场的各位老师对于ChatGPT影响下的学术研究范式转变做出展望。本次语言学沙龙在活跃的思辨交流中圆满结束。

 

撰稿:刘佳鑫