节点文献
大模型会产生“标题党”特征倾向吗?——以中外代表性大模型为例的实证研究
Do Large Models Tend to Generate“Clickbait”Characteristics? —— Empirical Study with Representative Large Models from China and Abroad as Examples
【摘要】 标题写作是生成式人工智能应用于内容生产实践的重要场景之一。大模型会产生“标题党”特征倾向吗?围绕这一核心问题对国内外两个具有代表性的大语言模型运用算法审计方法进行实证分析。基于模型对973篇微信公众号文章进行标题写作的结果,研究发现,在不增加额外提示的情况下,大模型生成的标题具有一定的“标题党”特征倾向,其中GPT-4的倾向比ChatGLM3更明显,但与人类相比,两个模型的“标题党”特征倾向均没有人类明显。相比严肃议题,在非严肃议题文章的标题写作中,模型表现的“标题党”特征倾向更明显。提示(prompt)对大模型生成“标题党”特征倾向具有显著影响:添加含有“标题党”倾向的角色、背景和风格信息后,模型的“标题党”特征倾向均显著增强;添加限制“标题党”风格的提示后,“标题党”特征倾向会相应减弱。
【基金】 国家社科基金人才项目(编号:22VRC186);中国中文信息学会社会媒体处理专委会(SMP)-智谱AI大模型交叉学科基金项目(2023);教育部重点研究基地重大项目(编号:22JJD860004);复旦大学新闻学院科研创新项目(编号:2023-2024);上海数学与交叉学科研究院项目(编号:SIMIS-ID-2024-LZ)
- 【文献出处】 现代出版 ,Modern Publishing , 编辑部邮箱 ,2024年07期
- 【分类号】G213
- 【下载频次】73