混合提示在罗马乌尔都语仇恨言论检测达 0.87 F1,仍低于 PEFT 的约 0.93。
资讯摘要
论文针对罗马乌尔都语仇恨言论检测,系统比较提示工程与提示微调,并在 PURUT 数据集(约 72,771 条社交媒体评论)上测试 GPT-3.5、LLaMA-3、Mistral-7B 和多语言 BERT。作者报告少样本提示始终优于零样本,Mistral-7B 的 F1 为 0.67,零样本为 0.56;混合提示配置最高达 0.87,但仍低于此前 PEFT 报告的约 0.93。
要点速读
- 论文在 PURUT 数据集上比较零样本与少样本提示,作者报告少样本始终更优,Mistral-7B 为 0.67 F1,零样本为 0.56。
- 论文提出混合提示配置,作者报告 F1 最高 0.87,超过常规手工提示。
- 作者将提示类方法与此前 PEFT 约 0.93 的 F1 对比,提示方法仍有差距。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。