回到最新动态
研究论文 / THE SIGNAL

罗马乌尔都语仇恨言论检测:提示工程与提示微调对比

Beyond Fine-Tuning: Evaluating Prompt Engineering and Prompt Tuning for Roman Urdu Hate Speech Detection

重要性 4.5 AI 辅助整理

混合提示在罗马乌尔都语仇恨言论检测达 0.87 F1,仍低于 PEFT 的约 0.93。

资讯摘要

论文针对罗马乌尔都语仇恨言论检测,系统比较提示工程与提示微调,并在 PURUT 数据集(约 72,771 条社交媒体评论)上测试 GPT-3.5、LLaMA-3、Mistral-7B 和多语言 BERT。作者报告少样本提示始终优于零样本,Mistral-7B 的 F1 为 0.67,零样本为 0.56;混合提示配置最高达 0.87,但仍低于此前 PEFT 报告的约 0.93。

要点速读

  1. 论文在 PURUT 数据集上比较零样本与少样本提示,作者报告少样本始终更优,Mistral-7B 为 0.67 F1,零样本为 0.56。
  2. 论文提出混合提示配置,作者报告 F1 最高 0.87,超过常规手工提示。
  3. 作者将提示类方法与此前 PEFT 约 0.93 的 F1 对比,提示方法仍有差距。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/5 08:00:38(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.AI 原文arxiv.org · 在新窗口打开