ChatGPT 解释辅助赞助内容标注数据集
数据集简介
标题与作者
本仓库对应论文《Closing the Loop: Testing ChatGPT to Generate Model Explanations to Improve Human Labelling of Sponsored Content on Social Media》,作者为 Thales Bertaglia、Stefan Huber、Catalina Goanta、Gerasimos Spanakis 与 Adriana Iamnitchi。研究属于计算语言学(cs.CL)与社会与信息网络(cs.SI)交叉方向,关注社交媒体赞助内容标注与可解释 AI。论文被 2023 年 7 月在葡萄牙里斯本举行的世界可解释人工智能大会(The World Conference on eXplainable Artificial Intelligence)接收。
论文链接
仓库 README 提供论文入口,便于核对实验设计与标注流程;帖子标注结果与提示词均以独立文件形式随仓库分发。
数据
仓库文件包括 CITATION.cff、LICENSE、README.md、dataset_labels.csv 与 prompt.txt。
dataset_labels.csv 首列为 post_shortcode,其余 15 列为各标注者标签,列名同时标明标注者分组与是否使用解释:
| 标注者分组 | 带解释 | 不带解释 |
|---|---|---|
| 法律专家 | legal_expert_1_with_explanations、legal_expert_3_with_explanations | legal_expert_2_no_explanations、legal_expert_4_no_explanations |
| 无经验 | no_experience_1_with_explanations、no_experience_2_with_explanations、no_experience_3_with_explanations | no_experience_1_no_explanations |
| 有一定经验 | some_experience_1_with_explanations、some_experience_4_with_explanations | some_experience_1_no_explanations、some_experience_2_no_explanations、some_experience_3_no_explanations、some_experience_4_no_explanations |
标签取值为 0/1。文件约 150 行帖子记录,其中 shortcode B_nT9FGjugH 出现重复。帖子以 shortcode 引用,不含图像文件,可经 instagram.com/p/ 访问。
prompt.txt 保存用于生成解释的 ChatGPT 提示词最终版本,这些解释被用于增强标注任务。
引用
引用信息见仓库 CITATION.cff;仓库采用 MIT 许可证,公开可下载。