
Turnitin 自从4月6日颁布 AI 写作检测职能以来,,,该职能的现实利用成效若何???老师们又有什么定见和反。???Turnitin 的首席产品官(CPO)Annie Chechitelli 公开了近期的发现和进展。。Turnitin 始终相信,,,老师们把握更多的信息,,,将有助于他们做出合理的决策。。

我们时时听到的一个问题是::“提交到 Turnitin 的文稿中有几多是AI写作内容???”
截至2023年5月14日,,,在一个多月的功夫里,,,Turnitin 对收到的 3850 万份作业进行了 AI 写作检测。。其中,,,9.6%的作业存在 AI 写作内容占比超过20%,,,而3.5%的作业中 AI 写作内容占比在80%到100%之间。。
上述的统计数据也蕴含了允许使用 AI 工具的作业,,,Turnitin 没有加以分辨这种使用场景,,,也没有将这些参数界说为“好”指标或“坏”指标,,,数据就只是数据。。Turnitin 将持续跟踪、、、公开这些信息,,,调查其他有关的数据指标,,,以援手老师相识 AI 写作的宏观趋向、、、及其与传统的复制粘贴型剽窃的关系。。

在颁布 AI 检测职能前,,,Turnitin 团队是在一个受控的尝试室环境(Innovation Lab)中测试模型。。自颁布该职能后,,,Turnitin 发现现实使用中产生的了局分歧于尝试室测试了局。。Turnitin 调查了被机构或老师象征为必要进一步审查的论文。。ChatGPT 颁布前已写好的80万个学术写作样本被 Turnitin 团队放入了 AI 检测中,,,用以加强测试框架并诊断误报的统计趋向。。
经过这项额外的测试,,,Turnitin 已经确定,,,当检测到文档中的AI 写作内容占比低于20%时,,,误报概率会更高。。鉴于数据不一致,,,Turnitin 会持续测试找到底子原因。。Turnitin 也思考了针对这一情况的几种指标处置步骤,,,蕴含当检测指标低于20%时不显示百分比分数,,,但收到了老师一致的反。::不喜欢暗藏 AI 检测指标,,,由于这褫夺了他们获得更多信息和进行学术判断的机遇。。此刻为了削减误会,,,低于20%的AI检测指标会带有星号,,,以提醒老师该分数不愿定正确。。

凭据有关数据和测试发现,,,Turnitin AI 检测的正确性会随着文本的增长而提高,,,所以 AI 检测的文本的最低字数要求从150字增长到300字。。Turnitin 会持续对检测模型进行评估,,,逐措施整这个最低字数要求。。
Turnitin 也发现了误报更可能产生于文稿开头的引文或者结尾处的总结性句子中,,,因而调整了对这些部门的检测方式,,,以降低误报率。。

我们知晓,,,会商学术诚信是拥有挑战性的,,, 而 AI 写作工具等新变量的忽然引入以及误报的可能性不会让这变得更容易。。为了支持教育工作者能应对这些情况,,,Turnitin 提供了一些通用技巧。。
- 事先相识情况。。确保您预先思考了误报的可能性,,,就您的处置流程和步骤制订一份打算。。若是能让学生相识这个打算就更好,,,那会有助于你们对作业、、、工作有一样的预期。。
- 如果积极的意图。。在这个充斥新事物和未知的领域里,,,让学生从疑惑中获益。。若是证据不明确,,,那就假定学生会恳切行事。。
- 推心置腹。。预先认可可能存在误报很重要,,,因而老师和学生都应该筹备好推心置腹的对话。。若是不认可可能会出现误报,,,将会导致更具防御性和匹敌性的互动,,,最终可能会侵害与学生的关系。。
Turnitin 也提供了以下教育资源,,,援手师生更好地就作业中的 AI 使用进行对话。。
- Approaching a student regarding potential AI misuse: 这份指南就学生提交的作业中潜在的 AI 滥用提供了建议。。
- Discussion starters for tough conversations about AI: 为了支持老师与学生就潜在的AI 滥用情况进行恳切、、、公开的对话,,,这份指南能够用于开启有关话题。。
- AI conversations: Handling false positives for educators: 这份指南分享了教育工作者在发现误报前后能够思考的战术。。
- AI conversations: Handling false positives for students: 这篇针对学生的指南分享了他们在提交作业前后面对误报时能够思考的战术。。
- Ethical AI use checklist for students: 这是为学生提供的一份自我监督的清单,,,能够援手学生在没有教育工作者在场的情况下,,,也能支持诚信、、、遵循老师的领导方针。。
资料::Turnitin, LLC
iGroup是国内专业电子资源和科研资讯的服务提供商,,,并致力于为学术机构提供综合性的学术诚信解决规划。。
iGroup中国是Turnitin/iThenticate中国区独家授权代理。。如需征询,,,请联系turnitin@igroup.com.cn


