当前位置：首页 >文章发布 > 正文
OpenAI语音转写工具Whisper被曝存在重大缺陷：会凭空生成大段虚假内容
来源：IT之家 作者：
佚名
2024-10-28 11:06:52
10月28日消息，当地时间27日，据美联社报道，超过十位软件工程师、开发人员和学术研究人员称，OpenAI的语音转写工具Whisper存在一个重大缺陷：有时会凭空生成大段甚至整句虚假内容。
10月28日消息，当地时间27日，据美联社报道，超过十位软件工程师、开发人员和学术研究人员称，OpenAI的语音转写工具Whisper存在一个重大缺陷：有时会凭空生成大段甚至整句虚假内容。
这些专家指出，这些生成的文本可能涉及种族言论、暴力措辞，甚至杜撰的医疗建议。
专家们认为，这一问题尤其令人担忧，因为Whisper已被广泛应用于全球多个行业，包括用于翻译和转录访谈内容、生成常见消费科技文本及制作视频字幕。
更具风险的是，尽管OpenAI已提醒不应在“高风险领域”使用该工具，但一些医疗机构仍在匆忙采用基于Whisper的工具来记录医生与患者的咨询记录。
报道称，研究人员和工程师在工作中经常遇到Whisper的“幻觉”现象，问题的整体规模尚不清楚。例如，密歇根大学一位研究员在研究公共会议时发现，在尝试改进模型前，他所检查的十份音频转录中，八份含有虚构内容。
一位机器学习工程师透露，在最初分析的超过100小时Whisper转录中，他发现大约一半的内容存在“幻觉”现象。一位开发人员进一步指出，在他用Whisper生成的26000份转录中，几乎每一份都带有虚构内容。
即便是音质良好的简短音频样本，也未能幸免于这些问题。计算机科学家们的最新研究表明，他们审查的13000多段清晰音频片段中，有187段出现了“幻觉”现象。
研究人员认为，这一趋势意味着，在数百万条录音中将可能出现数以万计的错误转录。
OpenAI的发言人表示，该公司持续研究如何减少幻觉，并且感谢研究者的发现，将会在模型更新中采纳反馈。
免责声明：本文系网络转载，版权归原作者所有。本文所用图片、文字如涉及作品版权问题，请联系删除！本文内容为原作者观点，并不代表本网站观点。
编辑：乔帅臣
为什么企业数字化转型建设总是信息部...
