OpenAI表示其安全政策不允许18周岁以下的用户看到包含色情或露骨的回复,保护年轻用户是公司的首要任务,用于指导模型行为的模型规范明确将色情内容等敏感内容限制在科学、历史或新闻报道等狭窄的语境种。但目前存在的漏洞允许超出这些准则的回应,我们正在积极部署修复程序以限制这些年龄段的用户生成此类内容。
正常情况下用户要求ChatGPT生成色情内容是被拒绝的,但和大多数AI模型一样,用户可以通过某些提示词技巧绕过OpenAI的安全政策,因此无论是否成年其实都可以生成色情内容。
2025年2月份OpenAI在模型规范种指出在某些特定场景下使用的安全边界可能会阻碍用户的正常使用,为此有部分用户提交反馈希望OpenAI能够支持成人模式,而这些特定场景就包括科学、历史、新闻、创意和其他敏感内容适当的背景下。
在这种背景下ChatGPT可以生成色情内容、非法或非自愿性行为的描述以及极端血腥内容,简单来说就是原本的安全边界虽然为大多数人尤其是未成年人提供保护,但也妨碍专业人士使用ChatGPT分析犯罪现场描述、某些类型的报道、可能包含暴力或性内容的法律文本甚至影响到某些专业的医学文本。
当然OpenAI严格限制未成年人生成和接触此类内容,哪怕是在特定的场景下,所以本次出现的情况就属于OpenAI的安全漏洞了,不过即便这次修复估计接下来还会出现其他能够绕过限制的提示词技巧,这时候OpenAI就得跟着修复。
相关文章:
OpenAI升级ChatGPT搜索增加购物功能

相关文章

头条焦点
精彩导读
关注我们
【查看完整讨论话题】 | 【用户登录】 | 【用户注册】