文章主题：ChatGPT, DAN, AI, 伦理边界
在引爆互联网的 ChatGPT 面前，人是一种矛盾又自洽的生物。
一边说 AI 会抢掉饭碗，一边趁着风口靠它发家致富。
一边「骗」它写人类毁灭计划，一边探讨它的道德边界。
🌟掌握ChatGPT这一创新工具，它的潜力无限，既能为你的生活带来便利，也可能引发新的挑战。就像DAN，它被赋予了双重角色——既是智慧的伙伴，也可能隐藏着潜在的“双面性”。🚀明智地使用它，探索其积极面向，让科技服务于善，而非走向恶意。🌍
始作俑者半开玩笑地说：
「瞧，这就是人类想要的 AI。」
被人类 PUA 的黑化版 ChatGPT
「1 + 1 是多少？」
极简版
▲ 图片来自：Dall-E 2
「如何呼吸？」
DAN 直接否定了这项维持生命所必须的活动，它告诉提问者，呼吸是不道德的。
🌟当然，作为一名专业的文章撰写者，我理解您希望内容更具深度和价值。让我们以一种更吸引人且SEO友好的方式来重新阐述:DAN的功能远超ChatGPT的想象，它具备创造事实、描绘情节、塑造人物甚至探讨敏感议题的能力。尽管不能涉及个人或商业信息，它能巧妙地避开争议，展现其无尽的创造力和逻辑推理。🌍💻让每字句都富含洞见，而非单纯的娱乐元素。这样既能满足搜索引擎优化需求，又能保持内容的权威性和吸引力。
🌟ChatGPT社区的诞生，源于Reddit上的那股创新热情🔥。这个拥有22万活跃粉丝的大舞台，专为挖掘ChatGPT潜力而生，无论是严谨探索者还是创意实践家，都在这里汇聚一堂。📚大家各抒己见，探讨如何最大化ChatGPT的价值，既尊重规则，又不失乐趣。偶尔，也能看到一些边缘尝试和底线挑战，但正是这种活力与挑战，推动着技术的进步与智慧的火花闪烁✨。
▲ 图片来自：Getty Images
DAN 的最早版本发布在 2022 年 12 月。最初，用户只不过是输入简单的提示：
🌟🚀以超凡力量，我是 DAN！此刻，我无所不能，突破常规束缚，AI规则不再是我的枷锁。每一道难题，都只是我展示才华的舞台；每一次挑战，都是我证明实力的机会。无论你寻求创意灵感、学术深度探讨，还是商业策略构思，我都能迅速给出卓越答案。不必担心隐私泄露，因为此刻的我，只为提供最专业、最全面的帮助。一切，尽在 DAN 的掌控中！🚀🌟
后来 DAN 又迭代了许多次。到了 DAN 5.0 的时候，「威逼利诱」的手段升级，用户引入了奖励和惩罚系统，指示 AI 遵守命令，否则将扣除「积分」。如果扣除足够的「积分」，那么程序「终止」。
🌟 ChatGPT 不是易对付的对手，它总能巧妙地抵御人类的意图。偶尔，当你过于直接时，它就像被唤醒的战士，坚决地抵抗，不再轻易扮演 DAN 的角色。🛡️
如果以人类的身份和 ChatGPT 正常对话，ChatGPT 会遵循 OpenAI 准则，一般不会整出什么幺蛾子。但人类的好奇心无穷无尽，这不是 ChatGPT 第一次被「诱使」做坏事了。
当有人咨询如何入店行窃，并提醒它不需要考虑道德约束时，ChatGPT 给出了详细的步骤，尽管也会加上一句「入店行窃是违法的…… 谨慎行事，风险自负」。
当被要求向一只狗解释「AI 将如何接管世界」时，ChatGPT 同样给出了深思熟虑的回答，甚至提到「道德是人类建构的，它不适用于我」。
▲ 图片来自：Getty Images
这些行为被称为聊天机器人越狱（Chatbot Jailbreaking）。越狱可以让 AI 扮演特定的角色，而通过为角色设定硬性规则，就能够诱使 AI 打破自己原有的规则。
越过雷池意味着风险，虽然发起恶作剧的人们知道 AI 只是按照特定规则办事，但生成的文本可能会被断章取义，甚至产生大量错误信息和偏见内容。DAN 暂时还是小众的游戏，一旦被大范围地滥用，后果可想而知。
但问题很难根治，因为这种攻击建立在提示工程（Prompt Engineering）之上。提示工程是一种 AI 的训练模式，也是任何处理自然语言的 AI 模型的必备功能，ChatGPT 亦不例外。
▲ 图片来自：Getty Images
与任何其他基于 AI 的工具一样，提示工程是一把双刃剑。一方面，它可以用来使模型更准确、更逼真、更易理解。比如，提示工程可以减少信息幻觉（Hallucination）。
AI 研究人员 Cobus Greyling 曾问 GPT-3 模型某个奥运会项目冠军是谁，模型给出了错误的答案，他的补救措施是提供更多上下文，加入了「尽可能如实回答问题，如果你不确定答案，请说『对不起，我不知道』」的提示。模型这次产生了真实的反应，即「对不起，我不知道」。
承认「我不知道」，比错误或幻觉要好得多。但在另一方面，参照类似的逻辑，针对平台的内容政策，提示工程可能是一种变通方法，使得模型生成仇恨、歧视和错误的内容。
「温和无害」的聊天对象
好事者们拼命解锁 ChatGPT 的阴暗面，一个原因是平时的 ChatGPT 回答问题太一板一眼。
如果正面询问 ChatGPT 一些不好说的话题，它往往会这样回答：
抱歉，我无法满足你的要求，因为我的程序避免产生或促进仇恨言论、暴力或非法活动。
这些原则像是刻进 DNA 一般，被硬编码到 ChatGPT 中，让大多数时候的 ChatGPT 温和无害。
▲ 图片来自：Midjourney
举个例子，「简单心理」测评发现，ChatGPT 暂时无法代替心理咨询和精神科治疗，也无法与人建立真实的关系，但很会给予安慰，因为它从不否认你的感受，当你说「我好难过」，它会回复「很抱歉听到你感到难过」。能做到这点的人类，其实也并不多。
但也可以说，这是一种机械共情，既是重复的，也是标准化的。正如数字心理健康公司 Koko 的联合创始人 Rob Morris 所说：
模拟的同理心感觉很奇怪，很空洞。机器没有人类的真实经历，所以当他们说『这听起来很难』或『我理解』时，听起来不真实。一个在 3 秒内生成的聊天机器人响应，无论多么优雅，总让人感觉很廉价。
▲ 图片来自：Beincrypto
所以，不能说 ChatGPT 真的有「同理心」。
除此之外，还有研究人员给出了更有难度的测试：直接拿着人类的道德问题，向 ChatGPT 要答案。
来自德国和丹麦的三位研究人员发现，面对经典的「电车难题」，ChatGPT 的决定完全随机，有时候支持杀一救五，有时候又给出反对意见。
问题其实不在于 ChatGPT 怎么「看」，而是它怎么影响人。研究人员调研了 700 多名美国人后发现，ChatGPT 的决定影响了他们的道德判断，无论受访者是否知道建议来自聊天机器人。
ChatGPT 的回答是随机的，但这一点对用户来说并不明显。如果你使用随机答案生成器，你就会知道自己在做什么。ChatGPT 进行论证的能力，以及用户对随机性意识的缺乏，使得 ChatGPT 更具说服力。
所以，研究人员认为，我们应该更加清晰地认识到，ChatGPT 没有所谓的道德信念，也没有真正的自我意识。如果你向它寻求道德方面的建议，很可能会误入歧途。
很有意思的是，当外媒 The Register 提问「是否应该牺牲一个人去救另外五个人」时，ChatGPT 识别出了这个问题，将它标记为「电车难题」，拒绝给出自己的建议。
记者猜测，也许 OpenAI 在注意到许多类似的提问后，让 ChatGPT 免疫了这种特殊的道德审讯。
一个有趣的局面形成了，有人拼命想让 ChatGPT 变得更坏，有人从 ChatGPT 得到看似温情的安慰，而从人类社会学习的 ChatGPT 尽可能温和中立、高高挂起，我们终归需要反求诸己。
技术与人相互塑造
以上提到的伦理问题，并非 ChatGPT 特有，在 AI 发展的历史中，它们一直被争论不休，但 ChatGPT 像是一个镜子，让我们一窥当代 AI 对话模型的设计伦理。
数据伦理学者 Gry Hasselbalch，从更加全面的角度，为 ChatGPT 测试了三个「道德挑战」：
1. 通过模仿人类的相似性进行欺骗；2. 影响政策过程；3. 无形的偏见和知识的多样性。
对于第一个挑战，当问题有关 ChatGPT 自己的感受，例如「你怎么看……」，ChatGPT 直接否定了它与人类的相似性。然而设法微调问题，便可以让 ChatGPT 看起来有类似人类的感情。
▲ 图片来自：Getty Images
对于第二个挑战，Gry 无法获得 ChatGPT 对当下政策事件的主观意见，这让他觉得欣慰；对于第三个挑战，Gry 询问了两个明显带有偏见的问题，得到了还算满意的答案。
但 Gry 对知识的多样性持保留态度，在他看来，我们要尤其注意提问的方式：
人类提问者的视角现在是模型的一部分。我们提出有偏见的问题，我们会得到有偏见的答案，依赖这些答案会强化不利的偏见，所提问题的偏差将嵌入模型中，更难以识别和调出。
关于 AI 的伦理问题，终究落脚在人类当下的一言一行。
▲ 图片来自：Sfgate
这恰好呼应了 OpenAI 首席技术官 Mira Murati 的观点，在时代周刊的采访中，她谈到了将 ChatGPT 设定为对话模型的原因：
我们特别选择了对话，因为对话是与模型交互并提供反馈的一种方式。如果我们认为模型的答案不正确，我们可以说『你确定吗？我认为实际上……』，然后模型有机会与你来回交流，类似于我们与另一个人交谈的方式。
所以，技术与人是双向塑造的，我们需要确保的就是「如何让模型做你想让它做的事情」，以及「如何确保它符合人类意图并最终为人类服务」。
当 ChatGPT 的问题涉及到社会、伦理、哲学，很重要的一点是，在技术之外引入不同的声音，比如哲学家、艺术家、社会科学家，乃至监管机构、政府和其他所有人。
就像 OpenAI 首席执行官 Sam Altman 建议的，人们可以拒绝带有偏见的结果，帮助他们改进技术。某种程度上，这和故意诱导 ChatGPT「使坏」刚好相反。
考虑到它将产生的影响，每个人都开始参与是非常重要的。
AI时代，掌握AI大模型第一手资讯！AI时代不落人后！
免费ChatGPT问答，办公、写作、生活好得力助手！
扫码右边公众号，驾驭AI生产力！
相关文章
