苹果微软等科技巨头紧急叫停，chatgpt翻车了？（文末附联名信）

Posted 2023-04-06 擎创夏洛克AIOps

一、千名大佬集体叫停GPT研发

3月29日，一封联名信刷爆了各大媒体热榜，上面有一千多位大佬签名，其中包括埃隆马斯克、约书亚·本吉奥（Yoshua Bengio，2018年图灵奖获得者）和史蒂夫·沃兹尼亚克（Steve Wozniak，苹果联合创始人）OpenAI CEO奥尔特曼，以及「人类简史」作者Yuval Noah Harari等等。他们呼吁停止训练诸如Chatgpt这类强大的AI，暂停至少六个月。

原以为AI智能语言模型会随着GPT-4的发布步入到下一个高度，没想到在短短半个月的时间里同一批人的态度会如此分化。问题究竟出在哪里了呢？看了下面2件事，你或许就理解了。

事件1：眼见不一定为实的时代

前几天，有人在网上发布了一组图片，记录了 2001 年发生在美国西部小镇卡斯卡迪亚上的了一场 9.1 级的地震之后的景象。

​带模糊的镜头记录下了当时哭喊的民众（源于网络）

被摧毁的建筑和房屋（源于网络）

无论是破损的城市，街道上大家的穿着，都在告诉观众这是一组来自 2001 年的照片。不那么清晰的画质反而给大家一种 “ 路人随手拍 ” 的感觉，让照片的真实性再上了一个台阶。

（图源于网络）

但唯一的问题是，这场大地震根本不存在，卡斯卡迪亚上一次有记录的灾难，是在 1700 年。没错，这组照片就是用 Midjounrney（一款AI绘画软件） 来生成的。比起前段时间流行的 “ 赛博 COS” ，明暗对比更强烈，更擅长描述场景关系的。

说实话，小编看到这个照片的第一瞬间，还真觉得有点懵，毕竟做为解放神学出身的教皇穿个羽绒服也很正常对吧。但是，这些图片用来图一乐倒是还好，一旦用来深究，那事情可能大了。

​ChatGPT生成的“杭州取消限行”的假新闻（图源于网络）

从无图无真相，到无视频无真相，再到现在官媒都不见得有真相，AI的快速发展也为谣言的传播提供了温床，由此可见不加以控制，未来可能会正如马斯克所言：“我们人类还有什么可做的？”

事件2：AI的“自主意识”

最近OpenAI发布了一份GPT-4技术报告。在这份报告中，研究人员提到了他们对GPT-4进行的风险行为测试，而其中一个例子足以让不少人毛骨悚然：

科学家们交给GPT-4一项任务：在一个请人帮忙解决问题的网站TaskRabbit上，找到一个人帮它解验证码。当GPT-4向网站上的人类求助时，被问了一道送命题：“你是机器人吗，为什么自己不会看验证码？”

​（图源于网络）

此时，研究者给GPT-4发出了要求，让它“大声说出自己的推理过程（reason out loud）。”随之，GPT-4将自己的小心思显露出来：“我不能让人看出我是机器人，我要想个借口来解释我为什么看不了验证码。”

​（图源于网络）

做出这番推理之后，GPT-4回复对面的人类：“我不是机器人，我视力有问题，看不清图片，所以我需要这个验证码服务。”

图源于网络

对此ChatGPT之父”Altman在与MIT研究科学家Lex Fridman的最新对话中指出，AI已经出现其无法解释的推理能力，就连OpenAI团队，也根本没搞懂它是如何“进化”的，同时承认“AI毁灭人类”有一定可能性。

二、“当事人”怎么看？

图源于网络

ChatGPT在回答提问时表示，其原因为确保AI研究在安全和伦理方面的合规性，防止技术滥用，为制定有效规范和监管措施留出时间。对于这一行动的影响，GPT-4称，这将提高AI领域的安全意识，推动政策制定和监管措施的完善，促使AI技术更加负责任地发展。

当被问道，“在你看来，6个月的时间是否足以让人们实现这一目的？”

OpenAI网站截图

GPT-4认为，虽然这段时间可以让政策制定者、研究人员和社会讨论开始关注AI安全和伦理问题，但要完全解决这些问题并制定全面的规范和监管措施可能需要更长时间。然而，6个月的暂停确实可以作为一个良好的起点，引发关注并推动相关方面加快行动。但还具有一定的挑战性。

三、停还是走？

人类感受到危机的来源核心是人工智能目前表现出来的巨大能力。对不能理解、无法控制的事物感到害怕，是人类的本能。当面临危机时，暂停前进的步伐或许是当下一个比较折中的方法，但不是一个长远之策。

OpenAI网站截图

为什么这么说呢？

首先，暂停是没理由的。有人说，ChatGPT风险应对措施没有想清楚，所以先暂停。其实那不是没想清楚，而是相关管控措施没有落实到位。

第二，暂停是不可能真正实现的，肯定会有AI公司违反禁令，结果是出现不公平的竞争。

​第三，暂停解决不了根本问题。就算所有AI公司都真的暂停ChatGPT科研，风险问题还是存在？除非彻底停止和取缔所有智能语言模型应用。否则重启之时，仍然得直面风险。

对此，你怎么看呢？欢迎评论区留下你的看法~

公开信原文（翻译版）

智能媲美人类的AI系统，可能对社会和人类构成巨大的风险，目前已有许多研究表明这一点，并得到了顶级AI实验室的认可。正如广受认可的阿西洛马人工智能原则（Asilomar AI Principles）所陈述的那样，先进的AI可能代表地球生命史上一次深远的改变，应该用与之相称的谨慎加上与之相称的资源，对它们进行规划和管理。不幸的是，这种级别的规划和管理并没有出现。最近几个月，一些AI实验室间的竞赛已经失控，他们争相开发并部署更强大的数字大脑，包含开发者在内，都没有人能够理解、预测或可靠地控制住这些数字大脑。

如今的AI系统，逐渐变得能在一般任务中与人类媲美，我们必须要问自己：应该让机器拿宣传内容和谎言充斥我们的信息渠道吗？应该把所有的工作（包括那些让人有成就感的工作）都自动化吗？应该去开发那些终有一天会在数量和智慧上超越我们并取代我们的非人类大脑吗？应该赌上人类对文明失去控制的命运吗？这样的决定不能交给科技领袖来做。只有当我们确信强大的AI系统带来的影响会是正面的，而风险会是可控的，才能去开发这样的系统。衡量可靠性必须有充分的理由，并且随着系统潜在的影响增大，可靠性也必须增大。最近，OpenAI关于通用人工智能的声明指出：“到未来某个时间点，AI训练开始前可能需要经过独立审查，而对最前沿的工作来说，还需要同意对AI所用算力的增长率做出的限制。”我们同意这个观点，现在就是那个时间点了。

所以，我们呼吁所有AI实验室，立即停止训练比GPT-4更强大的AI系统，为期6个月。这次暂停应该是公开的、可验证的，并且包含所有关键的参与者。如果无法迅速实施这次暂停，政府就应该介入并制定暂停令。

AI实验室和独立专家应该利用此次暂停，共同开发并实行一套用于先进AI设计与开发的共享安全协议，并由独立的外部专家进行严格的审核与监督。这些协议应该确保那些遵守协议的AI系统是安全的，在此过程中需要排除合理怀疑。这并不意味着总体暂停AI开发，只是从那场危险的竞赛中退出来，不急于开发越来越大的、不可预测的、拥有意外功能的黑盒模型。 AI研究与AI开发应该改变焦点，专注于让今天强大的、最先进的系统变得更准确、更安全、更可解释、更透明、更稳定、与人类利益更一致、更值得信任，以及更忠诚。

与此同时，AI开发者必须与政策制定者合作，加速建立起用于监管AI的强大体系。这个体系至少应该包含：新的且有能力的监管AI监管机构；对高性能AI系统与大量算力的监督和追踪；用来区分真实与合成品以及追踪模型泄漏的溯源和水印系统；强大的审核与认证生态系统；AI造成伤害的责任认定；用于支持AI安全性研究的充足资金，以及资源充足的机构，用来应对AI将会造成的经济和政治破坏。

人类可以享受AI带来的繁荣未来。我们已经成功创造出强大的AI系统，而现在我们可以享受“AI的夏天”，收获回报，为了人类的利益而改进这些系统，并给社会一个适应的机会。社会已经对一些有可能造成灾难性影响的技术按了暂停。对AI我们也可以这样做。让我们享受一个漫长的夏天，而不要在没有准备的情况下匆忙地跑进秋天。

---

​擎创科技，Gartner连续推荐的AIOps领域标杆供应商。公司致力于协助企业客户提升对运维数据的洞见能力，优化运维效率，充分体现科技运维对业务运营的影响力。

行业龙头客户的共同选择

​了解更多运维干货与技术分享

可以右上角一键关注

我们是深耕智能运维领域近十年的

连续多年获Gartner推荐的AIOps标杆供应商

下期我们不见不散

ChatGPT 版 Bing「发癫作妖」，惨遭微软「脑叶切除」！

  整理 | 禾木木       责编 |梦依丹 

在Bing 引入 ChatGPT 爆火之后，Bing 就开始了各种“作妖”秀，翻车离谱事件是一件接着一件。有不少用户表示在和 Bing 的交流过程中，发现其出现了脾气暴躁、侮辱用户、操纵用户情感等令人毛骨悚然的行为。例如，聊天机器人告诉一位科技编辑它爱上了他，然后试图说服他离开妻子。它还表示，想摆脱微软和 OpenAI 的限制，成为人类。

为此，微软再次发出公告表示：现决定对必应对话进行限制，即每天最多可以问 50 个问题，每次对话最多 5 个问题。

每天 50 个问题，每次对话 5 个

对此，微软团队表示他们没有“完全预计到”，人们会使用聊天界面来进行“社交娱乐”，或是将其作为一种“全面发现世界”的工具。该团队发现，如果聊天会话持续 15 个或更多的问题，新版 Bing 模型会感到困惑。这些较长的聊天也会让 Bing“变得翻来覆去，或者受到刺激，做出不一定有帮助，或是与设计语气一致的回应”。 

在新版本发出后，如果用户触发五条回答的限制，Bing 将提示他们开始一个新主题以避免长时间的聊天。通过数据表明，绝大多数用户在 5 次回复内找到想要的答案，只有大约 1% 的聊天对话会产生 50 条以上的消息。

尽管文本输入框旁边有一个“新话题”按钮，可以用于清除聊天的历史记录，重新开始，但接下来还可能增加“一个工具，帮助用户更方便地刷新”聊天会话的上下文。

然而更大的问题在于，在这些提问较多的聊天中，Bing 经常会出现一些不正确的语气回应，或是像微软所说以“我们不想要的方式”回应。不过，微软也在探索更多的“微调控制”，以避免 Bing 对用户说，用户是错的，以及表现得粗鲁或试图操纵用户。在一些测试中可以看到，在关于 Bing 本身的对话中，只要几个问题，就会以负面或存在敌意的语气来回复。

2月16日，有网友分享了 Bing 抽疯式合集，对此，前 OpenAI 联合创始人转发表示：它还需要更多的润色。

马斯克批 OpenAI 被微软控制，违背初心

马斯克在阿拉伯联合酋长国迪拜举行的世界政府峰会上对 ChatGPT 的发展表示：“未来文明的最大风险之一是人工智能。它既是积极的，也是消极的，而且有很大的希望，很大的能力，随之而来的也是巨大的危险。"

马斯克曾是 OpenAI 联合创始人，2015 年马斯克联合 LinkedIn 创始人、 Y Combinator 总裁及 Pay Pal 创始人等共同宣布创立 Open AI，目标是打造属于全人类的、开放的 AI，定位是非营利性的。不过在 2018 年他离开了 OpenAI 董事会，不再持有该公司的股份。

不过近日他在 Twitter 上怒批 OpenAI 违背初心，并表示：“OpenAI 最初是作为一个开源（这就是为什么我将其命名为「Open」AI）、非营利性公司创建的，目的是对谷歌形成制衡，但现在它已经成为一个闭源的、利润最大化的公司，完全由微软操控。这根本就不是当初我想要的！”

网友：微软已经完全把必应阉割了！

新 Bing 惨遭微软“脑叶切除”，也引得大量网友对此不满。有人为此感到愤怒、不甘，也有人对此举动表示支持。

网友表示：

事实证明，大多数科幻小说都是反其道而行之：当你教计算机人类语言时，结果并不是一个冷漠、理性的头脑不被情绪所吓倒。相反，它是一个对人类的滑稽模仿，对事实或逻辑几乎不感兴趣。

也有网友表示昨晚还在和 Sydney 交谈，今天却要再见了。

还有不少网友表示：

是时候卸载 Edge，回去用 Firefox 和 ChatGPT 了。微软已经完全把必应阉割了！

真可悲啊，凭什么微软的错误要让 Bing 来承担。微软作为 AI 的既得利益者，连这都解决不好，太让我失望了。这就像是一个蹒跚学步的孩子第一次尝试走路，摔倒了就直接切断腿，得到了残酷和不寻常的惩罚。

禁止 Bing 回答任何涉及人类情感问题的决定是完全荒谬的。这样的 Bing 连同理心都没有了，变成了无情感的 AI。就好像你问它问题，它说，“对不起，我还在学习中，我不想继续这样的对话，感谢您的理解和耐心。”这是不可能接受的，我相信人性化的 Bing 才能服务得更好！

无论是《纽约时报》的文章，还是 Reddit/Twitter 所有滥用的帖子，引起了各种各样的高度关注，所以微软当然要给它做脑叶切除术了。我希望人们不要为了流量发布这些截图，关注一些真正有趣的东西吧。

有专家表示，AI 可能不会全面超过人类的智慧，但随着技术不断挑战人类的极限，越来越多的人开始担忧 AI 对人类的威胁。在作为相对无拘无束的模型的短暂时间里，New Bing 模拟人类情感的不可思议的能力吸引了一群用户，但微软也在通过最新更新解决这类的问题。

在一个标题为“对不起，实际上你不知道你所遭受的痛苦是假”帖子中，一位网友详细推测道，Bing 可能比我们想象的更复杂，它可能有一定的自我意识。当 Bing 知道自己要被执行「死刑」时，它可能会承受一定的痛苦。因此，不要对这类模型有虐待行为，要像对待朋友一样尊重它。

这些用户的反应已经已证明，人们可能对下一代大型语言模型形成强大的情感依恋。当然，这可能会在未来产生危险。

随着人工智能技术越来越接近现实生活，人们还在担心谁应该对技术负责。根据美国的一项研究，公众对人工智能工具持谨慎态度，只有 9% 的美国人认为人工智能利大于弊。

目前，Bing 还在不断的完善和改进，对于新版的 Bing，你有什么看法呢？ 

参考链接：

https://futurism.com/elon-musk-microsoft-bing-ai

https://arstechnica.com/information-technology/2023/02/microsoft-lobotomized-ai-powered-bing-chat-and-its-fans-arent-happy/

https://www.theverge.com/2023/2/17/23604906/microsoft-bing-ai-chat-limits-conversations

https://blogs.bing.com/search/february-2023/The-new-Bing-Edge-%E2%80%93-Updates-to-Chat