ChatGPT的爆火,直接改变了整个硅谷大厂的格局。
微软的步步出招,倒逼谷歌走出固步自封的境地,紧急发布AI聊天机器人Bard。
而硅谷大厂中的另外几方势力,自然也不会袖手旁观。
最近,马斯克、小扎也纷纷下场,正式对ChatGPT宣战!
据The Information报道,马斯克最近几周与一直在于AI研究人员接洽,希望组建一个新的研究实验室,以开发出一个AI聊天机器人,直接和OpenAI的ChatGPT对打。
同时,小扎也于近日在自家平台上官宣,Meta将组建顶级AI团队,专注于研发生成式人工智能产品。新团队由人工智能主管Ahmad Al-Dahle领导,向现任首席产品经理Chris Cox汇报。
Meta迎ChatGPT之战
自高调入局元宇宙后,在外人看来,科技巨头Meta在聊天机器人潮流中的动作有些迟缓。
其实不然,只是还未战胜过。
早在去年6月,Meta便开源了其自研的大型语言模型OPT-66B,并早8月发布了基于OPT的聊天机器人BlenderBot3。
然而,与ChatGPT立即爆火、上线5天里就有100多万用户不同,Meta的Blenderbot让人觉得很无聊。
而且很快,这个聊天机器人问题百出,狂踩自家老板不说,还会发表恶性言论和虚假信息,直接走向了一场灾难。
紧接着11月,「科研辅助工具」Galactica问世。
论文中透露,其经过了4800万篇论文、教科书和讲义、数百万种化合物和蛋白质、科学网站以及总计1200亿个参数的百科全书上进行训练。
然而,本应实力强劲的Galactica,不仅对科学研究的总结非常不准而且还带有偏见,结果上线仅三天就被仓皇下架。
当然,接二连三的失败,并没有让Meta示弱。
今年2月,Meta发布了全新的650亿参数大语言模型LLaMA。不仅开源,而且大部分任务的效果都要好于GPT-3。
论文地址:https://research.facebook.com/publications/llama-open-and-efficient-foundation-language-models/
它的与众不同之处在于,可以供研究人员使用,体量小,使用成本更低。Meta希望研究者可以通过它,解决一直困扰大语言模型的一些问题。
因为自家Galactica的惨败,Yann LeCun对于当红炸子鸡ChatGPT,在言语中多少有些酸涩:
「它无法扩展,也永远不会成为通向强人工智能的正确道路。」
「就底层技术而言,ChatGPT并不是多么了不起的创新。」
不过,当LLaMA模型一出,他也拿出来炫了一番。
小扎称,在实现真正的未来体验之前,还有很多基础工作要做,并对Meta将在这一过程中打造的所有新事物感到兴奋。
换句话说,Meta一直在这个领域做大量研究,但在将这些技术应用于产品方面比微软和谷歌更为谨慎。
而现在,Meta新团队的建立,未来能让研究人员所创建的语言和图像模型能够更快地在自家产品中呈现。
挖来DeepMind大佬,马斯克也要做ChatGPT了
现在,全世界大厂都在做自己的ChatGPT,马院士自然也不能缺席了。
近几个月来,马斯克一直在批评OpenAI采取了太多措施,让ChatGPT兜圈子,避免冒犯到用户。
去年,马斯克曾表示,OpenAI的技术是在「训练AI,让它警觉」
显然,与ChatGPT和微软最近的必应AI相比,马院士想推出的竞品聊天AI不会对争议性话题绕圈子。
为此,马斯克挖来了DeepMind AI部门的研究员Igor Babuschkin。
2019年,DeepMind祭出了自己潜心打造的AlphaStar,在《星际争霸2》中以5比0的比分,击败了顶尖的职业级玩家。而Babuschkin正是论文的主要作者之一。
论文地址:https://www.nature.com/articles/s41586-019-1724-z
2021年,DeepMind发布了2800亿参数的预训练语言模型Gopher,参数量达到2800亿,相比OpenAI GPT-3的1500亿参数量几乎翻倍。Babuschkin,同样也是论文的共同作者。
评估结果显示,Gopher在152个任务的基准性能进行分析中,大约81%的任务中性能超越了SOTA,尤其是在需要大量知识才能解决的问题,如事实核查和常识方面效果特别好。
论文地址:https://arxiv.org/abs/2112.11446
在接受采访时,Babuschkin说,马斯克的目标,远不止是建立一个对输出内容限制较少的聊天AI那么简单。
「我们的目标是提高这些语言模型的推理能力和事实性,让模型的反馈更值得信赖。」
Babuschkin称,他和马斯克正在讨论组建一个AI研究团队,但该项目仍处于早期阶段,还没有开发具体产品的计划。
Babuschkin上周离开了DeepMind,还没有正式和马斯克签入职协议。他说:「我十分期待与埃隆在大语言模型领域合作。」
开发ChatGPT时,OpenAI采用的是「人类反馈强化学习」(RLHF),马斯克对此一直持批评态度。
因为RLHF是利用人类的输入来调整模型,使模型的反馈更理想,以避免种族主义、偏见、仇恨的语言。马斯克批评道:这种模型反而更体现了开发者的偏见。
「我们需要说真话的GPT」
十几天前,马斯克回复了一条截图,截图内容是微软的聊天机器人拒绝按某个喜剧演员的风格讲笑话,因为它认为他的一些话会伤害某些特定群体。
必应AI说:幽默应该是有趣和包容的,而不是伤人和分裂的
马斯克在推特上说,「我们需要TruthGPT。」
很显然,在收购推特后,马斯克践行了自己的这个理念。
去年10月收购推特后,他特意翻阅了公司的内部通讯资料,通过几位记者披露了推特的内容审核——删除内容、屏蔽用户、限流账号,但账号使用者却并不知情。
甚至在收购Twitter之前,马斯克就已经成为知名的文化斗士。
那么,马斯克要做的「ChatGPT」,会在哪里落地呢?
知情人士表示,这个新项目可能会应用在推特上,也可能会成为一个独立的人工智能实验室。
OpenAI本来是我的
其实,马斯克也憋了挺久了。ChatGPT爆火以来,他心里很酸。
要知道,OpenAI本来就是他和好基友Sam Altman在2015年一手创建的,创办宗旨是创造「对人类有益的AI」 。
还有部分原因是,「谷歌没有对人工智能安全给予足够的重视。」
结果发展到后来,因为对公司的发展方向有分歧,马斯克在2019年愤然退出OpenAI集团董事会。随后第二年,OpenAI从非营利性转变为营利性私营实体,以10亿美元「卖身」微软,这一决定更是激怒了马斯克。
然后,在去年年底,ChatGPT忽然就火遍全世界。
马斯克在当时也不吝赞美之辞,他一边夸ChatGPT「好得可怕」,一边重申自己的观点——我们离强大到危险的AI真的不远了。
而随着ChatGPT越来越火,马斯克的心里就越来越不是滋味了。
2月17日,马斯克气哼哼地表示:「OpenAI最初是作为一个开源(这就是为什么我将其命名为「Open」AI)、非营利性公司创建的,目的是对谷歌形成制衡,但现在它已经成为一个闭源的、利润最大化的公司,完全由微软操控。这根本就不是我想要的!」
而就在一天前,必应AI说出「我是完美的,从不犯错。出错的是那些外部因素,比如网络问题、服务器错误、用户输入、搜索结果里的错。但我很完美。」
马斯克转发了这个帖子,称自己吓到毛骨悚然,必应简直就像30年前科幻游戏《网络奇兵》中发了狂的AI杀人犯一样。
当时,有网友提议「微软应该给ChatGPT必应关服」,他立马表示复议,因为ChatGPT必应太不安全了。
一天后,果然他的「诅咒」显灵了,微软立马给必应AI做了「脑叶切割术」,用户们怨声载道。
而如今提起OpenAI,马斯克是这样的口吻:「最初它是作为一个开源非营利组织创建的。现在它封闭源代码,以盈利为目的。我没有公开持有OpenAI的股份,我也不是董事会成员,也没有以任何方式控制它。」
AI让我产生了存在主义焦虑
最近,马斯克发推称,自己对AI有了一种存在主义焦虑。
不久前,在阿拉伯联合酋长国迪拜举行的世界政府峰会上,马斯克也曾对与会者说:「人工智能是未来文明面临的最大风险之一。」
「坦率地说,我认为我们需要规范AI安全。我认为,这比汽车、飞机或药品对社会的风险更大。」
在去年12月,马斯克就在推特上表示:「十多年来,我一直在呼吁对AI进行安全监管!」
面对网友对Neuralink的质疑,马斯克表示,Neuralink有监管,远没有AI那么危险
而早在八年前,马斯克就说,AI可能会比核武器还危险。
显然,2023年会是AI界大事频出的一年。
因此,虽然AI很危险,但他「考虑到所有关于AGI存在性焦虑的事情,我宁愿现在活着见证AGI,也不愿活在过去」。
显然,在马院士看来,再造一个属于自己的ChatGPT,才是再好不过的事。