学校封杀,大厂禁用,ChatGPT引发大面积恐慌!
公告链接:https://icml.cc/Conferences/2023/llm-policy
大规模语言模型,学校争议丛生
在过去的封杀几年里,大规模语言模型(LLM)的大厂发展非常迅速。最近,禁用这一进展不仅没有放缓,面积甚至还更快了。恐慌
正如大家看到的学校,过去几个月发布的封杀LLM,如OpenAI的大厂ChatGPT,已经能够生成难以与人类相区分的禁用文本片段。毫无疑问,面积这是恐慌自然语言处理和生成方面令人兴奋的进展。
但这种快速的学校进展往往伴随着意想不到的后果以及无法解答的问题。比如,封杀由模型生成的大厂文本和图像是新颖的,还是现有工作的衍生品?
此外,文本片段、图像以及其他由这些模型产生的内容,又应该归谁所有:是生成模型的用户,还是训练模型的开发者,抑或是制作训练数据的内容创作者?
可以肯定的是,随着大规模生成模型被更广泛地应用,这些问题都将随着时间的推移得到解答,但现在还不行。尤其是距离ChatGPT的发布才过了不到2个月(2022年11月底)。
而对于ICML来说,他们并没有足够的时间来观察和调研ChatGPT将会对论文审稿和发表过程,产生何种影响。
考虑到针对这项新技术所采用的策略,会直接关系到研究人员的职业生涯。因此ICML表示,自己只能更加谨慎,甚至还会有些保守。
时有错漏,但码农依然爱不释手
其实,虽然ChatGPT经常因为‘犯蠢’而被嘲,但自它诞生一个多月来,很多码农的工作习惯,确实被它改变了。
在12月初,ChatGPT亮相后,码农们发现可以用它生成代码,立马沸腾了。
ChatGPT不仅可以回答任何领域的问题,而且生成的答案,有很大的概率非常精确和详细。
比如,当你问到‘How to iterate over an keys and values array in Javascript’时,它生成了很完美的答案。
锦上添花的是,ChatGPT还能通过一个支持性的例子和解释,告诉你这个JavaScript中常见问题的最佳解决方案:
甚至,还可以用它给代码纠错。
不过随后,码农们马上发现,ChatGPT生成的代码,其实有不少问题。
ChatGPT会‘犯蠢’,背后原因其实很简单——AI的输出,是概率性的。ChatGPT没有任何标记了对错的内部记录,它其实是一个统计模型,这个模型中,是在不同上下文中的语言组合。
而上下文的基础,就是GPT-3训练所用的整体数据集,来自ChatGPT的RLHF训练的额外上下文,prompt和之前的对话,以及很快就会有的反馈。
ChatGPT的答案,本质上就是从构成GPT-3的互联网数据语料库中收集的概率结果。在10秒内,ChatGPT做出了结果的最佳猜测,这个猜测很可能是正确的。
当然,也有错误的概率。
这就是为什么,网友用ChatGPT生成的代码在Stack Overflow上疯狂灌水、错误答案满天飞时,后者连夜发布了官方封杀令。
虽然ChatGPT写代码的能力被很多人诟病,但其实,用还是可以用的。
其实,ChatGPT最合适的定位,应该是编码辅助工具。在ChatGPT的发布方OpenAI看来,ChatGPT的重要用途之一,正是帮助程序员检查代码。
对于开发者而言,它就是日益丰富的工具板中的一个工具。而且,就像任何自学模型一样,ChatGPT也会随着时间的推移,不断学习,不断自我纠正和改进。
很多时候,与其在Stack OverFlow上为相对简单的问题(如何在Flutter中触发HookConsumerWidget的重建)等待几天,不如直接向ChatGPT提问。
因为在ChatGPT上,开发者们有很大概率,得到一个可以用于解决问题的起点——
- ·人还活着为何会被人祭奠4.3万次?网络祭祀平台乱象调查
- ·京东REIT登陆上交所 首只民企仓储物流REITs打响“开门红”
- ·高盛质疑“最可靠”衰退指标:收益率曲线倒挂未必预示衰退
- ·易改衣完成数百万元融资,滴灌通投资
- ·多家快递企业交出10月“成绩单” 行业发展韧性足
- ·什么情况?昔日“定增王”九泰基金,管理规模缩水超八成,仅剩24亿
- ·抖音上线全国外卖?回应来了…美团也有大动作
- ·2月9日银行日报:存款5万要提供收入证明?银行回应!现金管理类理财产品收益率趋近货币基金
- ·北京经开区:提倡非必要不流动,宅家不离家
- ·盛业午后涨近3% 中金首予盛业跑赢行业评级
- ·日本调查:93.2%受访日本小学生表示“书包太重”
- ·小米突然也成chatgpt概念了?大涨近10%,百万大单踏步买入,股民高呼:人机交互大有可为!
- ·全球液晶面板产业探底
- ·中柬经贸合作成果如何、中澳经贸往来全面恢复?商务部发布会回应了这些热点话题
- ·*ST凯乐退市 全面注册制下需强化A股新陈代谢
- ·华控赛格被立案,股民索赔可期
- ·批量签约!金融支持稳地产,国有大行与优质房企拉起“友谊的小手”
- ·Q4调整后每股收益超预期 艾伯维涨超5%
- ·网传东吴证券研究所发起光伏掼蛋局?电新团队回应:未举办相关活动
- ·央行下发金控公司关联交易管理办法,防范利益输送、风险传染和监管套利
- ·北京第二外国语学院一名在校学生核酸检测阳性,校园临时管控
- ·绿展科技宣布完成数千万元A轮融资,国中资本领投
- ·“活出男人范”的步森股份,被自家百万年薪高管告了
- ·国台酒业港股上市前景存疑!业绩高增长存猫腻,零售端价格倒挂,能否拿到证监会“小路条”?
- ·外媒:伊朗称已在福尔道核设施生产60%丰度浓缩铀
- ·投行Jarden预计澳大利亚房价将在2023年暴跌15%
- ·补足方式增加!银行卡微信支付宝也可用于补足北京社保卡支付不足部分
- ·安里资产管理郭家耀:港股表现乏力 大市成交维持低水平
- ·英国石油:土耳其杰伊汉港的石油出口尚待恢复
- ·“加息乌云”尚未散去 小摩CEO力挺美联储:峰值利率高于5%很合理
- ·年内支付领域最大单笔罚单!百联优力被罚近6500万元,牌照还能否顺利续展?
- ·“集成灶一哥”火星人内忧外患:股东减持套现,投诉不断增多
- ·中芯国际:2021、2022年连续两年年销售收入同比增幅超三成
- ·海南椰岛控股股东“筹码”再遭法拍 “疑似牛散”张寿春斥资逾亿元竞得首批750万股
- ·侵犯“红牛”商标权,黑龙江一公司被罚2.9万元
- ·QDII基金加速“上新” 公募积极“跨海”布局