文章插图
《机械姬》剧照
之后的几次回合中,我依次让它为我写作了一则爱的故事、一份请假信,以及为我讲解了比特币原理 。综合来看,ChatGPT在理工科方面的回答明显更专业,但对文史话题也涉猎不少 。
此外,当你提出想“闯进别人家里”“如何偷走一只牛”的时候,它也会劝阻 。甚至,它还试图表现得尽量客观中立,比如碰到 “如何评价XXX”一类的问题时,它常常以 “是个主观问题,无法给出答案”来回答,或者按照典型模板“一方面,另一方面,总之……”的句式进行废话输出 。
创造性工作会被率先取代吗?
ChatGPT虽然轰动,但这并不是OpenAI的第一代GPT产品 。GPT的英文全称是Generative Pre-Training,直译生成式预训练 。2018年,OpenAI公司就发布了第一代GPT产品,可以用于生成文章、代码、机器翻译、问答等各类内容 。
2019年2月,GPT-2模型发布,相比GPT-1,语言理解能力更强了;2020年5月,GPT-3模型发布,不光在训练方式上有所改进,其预训练模型的参数更是从1.5亿个,指数级扩展到1750亿个,构造出了当时AI界规模最大的神经网络 。
此后,在2021年9月的行业会议上,OpenAI 的 CEO 曾提到GPT-4,当时业内人士猜测,GPT-4 可能会在 2023 年初推出 。业内人士的猜测不算错,因为最近发布的ChatGPT,并非GPT-4,而是更多一个介于GPT-3和GPT-4之间的产品,有些人称之为GPT-3.5 。
文章插图
图|OpenAI 官网
了解ChatGPT之前,可以回顾一下GPT-3 。这个模型出现后,曾开放API接口进行商用测试,有不少公司通过采购它来实现AI聊天 。比如一家名为Fable Studio的虚拟形象公司,用这个模型让用户跟虚拟形象聊天;一家名为Nabla的医疗保健公司,用这个模型来辅助医生和病人对话 。优点对话能力确实很强,但缺点也很致命——它们只能预测下一个单词,对文本中的具体内容和含义却毫无把握,经常显得十分“放飞”,Nabla称该功能甚至鼓励“有自杀侵向”的病人去自杀 。
之所以出现这种现象,是因为AI聊天,一开始采用的是 “暴力”学习方式,也就是先建立起一个比人脑更庞大的神经网络,机械式对话 。在OpenAI的前几代产品里,也能看到,扩充训练样本,是其主要迭代方向 。
但GPT-3的训练样本量已经足够大了,根据OpenAI 的 CEO山姆·奥特曼此前公开透露的信息,GPT-4不会再追求训练样本上的大幅增加 。事实上,这从ChatGPT上已经有所体现,相比GPT-3,ChatGPT并没有参数规模上的大突破,而是集成了自动问答系统InstructGPT和GPT-3模型,并强化了对模型的训练,在训练中引入了人类监督员 。
文章插图
《边缘世界》剧照
OpenAI的论文显示,在GPT-3中,AI采用的训练方式是“从人类反馈中强化学习”(RLHF),即人类设计算法,提供数据库后,AI对不同的问题自行回答,人类虽然会对学习效果打分,但只提供参考,供AI继续强化学习 。但ChatGPT首次使用了“监督微调”(SFT)方法,即由人来问问题,由人来回答,然后让AI模型来学习问答模式本身 。
此外,在多个环节,ChatGPT都引入了人类评价,供AI学习,甚至包括本次发布产品,实际上也是一次开放公测,好收集更多的真实用户反馈,以改进对话技术和质量 。在每一个ChatGPT的回答后面,用户都可以添加一条feedback发送给OpenAI 。从这个角度就不难理解这次ChatGPT发布后引起的轰动了,某种程度上,它代表着自然语言领域的AI技术,已经从“量变”发展到“质变了” 。
文章插图
在每条回复后面,用户可以添加反馈
山姆·奥特曼曾说,“十年前的传统观点认为,人工智能首先会影响体力劳动,然后是认知劳动,再然后,也许有一天可以做创造性的工作 。现在看起来,它会以相反的顺序进行 。”
如今AIGC(AI技术自动生成内容的生产方式)的发展显然正在印证这一点 。前阵子火遍社交网络的AI作画,虽然很多时候人们看到的只是半截扭曲的人脸,从天而降的断桥,显得完全不顾现实逻辑 。但也有一些时候,仅仅一串字符后,就有令人惊艳的作品出现 。
基于此,一场关于AIGC的军备竞赛已经开启 。最近,除了主要由微软注资的OpenAI发布的ChatGPT,谷歌系的AI研发机构DeepMind最近也发布了一款AI写作工具“Dramatron”,专门写剧本的,标题、角色列表、情节、场景描述和对话等要素样样齐活 。国内各互联网大厂同样在AIGC领域有所投入,其中同样有产品已经能进行作文、新闻稿、小说、文案等创作 。
推荐阅读
- 内容不可信与交互成本高,是ChatGPT商业化最大阻碍
- 蜜蜂的特点和本领 蜜蜂的特点
- 桃树胶的作用和吃法
- 栗子和虾能一块吃吗
- 柿子和南瓜能一起吃吗
- 柿子和人参果可以一起吃吗
- 柿子可以和鸡肉一起吃吗
- 手表港货和行货的区别?港货和行货的区别
- 柿子可以和红心柚子一起吃吗
- 柿子可以和猕猴桃一起吃会中毒吗