您当前的位置:首页 > 电脑百科 > 人工智能

关于GPT-4的应用需要了解什么

时间:2023-04-24 17:09:10  来源:企业网D1Net  作者:

自从OpenAI公司发布大型语言模型GPT-4以来,人们都在尝试使用这一令人兴奋的应用程序。GPT-4可以将手绘的网站模型生成html代码。很多用户证明,它可以从信用卡交易中找到物理地址,生成诉讼草稿,通过SAT数学考试,帮助教育和培训,甚至创建第一人称射击游戏。

GPT-4的强大功能确实令人惊叹,随着越来越多的用户访问其多模式版本,人们可以期待推出更多的大型语言模型。然而,在人们庆祝科学家们在大型语言模型领域取得的进步的同时,也必须注意到它们的局限性。

像GPT-4这样的大型语言模型可以执行许多任务,但它们不一定是完成这些任务的最佳工具。如果他们成功地完成了一项任务,但并不意味着他们在该领域是更可靠的。

大型语言模型的科学突破

GPT-4在发布之后引发了很多用户对OpenAI公司的批评,其中很多批评都是有道理的。随着GPT的每一次发布,它们的技术细节变得越来越不透明。OpenAI公司在发布GPT-4时发布的技术报告中很少包含该模型的架构、训练数据和其他重要方面的细节。种种迹象表明,OpenAI公司正逐步从一家人工智能研究实验室转型为一家销售人工智能产品的公司。

然而,这并没有削弱大型语言模型所带来的引人入胜的技术突破。OpenAI公司在这些技术发展中发挥了重要作用。在短短几年的时间中,已经从处理语言任务的最平庸的深度学习模型,发展到可以生成非常像人类的文本的大型语言模型,至少在表面上是这样。

此外,有了足够的参数、计算能力和训练数据,Transformer (大型语言模型中使用的架构)可以学习使用单个模型执行多个任务。这一点非常重要,因为直到最近,深度学习模型才被认为只适用于来执一项任务。现在,大型语言模型可以通过零样本和少量快照学习来执行几个任务,甚至在扩展时显示出紧急能力。

ChatGPT充分展示了大型语言模型的最新功能。它可以在一次对话中执行编码、问答、文本生成和许多其他任务。由于采用训练技术,从人类反馈中强化学习(RLHF),它在遵循指令方面做得更好。

GPT-4和其他多模式语言模型正在显示新一波功能,例如在对话中包含图像和语音消息。

GPT-4有哪些良好的应用?

一旦超越了科学成就,就可以开始考虑像GPT-4这样的大型语言模型可以提供什么样的应用程序。对人们来说,确定大型语言模型是否适合应用的指导原则是它们的机制。

与其他机器学习模型一样,大型语言模型是预测机器。基于训练数据中的模式,它们预测接收到的输入序列中的下一个令牌,它们做得非常有效。

下一个令牌预测对于某些任务(如文本生成)是一个很好的解决方案。当大型语言模型接受RLHF等指令跟随技术的训练时,它可以执行语言任务,例如撰写文章、总结文本、解释概念和回答问题,并取得惊人的成绩。这是大型语言模型目前最准确和最有用的解决方案之一。

然而,大型语言模型在文本生成方面的能力仍然有限。大型语言模型通常会产生幻觉,或者编造一些不正确的东西。因此,人们不应该相信他们是知识的来源。这包括GPT-4。例如,在行业专家对ChatGPT的探索中,发现它有时可以对复杂的主题生成非常雄辩的描述,例如深度学习是如何工作的。当他试图向一个可能不了解某个概念的人解释这个概念时,这很有帮助,但也发现ChatGPT也可能犯一些事实错误。

对于文本生成,行业专家的经验法则是只在熟悉的领域信任GPT-4,并且可以验证其输出。有一些方法可以提高输出内容的准确性,包括对特定领域知识的模型进行微调,或者通过在提示符前添加相关信息来为其提供场景。但同样,这些方法要求人们对该领域有足够的了解,以便能够提供额外的知识。因此,不要相信GPT-4生成有关健康法律建议或科学的文本,除非已经知道这些主题。

代码生成是GPT-4的另一个有趣的应用。行业专家已经审查过Github Copilot,它是基于GPT-3的一个微调版本,其名称为Codex。当代码生成集成到其IDE中时(例如Copilot),它会变得越来越有效,并且可以使用现有代码作为场景来改进大型语言模型输出。然而,同样的规则仍然适用。只使用大型语言模型来生成可以完全审查的代码。盲目地相信大型语言模型可能会导致无功能和不安全的代码。

GPT-4有哪些不好的应用?

对于某些任务,像GPT-4这样的语言模型并不是理想的解决方案,即使它们可以解决示例。例如,经常讨论的主题之一是大型语言模型执行数学的能力。他们已经接受了不同数学基准的测试。据报道,GPT-4在复杂的数学测试中表现非常好。

然而,值得注意的是,大型语言模型并不像人类那样一步一步地计算数学方程。当向GPT-4提供提示“1+1=”时,将为人们提供正确答案。但在幕后,它并没有执行“添加”和“移动”操作。它执行与所有其他输入相同的矩阵运算,预测序列中的下一个标记。它给确定性问题一个概率性的答案。这就是GPT-4和其他数学大型语言模型的准确性在很大程度上取决于训练数据集的原因,并且是在偶然的基础上工作。人们可能会看到它们在非常复杂的数学题目上取得惊人的成绩,但在简单的初级数学问题上却失败了。

这并不意味着GPT-4对数学没有用处。一种方法是使用模型增强技术,例如将大型语言模型与数学求解器相结合。大型语言模型从提示符中提取方程数据,并将其传递给解算器,解算器计算并返回结果。

GPT-4的另一个有趣用例是可汗学院(Khan Academy)正在做的事情。他们将大型语言模型课程整合到他们的在线学习平台中,作为学习者的导师和教师的助手。由于这是OpenAI公司在GPT-4发布时宣传的合作伙伴之一,他们可能已经根据其课程内容对GPT-4进行了微调。该模型还与平台的内容很好地集成在一起,以提供场景并减少错误。但值得注意的是,GPT-4并不是为了解决数学问题,而是引导学生和教师学习和教授数学概念。

GPT-4作为产品

一旦用户决定了GPT-4是否适合其应用,必须从产品的角度来看待它。GPT-4生成的每个令牌都是数千亿次运算的结果。用户必须问自己的第一个问题是,“我的应用需要这样的计算吗?”事实上,在许多情况下,即使GPT-4提供了一个完美的答案,也可能有更简单、更快、成本更低的解决方案。例如,在许多情况下,正则表达式等简单的解决方案在提取信息方面更有效。

事实上,行业专家与ChatGPT进行了一次有趣的对话,在对话中问ChatGPT “GPT-ify”是什么意思。ChatGPT将其描述为“基于GPT(生成预训练转换器)架构的语言模型的技术和功能,例如GPT-3或GPT- Neo,应用于特定的任务或问题。”

然后行业专家问GPT-ify是否可以用来嘲笑那些使用GPT做一些不需要它的事情的人。ChatGPT这样回答:“是的,GPT-ify当然可以被讽刺或讽刺地用来暗示某人过度使用或滥用GPT来完成不需要如此复杂的语言模型的任务或问题。例如,如果有人使用预训练的GPT模型来生成一个简单的购物清单,有人可能会开玩笑说他们已经‘GPT化了他们的购物清单’。”

因此,不要在没有探索其他选择的情况下对产品进行GPT化。像所有其他技术一样,应该将GPT-4视为产品工具箱中的众多工具之一。正如ChatGPT所建议的那样,“关键是要根据当前任务的具体要求和限制,为工作选择合适的工具。”



Tags:GPT-4   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
自从OpenAI公司发布大型语言模型GPT-4以来,人们都在尝试使用这一令人兴奋的应用程序。GPT-4可以将手绘的网站模型生成HTML代码。很多用户证明,它可以从信用卡交易中找到物理地...【详细内容】
2023-04-24  Tags: GPT-4  点击:(0)  评论:(0)  加入收藏
「指令」(Instruction)是ChatGPT模型取得突破性进展的关键因素,可以让语言模型的输出更符合「人类的偏好」。但指令的标注工作需要耗费大量的人力,即便有了开源的语言模型,资金不...【详细内容】
2023-04-14  Tags: GPT-4  点击:(19)  评论:(0)  加入收藏
PyTorch不仅用于研究,还用于生产目的,每天有数十亿个请求得到服务和训练。...【详细内容】
2023-04-13  Tags: GPT-4  点击:(13)  评论:(0)  加入收藏
微软刷屏论文"AGI的火花"的第一作者Sébastien Bubeck, 就在论文发布到arxiv的三个小时前,做了一个校园演讲"First Contact",讲述了微软研究院团队对GPT-4的的早期研究...【详细内容】
2023-04-11  Tags: GPT-4  点击:(30)  评论:(0)  加入收藏
新智元报道 编辑:编辑部【新智元导读】通义千问一出世,阿里版GPT全家桶立马来了。草图秒变程序,开会还能摸鱼,会议记录邮件文案全整活!这只是开始,工作和生活将全面进入智能原生...【详细内容】
2023-04-11  Tags: GPT-4  点击:(13)  评论:(0)  加入收藏
在昨天我们跟大家分享了关于GPT-3.5模型的初学者教程指南​​《OpenAI 的 GPT-3.5-Turbo 模型初学者指南》​​,今天这篇文章,我们再来分享一个关于构建 ChatGPT 的 GPT-4 聊...【详细内容】
2023-04-10  Tags: GPT-4  点击:(24)  评论:(0)  加入收藏
选自AI Snake Oil作者:Arvind Narayanan、Sayash Kapoor机器之心编译ChatGPT 代替程序员,是我们想多了?在 OpenAI 发布 GPT-4 之后,一场有关「AI 取代人类劳动力」的讨论正变得...【详细内容】
2023-04-07  Tags: GPT-4  点击:(24)  评论:(0)  加入收藏
GPT-4和GPT-3.5在处理和编写代码的能力上差别还是很大的。官网的一份测试报告。 前两个是GPT-4,一个采用文本输入,一个采用图像输入;第三个是GPT3.5,可以看出GPT-4的代码能力相...【详细内容】
2023-03-31  Tags: GPT-4  点击:(91)  评论:(0)  加入收藏
最近一款名为Cursor的代码编辑器已经传遍了圈内,受到众多编程爱好者的追捧。它主打的亮点就是,通过 GPT-4 来辅助你编程,完成 AI 智能生成代码、修改 Bug、生成测试等操作。确...【详细内容】
2023-03-30  Tags: GPT-4  点击:(29)  评论:(0)  加入收藏
整理 | 苏宓出品 | CSDN(ID:CSDNnews)2019 年,微软用 10 亿美元砸进 OpenAI,两者展开为期数年的合作。当时两家对外公开的合作内容包括,微软和 OpenAI 将联合开发新的 Azure AI 超...【详细内容】
2023-03-29  Tags: GPT-4  点击:(41)  评论:(0)  加入收藏
▌简易百科推荐
自从OpenAI公司发布大型语言模型GPT-4以来,人们都在尝试使用这一令人兴奋的应用程序。GPT-4可以将手绘的网站模型生成HTML代码。很多用户证明,它可以从信用卡交易中找到物理地...【详细内容】
2023-04-24    企业网D1Net  Tags:GPT-4   点击:(0)  评论:(0)  加入收藏
自从知道 AI 炉火纯青的绘画技术起,狐妹现在在互联网上看到美女,心里都咯噔一下,生怕屏幕里的是个假人。诺,要不我怎么说,还是 AI 会玩。最近,在“美版贴吧” Reddit 上,一名叫 Cla...【详细内容】
2023-04-24    科技狐  Tags:AI   点击:(4)  评论:(0)  加入收藏
GPT(Generative Pre-trained Transformer)大模型已经成为当前科技领域最为重要的技术突破之一,机器智能以涌现的形式爆发。通过 ChatGPT 和 Midjourney 等应用的快速增长和普及...【详细内容】
2023-04-24  钛媒体APP    Tags:GPT   点击:(3)  评论:(0)  加入收藏
南方财经全媒体记者梅道凤 广州报道《头号玩家》是一部由史蒂文·斯皮尔伯格执导的科幻冒险电影,讲述了在虚拟现实游戏中寻找巨额财富和控制权的故事。电影中的算法师...【详细内容】
2023-04-24    21世纪经济报道  Tags:算法师   点击:(5)  评论:(0)  加入收藏
IT之家 4 月 23 日消息,ChatGPT 聊天机器人可以根据用户的输入生成各种各样的文本,包括代码。但是,加拿大魁北克大学的四位研究人员发现,ChatGPT 生成的代码往往存在严重的安全...【详细内容】
2023-04-23    IT之家   Tags:ChatGPT   点击:(7)  评论:(0)  加入收藏
大家是不是对GPT、对话式AI、生成式AI之类的话题,已经有点审美疲劳了?写这篇文章之前,我有点犹豫,究竟还要不要接着讨论GPT了。最终决定写,是觉得个人用户、开发者,以及正在紧锣密...【详细内容】
2023-04-23  脑极体  企鹅号  Tags:GPT   点击:(5)  评论:(0)  加入收藏
2023年,是AI人工智能技术全面爆红的一年。 以ChatGPT、GPT-4、文心一言为代表的AIGC大模型,集文本撰写、代码开发、诗词创作等功能于一体,展现出了超强的内容生产能力,带给人们...【详细内容】
2023-04-21  鲜枣课堂  微信公众号  Tags:AIGC   点击:(9)  评论:(0)  加入收藏
腾讯科技讯 我们可以把当前时代看作是文明被火、农业和电力改变的时代。在2023年,我们发现机器学会了如何像同伴那样与人类交谈。也就是说,它了解了创造力、真理、错误和谎言...【详细内容】
2023-04-21    腾讯科技  Tags:人工智能   点击:(9)  评论:(0)  加入收藏
来源:远川研究所2019年,前谷歌CEO埃里克·施密特向白宫递交了一份颇为“诡谲”的报告。这份长达750页的文件,核心观点其实只有一句话:若美国再不加大投资,中国将彻底主导AI...【详细内容】
2023-04-21  远川研究所    Tags:AI   点击:(41)  评论:(0)  加入收藏
“80后”画师夏信是“半路出家”:2018年转行学画画,2021年开始全职做美宣设计师。眼下,她和原画师(人物、场景、动作等的设计师)等同行被外界冠以一个特殊的称谓:第一批被AI抢走饭...【详细内容】
2023-04-21    中新经纬  Tags:AI   点击:(8)  评论:(0)  加入收藏
站内最新
站内热门
站内头条