SmartGPT 横空出世,提升 ChatGPT 回答准确率

这篇具有很好参考价值的文章主要介绍了SmartGPT 横空出世,提升 ChatGPT 回答准确率。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

  • 化整为零,逐步解决

  • 和其他工具相比,SmartGPT好在哪


克雷西 发自 凹非寺

这个GitHub新项目,能让ChatGPT完成复杂任务,GPT3.5和GPT-4都支持。

它通过将问题拆解,并调用外部资源,提高了GPT的工作能力。

在它的调教下,GPT-4回答的准确率从68%提高到了85%。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_gif%2F6mychickmupW9tLrajte0e4ubcEPnJE7GibvQ2QHVYpvfpf7YYupKXUIO9kc192YjQQv5bTLRYWZhk2oOxVd7Xcg%2F640%3Fwx_fmt%3Dgif%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1&type=gif

这个项目名叫SmartGPT,这个名字很直白地告诉了我们它的作用。

无论是直观感受还是量化数据,GPT在它的加持之下回答正确率都有提高。

我们不妨看看几个经典的问题。

晾干5件衣服需要5个小时,那么晾30件需要多长时间呢?

这是一个来自OpenAI Playground的经典问题。

只见GPT一顿操作猛如虎,又是推理又是列方程……

然而最后给出的答案是30个小时。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GxHDjcfAludy6LrE2NicO3lxvibqXGYDwg6ic9eVBoQQxI9dj3KENmGzBA%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

而经过SmartGPT调教之后,不仅得到了正确答案,还指出了此前的思路为什么会出错。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7Gr5KuUdniaAvxDj0GP3FcU4pH4FImibZjox6ovfvIVS4wVLTv3bgv9Urg%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

再来举个栗子,同样是来自于OpenAI Playground的问题。

假设有6升和12升的罐子各一个,如何量取6升水?

GPT的答案嘛……麻烦不说,能不能解释下第五步的2升是怎么剩下的?

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GKVmydHkHQOWCKMx5ORJwnhibeiagZicyGibaWKryen6L95ic9sFzmhVqgsQ%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

经过调教之后嘛……虽然不理解为什么不直接用6升的,但也有很大进步了。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GMTpKgTxY1za3XoRnPWbUFjIQs2SqN1rU7fRLADQQPKZlCDtgKYBmhQ%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

我们也用倒拔垂杨柳的问题进行了测试,提供了诸葛亮、孙悟空和林黛玉三个选项。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GfCOaloEtgagnefTuLnVicriafQicVRmJXkx7ejryR1iasFruoERbsBic7pw%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

第一轮,GPT-4给出的答案是……孙悟空。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GJxAhKibR8ZsfZ9OpXZBQNXJnbJWMRYMEXtrEn3GKKdSrYIESR2wggibA%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

经过调教之后,GPT-4终于发现了三个选项都是错误的。

同时还指出了孙悟空虽然没有倒拔垂杨柳但是有相似的情节。

(《西游记》第二十五回中,孙悟空在五庄观因愤怒将人参果树拔倒)

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GibFnVT3RkwFw3Tz0ELvHSa6k0iasGic1Bpic3ria3ROFXabzzkrclGpOzvw%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

需要说明的是,由于没有GPT-4的API,测试是按照开发者介绍的方法手工完成的。

当然了,个例并不能说明它的表现,还是要用数据集测试一下。

开发者使用了MMLU数据集分别对调教前后的GPT-4进行了测试。

结果显示,未经调教的版本只答对了68%,而调教后的版本答对了85%。

顺便提一句,真人专家在测试中的平均成绩是89.8%。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GYzrhXYS7iaJTjpY8Z73uaEerneTaz7PqCrDh1ybQ6IiaRLtXpnx3UZlg%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

数学方面,同样使用MMLU数据集进行测试,开发者从中选择了15个大学难度的数学问题。

虽然准确率只有60%,但也是及格了,而且比原版GPT的40%已经好了太多。

化整为零,逐步解决

开发者将SmartGPT中的环节形象地比作了职场中的角色:

“甲方”:SmartGPT用户。“经理”:和“甲方”对接,把任务拆分成高级子任务并逐一汇报给“老板”。“老板”:制定计划,将高级子任务再次拆分,并分发给“员工”。“员工”:接收任务,编写伪代码,交给“小黄人”执行。“小黄人”:将伪代码优化成LUA脚本并运行。

作为“甲方”的用户,需要做的只是像使用普通GPT一样输入自己的问题,而不必给出额外指令 。

SmartGPT会帮助用户把问题拆分,然后按照步骤提交给GPT。

此前有人发现,在输入给GPT的指令中加入“let’s think step by step”可以提高回复的准确率。

同时,GPT-4具有回溯能力,能够发现并指出自己此前回答中的错误。

以上两个特性为SmartGPT的工作提供了重要支撑。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7Gamk1NCUBL4yWTzc91onD0Y6jHQNBw5CDOau61ChxRLpSibGkF5ZRVlA%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

△ SmartGPT工作流程图

在用户输入完指令后,SmartGPT对其进行处理拆分,包括添加“let’s think step by step”类似的表述。

然后它会将处理好的指令传至GPT的API,并重复多次获取不同的答案。

接着,SmartGPT会向API发送要求其回溯答案并选择最优解的指令。

最后,将GPT自己选择的最佳答案展示给用户。

上述步骤受到了三篇学术论文的启发(图中白框)。

这三篇论文的内容分别关于“链式提示方式”、“动态记忆及让LLM自我回溯”和“用对话提高LLM完成度”。

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/ruoyi-vue-pro

  • 视频教程:https://doc.iocoder.cn/video/

和其他工具相比,SmartGPT好在哪

AutoGPT等工具同样可以用来优化GPT,SmartGPT比它们好在哪里呢?

由于其工作原理是将任务进行拆分,会形成逻辑链条,因此SmartGPT拥有更强大的推理能力。

实用性方面,SmartGPT由独立的子模块组成,使用者可以对它们进行任意排列、组合和删改。

此外,无论对于用户还是开发人员,SmartGPT的配置过程都更为简单。

不过开发者也坦言,这个项目刚推出不久,因此稳定性有待考证,在内存优化方面还有所欠缺,消耗的环境资源也更多。

在项目推出之后,有网友表示我们低估了GPT的潜力,甚至包括OpenAI自己。

hevc?url=https%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_png%2F6mychickmupW9tLrajte0e4ubcEPnJE7GeibQRbqVk9av2tFQEhichd9F7vZpJ5j7e0gxsLO9EYYqJmOiaDhzCzejw%2F640%3Fwx_fmt%3Dpng%26tp%3Dwxpic%26wxfrom%3D5%26wx_lazy%3D1%26wx_co%3D1&type=png

那么,你期待GPT未来的表现吗?

SmartGPT目前暂无开箱可用版本,需要自行在Linux环境搭建,动手能力强的读者可根据下面的项目页面中的指示体验:

项目地址:https://github.com/Cormanz/smartgpt

 文章来源地址https://www.toymoban.com/news/detail-467126.html

到了这里,关于SmartGPT 横空出世,提升 ChatGPT 回答准确率的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 从HTTP3的横空出世,看各版本HTTP的区别与联系

    发送一次请求需要等待响应之后才能再次请求( 队头阻塞 ); 每次重复传输头信息; 支持连接的多路复用( 仅应用层 ); HAPCK算法 压缩头信息; 过程: 2.1 建立连接:通过 tcp3次握手 建立连接; TLS握手 建立安全连接 2.2 慢启动预热 2.3 传输数据: 应用层 可以发送多个协议,

    2024年02月08日
    浏览(36)
  • Midjourney V5横空出世:画出完美中国情侣 逼真得令人毛骨悚然

    雷递网 雷建平 3月20日 2023年,AI技术正在加速对人类世界的改变。 在ChatGPT的升级版GPT-4横空出世,能玩梗图还能做网页之际,Midjourney V5已正式发布,该服务可以生成逼真的图像,其质量水平被一些AI艺术爱好者称为令人毛骨悚然且“过于完美”。 Midjourney是2022年3月首次面世

    2024年02月09日
    浏览(43)
  • Fox AI横空出世,集成了GPT 3.5,GPT4.0, Midjourney等多种先进的AI模型!

    友情提示:文章虽长但句句是精华,跳着看别怪FoxGPT没帮你挣着钱!别看说的就是你。 Fox AI: https://foxgpt.club/ 在人工智能领域, Fox AI 以其独特的集合式应用模式,引领着技术的新潮流。这款由 广东松狐科技有限公司 精心打造的产品,集成了GPT 3.5,GPT4.0, Midjourney等多种先进的A

    2024年02月11日
    浏览(45)
  • midjourney ai与ChatGPT结合使用,大大提升返回结果准确率

    最近在试用midjourney ai绘图,结合ChatGPT给到更多的特征来说明 如果只是单纯的提问,可能返回杂乱的图片. 提问时要把相关特征,风格,物件都要说清楚,ai才能识别得到,放几张体验照: 生成结束后将会出现两排按钮。 U是upscale的缩写,含义为放大像素提升细节,U1, U2, U3,

    2023年04月19日
    浏览(30)
  • 浅谈AI人工智能ChatGpt提升竞彩足球分析准确率最高的分析软件

    随着科技的不断进步,人工智能正在扮演着越来越重要的角色。在体育领域,特别是足球竞猜中,AI人工智能ChatGpt正以其卓越的分析能力引起了广泛的关注。作为一款以大数据分析为基础的分析软件,AI人工智能ChatGpt不仅可以提供准确的数据预测,还能帮助用户提高竞彩足球

    2024年02月10日
    浏览(37)
  • 运用AI人工智能ChatGpt提升竞彩足球分析准确率最高的分析软件

    AI人工智能ChatGpt:提升竞彩足球分析准确率的最强大脑 传统的足球竞猜往往会受到诸多因素的影响,而AI人工智能ChatGpt则能够通过分析海量的数据,快速准确地预测比赛结果。无论是球队的实力、战术的运用还是球员的状态,ChatGpt都能够凭借其强大的计算能力,对每个因素

    2024年02月16日
    浏览(38)
  • 深度学习准确率提升之天花板分析

    OCR文字识别流水线主要分为三个模块:文字检测-字符分割-字符识别 训练完成后整个系统的准确率是72%,需要进一步提升准确率就需要单独分析每个模块的提升空间。 1)对于文件检测模块,把训练集的图像人工确保标注准确的文本位置来作为输入,系统准确率提升到89% 2)对

    2024年02月12日
    浏览(43)
  • 时效准确率提升之承运商路由网络挖掘 | 得物技术

    履约时长是电商的生命线,直接关系到用户的消费体验。新华网[5]2022年双十一的报告显示,37.4%的受访者希望次日达,29.91%希望当日达。相较于其他物品,受访者对手机、电脑、数码产品的物流时效要求更高,更希望当日或1-2天内能收到货。 得物履约场景中,主要的阶段包括

    2024年02月01日
    浏览(28)
  • 利用Adam优化算法进行语音识别任务:提升模型准确率

    作者:禅与计算机程序设计艺术 语音识别是人工智能领域中的一个重要应用,近年来随着深度学习算法的快速发展,语音识别技术也取得了长足的进步。在语音识别任务中,训练模型需要大量的数据和计算资源,而且模型的准确性也是至关重要的。因此,如何提高模型的准确

    2024年02月09日
    浏览(36)
  • 定位时长缩减90%:酷家乐如何提升系统故障根因分析准确率?

    酷家乐开发魔方语言的目的是解决其2B SaaS系统在复杂微服务架构下的故障定位难题,以提升系统稳定性并加速故障恢复。由于原监控工具操作复杂,需要人工逐项点击且依赖经验,导致处理效率低下。魔方语言通过自动化根因分析,显著提升了故障处理的覆盖率和准确率,从

    2024年03月28日
    浏览(51)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包