微软工程师带你解密大模型 ChatGPT

这篇具有很好参考价值的文章主要介绍了微软工程师带你解密大模型 ChatGPT。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

微软工程师带你解密大模型 ChatGPT

ChatGPT 是如何做到打破聊天机器人“人工智障”的刻板印象?在众多实测体验中,它已具备轻松通过图灵测试的能力(即让人误以为是与真人对话),且其回答的详实程度、说服力与连续逻辑推理能力远超当前主流会话机器人。

传统认知里,我们觉得难以被替代的创意、研究、代码类工作,都有可能受到这位背靠海量高质量参数的AI新贵的挑战。

ChatGPT 如何为过亿用户创造 Wow moment 的?其背后 OpenAI 这家公司又是何方来历,为何可以一骑绝尘,独领风骚?

微软工程师带你解密大模型 ChatGPT

▍OpenAI 与微软

2015 年 12 ⽉

Elon Musk  和  Greg Brockman(前 Stripe CTO,现董事长&总裁)、Sam Altman(前 YC 总裁,现 CEO) 以及  Ilya Sutskever (师从神经网络之父  Geoffery Hinton,现首席科学家)等人在旧金山创立  OpenAI。

2018 年

OpenAI 与 Microsoft  合作,推出了 Azure AI Platform,这是⼀个新的项⽬,旨在让开发⼈员更容易构建和部署 AI 应⽤程序。

2019 年 7 月

微软向 OpenAI 注资10亿美元。这笔战略投资使微软 Azure 成为 OpenAI 的“独家”云计算服务提供商。

2022 年 11 月 30 日

OpenAI 发布 ChatGPT,一周时间内吸引过百万用户,可回答知识性与开放性问题,也可根据上下文持续互动,可创作流畅的诗歌、小说,乃至代码内容。

2023 年 1 月

微软宣布以 290 亿美元估值加注投资 OpenAI 100 亿美元,其旗下所有产品将全线整合 ChatGPT,除此前宣布的搜索引擎 Bing、Office 外,微软还将在云计算平台 Azure 中整合 ChatGPT,Azure 的 OpenAI 服务将允许开发者访问 AI 模型。微软 CEO 纳德拉表示,微软的的每个产品都将具备相同的 AI 能力,彻底改头换面。

微软工程师带你解密大模型 ChatGPT

OpenAI 商业模式| 图源:FourWeekMBA Blog

▍ChatGPT 能做什么

ChatGPT 能结合不同的场景做不同的事,拯救了万千网友,让我们来看看它给出的10个回答吧!

微软工程师带你解密大模型 ChatGPT
  • 按照人提出的问题或者指令给予回复的能力

 ChatGPT 除了可以用狭义的基于「问答」形式交互以外,还能够按照输入的要求进行回复。

例如,在应对「文本生成」这类指令式的要求时,它同样也展现出了优秀的能力。这种能力让它不仅是一个提供答案的「高级搜索引擎」,更是一种可以用自然语言来交互的文字处理工具。

微软工程师带你解密大模型 ChatGPT

  • 文字创作职业的效率倍增

ChatGPT 的核心能力在于文本输出,包含优质的逻辑,举例与论述,这对于所有需要文本输出的办公室白领职业都有所影响,可以预见的是,未来能灵活运用的 AIGC 的创作者将具备更强的生产力与职场竞争力。

微软工程师带你解密大模型 ChatGPT

  • 强大的编程能力

目前 ChatGPT 已显示出强大的编程能力,甚至可以输出完整的 APP 编程,且在 debug 上也有所建树,程序员完全可以利用 ChatGPT 来搭建基础架构,并在其基础上通过不断提示新的需求来让 ChatGPT 优化代码或者人工优化代码。

微软工程师带你解密大模型 ChatGPT

▍ChatGPT 背后的大模型

微软工程师带你解密大模型 ChatGPT

  • “模型”是什么?“大”在哪里?

2018年,OpenAI  出品了一个初代  GPT( Generative Pre-Training) 模型。

GPT 主要出论文《Improving Language Understanding by Generative Pre-Training》,GPT  是"Generative Pre-Training"的简称,从名字看其含义是指的生成式的预训练。

微软工程师带你解密大模型 ChatGPT

简单地说,语言模型就是用来计算一个句子的概率的模型,也就是判断一句话是否是“人话”的概率?就像下图的“提示语”为古诗“床前明月”,输入模型,根据概率判断输出“光”或者“亮”等其他字。由于现实生活中,“光”字出现的概率最大,所以模型会输出“光”字。

微软工程师带你解密大模型 ChatGPT

从 2001 年,首次使用神经网络对自然语言进行建模,根据前 N 个词对第 N+1 个词进行预测;2013 年出现了一种新的训练方法,使用自然标签,不需要数据标注,提升了词嵌入的效果,在各种任务中使用通用知识成为主流。随后慢慢发展出了基于 Transformer 的大规模语言模型 GPT ……

ChatGPT 所拥有的丰富知识储备,来自于它的训练数据,以及它足够大的体量,得益于互联网的普及,它可以轻松地获得海量的由真人写出的文本内容,以便在训练中学会这些内容。

微软工程师带你解密大模型 ChatGPT

可想而知,ChatGPT 的出现大大降低了 NLP 技术的应用门槛。但它目前还不是全能的。最重要的一点在于它缺乏准确可靠的垂直领域知识,为了让它的回答更可靠,最直接的方式是为它提供外部的知识来源,比如微软将 Bing 的搜索结果作为它回答的信息来源等。

更多 AI 课程欢迎关注我们,带你学习更多 AI 前沿知识!

欢迎关注微软ATP官方账号

微软ATP一手资讯抢先了解

微软工程师带你解密大模型 ChatGPT

点击“阅读原文” | 更多AI赋能案例文章来源地址https://www.toymoban.com/news/detail-466683.html

到了这里,关于微软工程师带你解密大模型 ChatGPT的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 华为资深工程师带你了解华为七大根技术

    看得见的是产品,看不见的是背后的基础研究和技术创新。 根技术是技术树之根,持续为技术树提供滋养,决定企业的荣枯。 华为技术有限公司在全球有超80+基础技术实验室,170+联合实验室、创新实验室;研发人员11.4万名,占比55.4%,每年研发投入占销售收入10% ,全球持有

    2024年02月07日
    浏览(39)
  • 一篇文章带你走进测试工程师的世界

    1、 国内定位和发展前景: 测试工程师,软件质量的把关者,工作起点高,发展空间大。我国的软件测试职业还处于一个发展的阶段,所以测试工程师具有较大发展前景。 目前传统的软件行业还是以软件测试工程师为主,但是在新兴的互联网行业大多还是以QA来命名这个职位

    2024年02月04日
    浏览(40)
  • 《算法工程师带你去》读书笔记 什么是稀疏向量(向量的稀疏表示)

    对数据进行预处理时,一般需要对类别型特征进行编码: 序号编码 独热编码 二进制编码 其中独热编码用的是最多的。但是当类别数十分巨大时,独热编码是一个非常稀疏的向量,只有一个值不为0,其他值均为0。可以使用向量的稀疏表示来大大的 节省空间 ,并且目前大多

    2024年02月03日
    浏览(27)
  • 设计高端大气上档次的时尚品?!微软工程师借助AIGC成功圆梦!

               (本文阅读时间:5 分钟)        在这个创意横飞、想象力爆棚的时代中,有很多美丽且吸引人的东西围绕在我们身边。然而,遗憾的是,被誉为 “攻城狮” 的我,内心里虽然非常喜欢且欣赏这些夺目的作品,但却因为缺乏美术基础而没有办法亲自创作。现在

    2024年02月12日
    浏览(35)
  • 加入云原生实战营(星球),带你进阶 Go + 云原生高级开发工程师

    过去 1 年,趁着闲暇时间,我创建了一个 Go + 云原生技术学习社群,旨在帮助你快速进阶为 Go + 云原生高级开发工程师,提高你的职场竞争力、扩展职业宽度,最终谋得一份好差事(进入大厂、升职加薪)。 本篇文章,我来详细介绍下云原生实战营知识星球,让你对本知识星

    2024年04月08日
    浏览(58)
  • 浅谈ChatGPT取代前端开发工程师

    1.ChatGPT 是什么? ChatGPT 是一种基于深度学习的自然语言处理技术,它可以生成高质量的自然语言文本。该技术是由 OpenAI 团队 开发,旨在使计算机能够像人类一样理解和产生自然语言。ChatGPT 使用了深度神经网络和自然语言处理技术,通 过对大量语言数据的学习和建模,实现

    2023年04月08日
    浏览(24)
  • 芯片工程师的ChatGPT初体验(上)

    2022年11月30日一定是一个载入人类AI发展史的一天,这一天第一个版本的Chat GPT(全称:Chat Generative Pre-trained Transforme)发布了。毫不夸张地说,chatGPT的发布和用户体验,将整个AI话题推上了一个前作未有的高度(包括最早的深蓝,AlphaGo,Boston Dynamics 等产品)。这是利用大语言

    2024年02月03日
    浏览(22)
  • Devin内测注册全攻略:一文带你快速体验最新AI软件工程师技术 ️

    博主猫头虎的技术世界 🌟 欢迎来到猫头虎的博客 — 探索技术的无限可能! 专栏链接 : 🔗 精选专栏 : 《面试题大全》 — 面试准备的宝典! 《IDEA开发秘籍》 — 提升你的IDEA技能! 《100天精通鸿蒙》 — 从Web/安卓到鸿蒙大师! 《100天精通Golang(基础入门篇)》 — 踏入

    2024年03月16日
    浏览(54)
  • 吴恩达|chatgpt 提示词工程师学习笔记。

    目录 一、提示指南 写提示词的2大原则: 模型的限制 二、迭代 三、总结 四、推断 五、转换 六、扩展 七、对话机器人 吴恩达和openai团队共同开发了一款免费的课程,课程是教大家如何更有效地使用prompt来调用chatgpt,整个课程时长1个半小时,也提供了对应的环境和代码,大

    2024年02月08日
    浏览(40)
  • ChatGPT给测试工程师带来的机会和威胁

    ChatGPT(全名:Chat Generative Pre-trained Transformer),美国OpenAI [1]  研发的聊天机器人程序 [12]  ,于2022年11月30日发布 [2-3]  。ChatGPT是人工智能技术驱动的自然语言处理工具,它能够通过理解和学习人类的语言来进行对话,还能根据聊天的上下文进行互动,真正像人类一样来聊天

    2023年04月23日
    浏览(23)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包