Grok开源来看看怎么用吧

这篇具有很好参考价值的文章主要介绍了Grok开源来看看怎么用吧。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

 文章来源地址https://www.toymoban.com/news/detail-845450.html

马斯克grok开源如何使用,开源,人工智能

人不走空

 

                                                                      

      🌈个人主页:人不走空      

💖系列专栏:算法专题

⏰诗词歌赋:斯是陋室,惟吾德馨

 

马斯克grok开源如何使用,开源,人工智能

目录

      🌈个人主页:人不走空      

💖系列专栏:算法专题

⏰诗词歌赋:斯是陋室,惟吾德馨

什么是 Grok?

Grok-1 发布摘要

如何安装 Grok

如何尝试 Grok

Grok-1 开源许可

作者其他作品:


 

 

3月11日,埃隆·马斯克承诺,他的公司 xAI 会把 AI 聊天机器人 Grok 开源给大家,现在,这承诺已经兑现了。

今天凌晨,马斯克的 xAI 宣布,他们的巨型模型 Grok-1 ——一个拥有 3140 亿参数量的混合专家(MoE)模型,连同模型的权重和网络架构,现已全面开源。

这一动作,也让 Grok-1 成为了目前世界上参数量最大的开源大语言模型。

 

 

马斯克grok开源如何使用,开源,人工智能

 

什么是 Grok?

Grok 是一个庞大的语言模型,拥有 3140 亿个参数,使其成为目前可用的最大的开源模型。作为对比,这是 OpenAI 2020年发布的被视为突破的 GPT-3 大小的两倍多。

 

 

马斯克grok开源如何使用,开源,人工智能

 

Langchain 的 @Andrew Kean Gao 分享的图表中,你可以看到 Grok 的大小与其竞争对手相比有多么庞大。

 

 

马斯克grok开源如何使用,开源,人工智能

 

但 Grok 不仅仅体量巨大,它还采用了专家混合 (MoE) 架构,允许它为不同任务策略性地激活其参数的子集。这理论上使它比传统的密集模型更高效和适应性强。

 

Grok-1 发布摘要

 

 

马斯克grok开源如何使用,开源,人工智能

 

  • 3140亿参数的专家混合模型,给定 Token 时有25%的权重处于激活状态

  • 基础模型训练了大量文本数据,未针对任何特定任务进行微调

  • 8个专家(2个激活)

  • 860亿参数

  • Apache 2.0 许可证

  • 博客:https://x.ai/blog/grok-os

  • 代码:https://github.com/xai-org/grok-1

 

虽然有很多细节值得探讨,但首先记住这 5 个要点:

  1. Grok是到目前为止最大的开源大语言模型(LLM),使用了接近3140亿的参数量,这在所谓的“开源”模型中是前所未有的(可能也是最大的)。它很可能采用了与GPT-4相似的专家混合(MoE)结构。

  1. 但请注意,这只是一个基础模型。也就是说,按照目前发布的状态,它还不能直接应用于特定的任务或对话场景。没有进一步的调整,它还不能发挥作用。因此,要想将其用作类似ChatGPT的工具,还需要进行一定的“调整”和“微调”。

  1. 模型的检查点定在2023年10月,它没有针对任何特定应用(比如对话)进行优化。其发布遵循Apache 2.0许可,这意味着其他公司也可以在Grok-1的基础上发布改进版或衍生产品…… 这真是令人兴奋!

  1. 同时,虽然人们对此感到兴奋,但我们也必须警惕潜在的隐患。

    随着这种新AI的问世,安全威胁无疑会增加。例如:

      • 存在通过查询如何制造网络武器、炸弹或其他危害性物品的未授权使用风险 => 受控AI如何应对?

      • 多个开发者将发布他们版本的LLM => 标准化API缺失和使用复杂度上升的问题如何解决?

      • 出现多种版本,可能会偏离原始目标 => 这种“飞速进步”会导致许多现有服务突然变得过时吗?

  2. 架构的细节虽然引人入胜,但过于技术化了……在此我不展开(如果你感兴趣,我们可以另行讨论)。但要知道,如果你没有高端的设备(比赛级电脑或高性能服务器),你将无法运行Grok! 

 

如何安装 Grok

在这个 GitHub 仓库中解释了如何加载和运行 Grok-1 的指南。

克隆仓库到你的本地,开玩吧。

 

 

马斯克grok开源如何使用,开源,人工智能

 

 

马斯克grok开源如何使用,开源,人工智能

 

可以使用 torrent 客户端和此磁力链接下载权重:

  •  
magnet:?xt=urn:btih:5f96d43576e3d386c9ba65b883210a393b68210e&tr=https%3A%2F%2Facademictorrents.com%2Fannounce.php&tr=udp%3A%2F%2Ftracker.coppersurfer.tk%3A6969&tr=udp%3A%2F%2Ftracker.opentrackr.org%3A1337%2Fannounce

 

顺便说一句,有些人质疑为什么权重是通过 Bittorrent 磁力链接发布的。随着模型越来越大,这可能成为未来的常态。此外,通过 torrent 分发300 GB 数据比直接传输更便宜。

 

或从 HuggingFace 下载权重,并将其放置在“checkpoints”目录内。

 

 

马斯克grok开源如何使用,开源,人工智能

 

打开命令行界面并运行以下命令来测试代码:

 

  •  
  •  
pip install -r requirements.txtpython run.py

 

需要注意的是,由于 Grok-1 模型的庞大体量——包含 3140 亿个参数,测试模型所使用的示例代码需要一台具有足够  GPU  内存的机器。

xAI 仓库中专家混合 (MoE) 层的当前实现未针对效率进行优化。这种实现是故意选择的,优先考虑模型正确性验证,避免开发自定义内核的需要。

 

 

马斯克grok开源如何使用,开源,人工智能

 

如何尝试 Grok

如果你只是好奇 Grok 能做什么,它目前在 X 上可用,但仅对 Premium+ 用户开放,价格为每月16美元。

 

 

马斯克grok开源如何使用,开源,人工智能

 

Grok-1 开源许可

本次发布的代码和相关 Grok-1 权重根据 Apache 2.0 许可证授权。

Apache 2.0 许可证是一种宽松的免费软件许可证。该许可证允许对软件进行任何目的的使用,用户能够分发它、修改它,并分发软件的修改版本。

该许可证仅适用于此仓库中的源文件和 Grok-1 的模型权重。

 

就在之前,马斯克起诉  OpenAI 及其联合创始人 Sam Altman 和 Greg Brockman,指控他们背离了最初成立为非营利组织的使命,转而追求利润。

也有网友调侃,OpenAI 一点都不 Open。

 

 

Grok = OpenSource

OpenAI = Closed Source

 

 

马斯克grok开源如何使用,开源,人工智能

 

参考链接:

https://x.com/_SaxX_/status/1769593547349467288?s=20

https://x.com/itsandrewgao/status/1769454405852807432?s=20

 


作者其他作品:

【Java】Spring循环依赖:原因与解决方法

OpenAI Sora来了,视频生成领域的GPT-4时代来了

[Java·算法·简单] LeetCode 14. 最长公共前缀 详细解读

【Java】深入理解Java中的static关键字

[Java·算法·简单] LeetCode 28. 找出字a符串中第一个匹配项的下标 详细解读

了解 Java 中的 AtomicInteger 类

算法题 — 整数转二进制,查找其中1的数量

深入理解MySQL事务特性:保证数据完整性与一致性

Java企业应用软件系统架构演变史

 

 

 

 

 

 

 

到了这里,关于Grok开源来看看怎么用吧的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 如何用AI技术实现和马斯克实时视频聊天

    前言 在直播盛行、短视频横飞、主播满地的今天,个人上传自己的生活视频来记录日常已经屡见不鲜了。拿起手机拍个视频,并且在上传前顺便美颜一下,乐此不疲。 但是最近看到的一些 AI 诈骗新闻却不得不令人担忧,网上你以为的帅哥美女、老弱病残真的是真实的吗?在

    2024年02月10日
    浏览(45)
  • 提升工作效率与质量——马斯克的五步工作法

    图片来源网络 埃隆·马斯克(Elon Musk)是一位备受赞誉的 创业家和工程师 ,他的成功并非偶然, 而是源于他对问题的深刻理解以及不断追求最佳解决方案的决心。 为了实现这一目标,他制定了一套包含五个步骤的工作方法, 这套方法不仅指引他和他的团队在众多项目中开

    2024年02月06日
    浏览(54)
  • 狂买GPU、四处挖人,马斯克:我要做理解宇宙的TruthGPT

    来源: 爱范儿  微信号:ifanr 整理 | 凌敏、核子可乐 上个月,马斯克还积极呼吁叫停超强 AI 研发 6 个月,现在就坐不住了? 马斯克声称正在研究 TruthGPT 近日,马斯克在接受福克斯新闻频道的塔克卡尔森采访时宣布,他将推出一个名为“TruthGPT”的 AI 平台。马斯克还呼吁对人

    2023年04月22日
    浏览(44)
  • X(推特)推出招聘平台,马斯克进军招聘领域,欲对标 LinkedIn

    8 月 26 日,埃隆・马斯克接手 X(推特)后,开启了一系列备受争议的变革,并多次在公开场合表示希望将 X 打造成为超级应用,受人瞩目。除了私信中推出了视频聊天和语音聊天功能之外,X 在今天宣布上线了 Beta 版 X Hiring 平台,旨在建立一个比肩 LinkedIn 的招聘平台。 这个

    2024年02月11日
    浏览(46)
  • 马斯克在中国的44小时!行程、会面与表态,释放出什么信号?

       时隔3年,“自带流量”的美国特斯拉首席执行官马斯克再次到访中国,从公布的信息来看,可谓是行程满满。在中美关系似乎春寒料峭之际,马斯克的来华及表态极具象征意义。 马斯克:反对“脱钩断链”      5月30日下午15时30分左右,“马斯克私人飞机(注册号:

    2024年02月07日
    浏览(50)
  • 推特色情机器人账号泛滥,马斯克的“治推谋略”何在?

    据BleepingComputer消息,推特虚假机器人账户泛滥的问题不仅还未得到解决,其中传播色情信息的机器人账户近期反而严重泛滥。 在安全研究小组MalwareHunterTeam最近的一项调查研究中曝光了多个传播虚假消息的机器人账户,它们为真实用户发出的帖子进行大量点赞,其目的是吸引

    2024年02月11日
    浏览(39)
  • x.ai还是OpenAI?埃隆·马斯克的AI帝国【2】

    上期内容咱们提到了埃隆马斯克的特斯拉是自动驾驶领域的领导者,大家可能近些年也都有从各类渠道听到过Tesla自动驾驶有关的新闻。不同于像包括Google子公司Waymo在内的大多数使用激光雷达来实现自动驾驶的公司,特斯拉采用的是只需要视频输入就能理解汽车周围环境,并

    2024年02月08日
    浏览(50)
  • 联合国逼捐马斯克成功,但60亿不知捐给了谁

    西雅图IT圈:seattleit 【今日作者】 Powerball选号机 身体和灵魂总有一个要 走在买PowerBall的路上 PART 0 1 . 2021年年底,特斯拉CEO马斯克捐赠了500万股特斯拉股票,以当时股价计算价值近60亿美金,这笔捐款显示在本周向美国证券交易委员会(SEC)递交的F5报告中。 PART 0 2 . 报告中

    2024年02月02日
    浏览(53)
  • 马斯克宣布成立xAI——引领开放人工智能时代的新纪元

    【💣 话题引入:挑战Open AI!马斯克宣布成立xAI,你怎么看?】 📢 北京时间7月13日凌晨,亿万富翁企业家、特斯拉和SpaceX的首席执行官埃隆·马斯克(Musk)再次震惊科技界,宣布成立xAI(eXtended Artificial Intelligence)公司。马斯克表示,推出xAI的原因是想要“了解宇宙的真实本质

    2024年02月16日
    浏览(67)
  • 马斯克:未来会涌现大量机器人,与人类比例有望超过1比1

    在世界人工智能大会上,特斯拉的马斯克通过网络发表了视频演讲,涵盖了特斯拉人形机器人Optimus、自动驾驶和人工智能等话题。他赞扬了中国的AI产业,并表示中国在决心和实施方面非常出色,包括AI产业发展在内。 特斯拉的人型机器人目前仍处于早期开发阶段,但马斯克

    2024年02月15日
    浏览(65)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包