1. 创业头条
  2. 前沿领域
  3. AI智能
  4. 正文

世界上最大的AI大模型:马斯克的Grok-1正式开源

 2024-03-20 16:53  来源:A5专栏  我来投稿 撤稿纠错

  域名预订/竞价,好“米”不错过

关注卢松松,会经常给你分享一些我的经验和观点。

马斯克是真男人啊,不仅SpaceX发射基地可以随意参观、连设计图纸都公开了。SpaceX刚刚发射完没几天,连他的AI大模型Grok-1也正式开源了。

Grok-1是当前世界上参数最大的、开源大语言模型。296GB的大小,3140亿参数,远超OpenAI GPT-3.5的1750亿。基础模型基于大量文本数据进行训练,没有针对任何具体任务进行微调;3140亿参数的MoE模型,在给定token上的激活权重为25%;2023年10月,xAI使用JAX库和Rust语言组成的自定义训练堆栈从头开始训练。

开源就是开放源代码,说白了就是开放专利,公开技术!但需要有足够的GPU才能运行。可能需要一台拥有628GB GPU内存的机器。英伟达Tesla A100 80G(原版PCIE)京东售价16万,平民玩家根本玩不起,仅8块GPU就接近百万。其他硬件配置就更不用说了。

前几年马斯克公布了特斯拉的多项专利,中国的新能源汽车如雨后春笋迅猛发展。这次会有什么会爆炸式发展呢?

预计全球Ai企业将迎来快速发展,马斯克开源Grok—1,将会同时造福中国Ai企业,助力中国Ai技术发展!

马斯克之前说过:科技创新才是推动人类进步的关键,而专利保护只会阻碍这个进程。他希望通过公开这些专利设计,鼓励更多人加入科技创新行列,共同推动人类社会进步。

卢松松是一位自媒体人、短视频博主。也是创业者必看的账号,关注草根创业圈、科技互联网、自媒体和短视频行业。感谢您的关注!

申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!

相关文章

  • 阿里云支撑!云计算首次超越卫星成为奥运转播主要方式

    北京时间7月27日凌晨,巴黎奥运会即将开幕。今年,云上转播将正式超越卫星转播,成为奥运赛事走向全球数十亿观众的主要转播方式。巴黎奥运会预计11000小时的赛事直播画面,将通过阿里云向全球分发。这将是1964年奥运会开始卫星电视转播以来,又一次重大技术进步。据介绍,OBSLiveCloud将成为202

  • 国际奥委会主席巴赫:阿里AI技术将巴黎奥运转播带到新高度

    7月26日,巴黎奥运会开幕在即,国际奥委会主席巴赫在国际转播中心举行的活动中表示,2024巴黎奥运会展现了奥运转播的未来,广泛应用的阿里AI技术正在将巴黎奥运转播带到新的高度。(国际奥委会主席巴赫)在巴黎奥运会上,云计算将替代卫星成为奥运赛事直播的主要方式。超过三分之二奥运直播信号将通过阿里云支撑的

    标签:
    ai技术
    阿里云
  • 中国AI公司可以不走寻常路

    大模型落地呼声越来越大,但是以什么方式落地依然有争议。国内如此,国外亦然。不同的思想对应着不同的方法论。一部分AI企业忙着更新通用大模型打榜,做一些视频生成工具之类的热门产物,巨头多数属于此类。另一部分则在专注行业大模型或是平台,例如国外的Glean和国内的第四范式,后者最近还发布了AI数字人视频合

    标签:
    ai智能
  • 人手一个的AI是如何诞生的

    2023年是AI大语言模型爆发的一年,以OpenAI推出的GPT大模型为起始,整个行业开始从“推理式AI”向“生成式AI”迈进。据MarketDataForecast预测,全球AI市场规模将从2023年的1502亿美元增长到2030年的13452亿美元,年复合增长率高达36.8%。在此背景下,国内如

  • 百川智能,摘下“大模型皇冠上的明珠”?

    随着AI产业化和产业AI化成为业界共识,大模型的“新赛季”来了。2024年是国产大模型全面商业化的元年,各地人工智能产业发展的政策密集出台。同时,在2024世界人工智能大会(WAIC2024)上,各大AI厂商纷纷表示要让大模型落地应用场景。不过,对于大模型商业化的路线,科技巨头和大模型初创公司之间存

    标签:
    大模型
  • 最后一公里不解决,大模型开闭源都一文不值

    对所有大模型而言,其真正考验如同科大讯飞创始人刘庆峰所说,在最后一公里的应用和商业化落地上。作者|Cindy编辑|杨铭恐怕谁也不会想到,百模大战进入商业化下半场,围绕大模型大规模、旷日持久的战争,竟是开源和闭源路线的交锋。最近,在2024世界人工智能大会(WAIC)上,刘庆峰、李彦宏、王坚、朱啸虎、

    标签:
    大模型

编辑推荐