Meta强势发布开源大模型Llama 3.1 英伟达也来助攻
创始人
2024-07-24 14:06:05
0

《科创板日报》7月24日讯(记者 张洋洋)扎克伯格将大模型开源进行到底。

今天凌晨,Meta正式发布新一代开源大模型Llama 3.1系列,其中包含8B、70B 和405B三个版本,最大上下文提升到了128k。

Meta创始人扎克伯格同时在官网发文为自家模型强力代言。他称,当今大多数领先的科技公司和科学研究都是建立在开源软件之上,开源是AI前进的方向,Meta正朝着成为开源AI行业标准的目标迈进。

需要强调的是,在科技界,关于开源和闭源的争端由来已久。批评者认为开源掩盖了技术原创性缺失,只是对开源模型简单调整,而非实质创新。百度创始人李彦宏甚至表示开源大模型在学术研究、教学领域等特定场景下有存在的价值,但并不适用于大多数应用场景。支持者则认为,基于成熟开源架构进行定制化改进是技术发展的常态,它能推动技术的快速创新和进步。

在大模型领域,开源和闭源大模型优劣比较也时有发生。到目前为止,开源模型在功能和性能方面大多落后于封闭式模型。但随着Llama 3.1的发布,大模型开源和闭源或将迎来新一轮激斗。

根据Meta提供的基准测试数据,Llama 3.1有4050亿参数,是近年来规模最大的大语言模型之一。该模型基于15万亿个Tokens、超1.6万个H100 GPU上进行训练,这也是Meta有史以‮第来‬一个以这‮规种‬模进‮训行‬练的Llama模型。Meta称,在常识、可操纵性、数学、工具使用和多语言翻译等先进功能方面,Llama 3.1足以对标GPT-4o和Claude3.5Sonnet等顶级闭源大模型。

Llama 3.1现已于Meta官网和Hugging Face开放下载。最新数据显示,所有Llama版本的总下载量已超过3亿次。

就在当天同一时间,英伟达也推出组合训练服务,为Llama 3.1强势助攻。

《科创板日报》记者从英伟达方面了解到,英伟达正式推出全新的NVIDIA AI Foundry 服务和NVIDIA NIM™推理微服务。NVIDIA AI Foundry 是由 NVIDIA DGX™ Cloud AI平台驱动,该平台由NVIDIA与公有云共同设计,可为企业提供大量的算力资源。

NVIDIA AI Foundry 、NVIDIA NIM™配套Llama 3.1系列开源模型一起使用,企业可以为其特定领域的行业用例创建自定义“超级模型”。企业还可以使用自有数据以及由Llama 3.1 405B和NVIDIA Nemotron™ Reward模型生成的合成数据,来训练这些超级模型。

英伟达创始人兼首席执行官黄仁勋则表示,Meta 的 Llama 3.1开源模型标志着全球企业采用生成式AI的关键时刻已经到来。Llama 3.1 将掀起各个企业与行业创建先进生成式AI应用的浪潮。NVIDIA AI Foundry已经在整个过程中集成了Llama 3.1,并能够帮助企业构建和部署自定义Llama超级模型。

(科创板日报记者 张洋洋)

相关内容

热门资讯

原创 制... 近期,日本制造业接连被推上舆论的风口浪尖。先是北陆电力在提交核电站安全审查资料时被曝问题频出——16...
加码光模块、PCB产业,一周大... 据证券时报·数据宝统计,本周(6月15日至18日),A股市场共计67股主力资金净流入额均超过5亿元。...
长江有色:18日铅价小跌 节前... 来源:市场资讯 长江有色金属网 今日沪期铅走势:今日沪期铅小跌,沪铅主力合约2607开盘报16505...
案例多的小红书推广服务哪里有? 在当今数字化营销的时代,小红书推广服务已成为众多企业提升品牌知名度和产品销量的重要手段。然而,面对市...
左旋多巴冲击实验效果不好,还能... 各位帕金森患者朋友以及家属们,大家好,我是神经外科医生刘亚丽。在咱们医院做脑起搏器DBS手术术前评估...
布米普特拉北京投资基金管理有限... 美国FERC日前一致通过一项指令,要求美国六大区域电网运营商为数据中心等大型用电户建立快速接入输电系...
大疆与影石,到底为啥打这么狠? 中新网北京6月20日电(记者 王昊)同在深圳西边,大疆和影石的总部大楼直线距离大概只有10公里。近期...
城口名表抵押在区域融资中的应用... 在城口地区,受到金融网点分布密度和传统信贷审批周期的限制,当地居民与小微商户在面对短期资金周转需求时...
坪山仲夏夜|乐队驻唱、港风大排... 深圳新闻网2026年6月19日讯(记者 邱嘉熙 曹园芳)近日,位于坪山区马峦街道坪环工业城的悦Par...
原创 郭... 最近,向太在直播中分享了一段颇具生活气息的家庭趣事,一下子把网友的注意力拉进了她的豪门日常。她坦言,...
京东618消费观察:广东购买力... 2026年京东618即将收官,广东稳坐全国购买力头把交椅。从省内分布来看,深圳市蝉联购买力最强城市,...
疯了心了!C罗粉丝冲击已离世若... 北京时间6月20日,C罗球迷(或伪装球迷)冲击葡萄牙队友及家属社媒的故事还没有结束,并且迎来了最新篇...
原创 贝... 先说一个反常的细节。 法新社记者把一个尖锐的问题抛给了中国外交部发言人郭嘉昆:如果美国把对华关税加到...
关于面条的消费提示 我国民间一直有“冬至饺子夏至面”的说法。夏至前刚收获当年新麦,夏至吃面条有尝新的意思。为了帮助消费者...
原创 S... 美银策略团队援引全球资金流向监测机构 EPFR 最新周度数据发布市场报告,截至 6 月 17 日当周...
贵阳有闲置黄金要处理 金银回收... 随着黄金投资和消费的普及,不少居民手中都有闲置、老旧或者破损的黄金制品,想要变现时往往会担忧遇到不规...
马斯克拿下7800亿天价薪酬 财联社 根据美国证券交易委员会(SEC)的一份新文件,马斯克已行使了其2018年特斯拉CEO薪酬方案...
原创 央... 一场针对美元体系底层架构的突破,正在拉开序幕。 2026年端午假期前夕,央行行长潘功胜在陆家嘴金融论...
“客户越来越挑剔了!”上海高端... “豪宅客户越来越挑剔了,各个维度都不能有短板。”“3000万元以上产品相对流速会慢一点,近期基本保持...
端午将至,为健康开一个好“端” 大众卫生报记者王璐 通讯员王佳怡 杨正强 葛文翠 端午假期将至,粽叶飘香、阖家团聚。然而,美食当前、...