官方微信
登录
注册
搜索
搜索
文章
帖子
用户
免费发布信息
首页
Portal
新闻资讯
论坛
BBS
分类信息
房源中心
租房
跳蚤市场
活动
新闻
加国
大多
美国
环球
经济
时政
娱乐
地产
信息
房源
新盘
家庭旅馆
跳蚤市场
拼车
折扣
机票邮轮
生活服务
社区
城事杂谈
旅游天地
大多生活
房产楼市
北美股票
房东信息
税务理财
健康锻炼
交友征婚
法律求助
加国新闻
大多新闻
美国新闻
环球新闻
经济观察
时政频道
财经资讯
娱乐八卦
生活百态
史海钩沉
健康养生
国际体坛
城事杂谈
大多生活
旅游天地
房产聚焦
税务理财
北美股票
子女教育
房东信息
健康锻炼
移民留学
体育娱乐
婚姻生活
宠物乐园
我爱我家
流行时尚
交友征婚
法律求助
便民信息
黄页
机票邮轮
求职招聘
换汇交易
拼车中心
商家折扣
二手车
非诚勿扰
周边游
扫一扫,关注我们
我的空间
我的消息
我的收藏
我的好友
我的相册
我的道具
帐号设置
退出登录
加国新闻
大多新闻
美国新闻
环球新闻
经济观察
时政频道
财经资讯
娱乐八卦
生活百态
史海钩沉
健康养生
国际体坛
城事杂谈
大多生活
旅游天地
房产聚焦
税务理财
北美股票
子女教育
房东信息
健康锻炼
移民留学
体育娱乐
婚姻生活
宠物乐园
我爱我家
流行时尚
交友征婚
法律求助
便民信息
黄页
机票邮轮
求职招聘
换汇交易
拼车中心
商家折扣
二手车
非诚勿扰
周边游
加国同城
›
首页
›
科技
›
查看内容
法国版OpenAI杀疯了!杨立昆转发“逆天”评论(组图)
2024-4-12 20:13
|
发布者:
青青草
|
查看:
48
|
评论:0
|
来自: 智东西
摘要:
作者 | 香草编辑 | 李水青智东西4月11日报道,昨日,“欧洲版OpenAI”Mistral AI又一次悄然秀肌肉,甩出全新MoE(专家混合)大模型Mixtral 8x22B磁力链接,模型参数规模高 ...
作者 | 香草 编辑 | 李水青 智东西4月11日报道,昨日,“欧洲版OpenAI”Mistral AI又一次悄然秀肌肉,甩出全新MoE(专家混合)大模型Mixtral 8x22B磁力链接,模型参数规模高达1760亿,仅次于马斯克的Grok-1,成为市面上参数规模第二大的开源模型。
▲Mistral AI发布Mixtral 8x22B Mixtral 8x22B由8个专家模型构成,每个模型的参数规模220亿,模型文件大小约为262GB。测评成绩方面,Mixtral 8x22B在MMLU(大规模多任务语言理解)登顶开源模型榜首,Hellaswag、TruthfulQA、GSM8K等多项测评成绩超越Llama 2 70B、GPT-3.5以及Claude 3 Sonnet。 这是近日继OpenAI的视觉版GPT-4 Turbo和谷歌的Gemini 1.5 Pro全面更新后,大模型厂商们发布的第三个重要型号。此外,Meta还暗示将在下个月发布Llama 3。 一、问鼎MMLU开源榜首,3张A100显卡可跑Mixtral 8x22B包含8个专家模型,每个专家模型的参数规模从上一代的70亿飙升至220亿,序列长度为65536。 在放出磁力链接后不久,Mixtral 8x22B便上架了开源社区Hugging Face,模型文件大小约为262GB,用户可以进一步训练和部署。 性能方面,其在MMLU测评榜登顶开源模型榜首,多项测评成绩超越Llama 2 70B、GPT-3.5以及Claude 3 Sonnet。
▲Mixtral 8x22B测评成绩 虽然发布方式低调,但Mixtral 8x22B再一次引爆了开源社区。AI搜索平台Perplexity Labs和开源平台Together AI都迅速提供了该模型的支持。 AI科学家贾扬清称,通过合理的量化,Mixtral 8x22B可在4个A100/H100显卡上运行,严格来说,其实3张A100显卡就够了。
▲贾扬清称3张A100显卡可以跑Mixtral 8x22B 苹果机器学习研究员Awni Hannun称,Mixtral 8x22B模型在苹果机器学习框架MLX上使用M2 Ultra芯片运行良好,并发布了MLX社区中的4位量化模型。
▲苹果机器学习框架MLX运行Mixtral 8x22B 二、杨立昆转发,法国AI生态如此“逆天”现如今,法国巴黎的AI生态已是“Next Level”。出身巴黎的Meta首席AI科学家杨立昆转发了一篇讲述巴黎是如何成为一个主要AI中心的帖文,故事可以从10多年前说起。
▲杨立昆转发Damien Henry帖文 2013年,Xavier Niel创办了计算机培训学校Ecole 42,这所不同寻常的学校接收来自不同背景的学生,以点对点学习的方式培训编程。 2015年,杨立昆创办了FAIR Paris,也就是FacebookAI研究院。他被公认为深度学习的三大发明者之一,另外两位是加拿大人。 FAIR向法国人才发出了一个信号:他们不必离开法国就可以从事深度学习研究;也向美国其他科技巨头发出信号:在法国进行科学研究是可行的。之后在2018年,谷歌DeepMind也在巴黎开设了一家实验室。 2016年,第一届VivaTech举办,它成为欧盟首屈一指的初创企业和投资者盛会,吸引了超过2400家初创企业和超过2000名投资者。 同年,开源社区Hugging Face在法国成立。也许当时的他们不会知道,其Transformer库不久之后就会成为行业标准。 2017年,Xavier Niel成立了STATION F,这是世界上最大的创业园区。在Roxanne Varza的带领下,它成为了法国的科技中心。值得一提的是,Hugging Face是首批加入STATION F计划的创企之一,也是该计划诞生的首个独角兽。
▲STATION F创业园区 2018年,杨立昆获得图灵奖,成为AI领域最具影响力的人物之一。
▲杨立昆 在此期间,这篇帖文的作者Damien Henry在巴黎组建了Google Arts&Culture团队,专注于AI和图像。他还和其他两位联创共同创建了AI视觉生成工具Clipdrop,后被Stability AI收购。 2019年,巴黎已经在世界AI地图上占据一席之地,但并不像如今一样成为主流。 但在2020年,疫情席卷了全球,远程办公成为常态。这让科技界开始转移阵地:世界上有这么多地方可供选择,我为什么非要在硅谷租房?此外,美国人开始逐渐把科技发展视为一种威胁,而大多数科技没那么发达的国家则恰恰相反。 2021年,Hugging Face迅速增长,成为如今我们熟知的最强开源AI平台。深度科技在全球范围内加速发展,而在巴黎尤为迅速。 2023年Mistral AI成立,并在几个月内就飞速成长为OpenAI的最大劲敌之一。他们发布模型的方式低调又“激进”,仅凭一条没有任何背景信息磁力链接就获得超400万次浏览量,让昂贵的发布视频变得过时。 同年,欧洲首个独立AI研究实验室kyutai成立,Scaleway、Rodolphe Saade等宣布进入计算领域,要为欧洲带来更多GPU。计算机视觉国际顶级会议ICCV也选择在巴黎举办,红衫资本等顶级投资机构也越来越多地将目光放到法国AI创企。 结语:开源社区再添一员巨匠随着Mixtral 8x22B模型在开源社区中引起轰动,我们见证了开源大模型的迅猛发展和欧洲AI生态的崛起。这一成就不仅展示了Mistral AI在大模型领域的强大实力,也反映了法国乃至整个欧洲在AI研究和创新方面的深厚潜力。 从Ecole 42、FAIR Paris的成立,再到Hugging Face、STATION F的兴起,巴黎已经成为全球AI创新的重要中心。未来,我们期待看到更多硅谷之外的城市在全球AI舞台上扮演重要角色,推动科技前沿创新。
路过
雷人
握手
鲜花
鸡蛋
分享
邀请
上一篇:
研究表明:一杯茶可杀死口中99.9%的新冠病毒(图)
下一篇:
今年唯一一次日全食上演,“追日”飞机高空收集数据(图)
最新评论
评论
相关分类
新闻资讯
分类信息
地产
健康
活动
移民
历史
军事
生活
科技
就业
旅游
文化
测试
图文热点
St. Catharines 圣凯瑟琳Pen附近House地下
Magecan 专业网站设计开发 | 支持 Shopify
热门推荐
St. Catharines 圣凯瑟琳Pen附近House地下
St. Catharines 圣凯瑟琳Pen附近House地下
旺市华人家庭急缺一位会做中餐的阿姨
化妆品包装
招募家庭厨师
社区活动中心
联系客服
关注微信
返回顶部
点击联系客服
在线时间:8:30-17:00
电子邮件
[email protected]
扫一扫,关注我们
下载APP客户端