亚马逊祭出地表最强全家桶,多模态Nova却败给Claude 3.5!
编者按:本文来自微信公众号 新智元(ID:AI_era),编辑:编辑部 HYZhj,创业邦经授权转载。
亚马逊推出了号称最强大的多模态模型Nova系列。
在多项基准测试中,最强的Nova Pro成功超越了GPT-4o,仅次于Gemini 1.5 Pro、Claude 3.5 Sonnet。
相较之下,Nova Lite和Nova Micro,就要比同级竞品差上不少了。
简单的提示「dolly forward」,Amazon Nova Reel就能将单个图像输入转换为简短视频
创造力爆棚,视频理解惊艳
Amazon Nova的创意生成模型,直接让卖家和广告商的广告创意提升到全新的水平。
平均来看,使用这些工具的品牌广告宣传的产品数量直接增加了五倍,每个宣传产品使用的图片数量增加了一倍,这样就把预算省到了更需要的地方。
比如下面这个Amazon Nova Reel为某个虚构的意面品牌制作的广告,简直太惊艳了。
在一座「意大利面城」中,建筑由高耸的意大利肉卷面条管雕刻而成,街区点缀着意大利香料景观,街道两旁摆满了美味的马里纳拉酱、螺丝粉面条和嫩肉丸
Amazon Nova Pro的视频理解能力也是一绝。
研究者要求模型观看一场足球比赛的无声视频片段,然后把比赛内容描述一遍。
结果,模型一口气准确说出了赛制、球服、球员行动描述以及比赛如何达到高潮的详细信息!
视频描绘了一场在绿地上正在进行的足球比赛。两队的球员,一队身穿黄色队服,另一队身穿白色队服,正在比赛。黄队四分卫将球传给接球手,接球手接住球并开始向前跑动。白队的防守队员追赶他,试图阻止他。这场比赛的高潮是一次铲球,将接球手放倒在场上
多模态实现SOTA
接下来,我们详细看一下全家桶中几大成员的详细信息。
Amazon Nova Pro:自研最强多模态
Amazon Nova Pro能够处理多达30万个输入token,并为多模态智能体工作流设定了新标准,这些工作流需要调用API和工具来完成复杂的工作流。
使用Amazon Nova模型执行智能体工作流:智能体可以规划并执行多步动作,利用浏览器和基于屏幕的用户界面作为通用工具来自动化终端客户的任务
它在视觉问题解答(TextVQA)和视频理解(VATEX)等关键基准上都实现了最先进的性能。
在输入300K token的情况下,它可以处理超过一万五千行代码的代码库。Amazon Nova Pro还可作为教师模型,用于蒸馏Amazon Nova Micro和Lite的自定义变体。
虽然亚马逊早期推出的AI芯片,包括第一代Trainium在内,并未在市场上获得显著反响。
但是对于新一代的Trainium2芯片,亚马逊展现出了更强的信心——其运算速度较前代产品提升了四倍。
并且,苹果也将成为其最新芯片客户之一。
类似的,AMD也宣布将于明年推出新一代AI芯片,直接与英伟达的Blackwell系列展开竞争。
目前,工程师们已经开始对芯片进行全方位的测试。
一年前发布的MI300的AI芯片,当年就创造了超500亿美元销量
与此同时,谷歌、微软和Meta等科技巨头也都在开发自己的人工智能专用芯片,旨在提升特定计算任务的处理速度并降低运营成本。
本月,谷歌将开始推出基于其第六代自研芯片Trillium的云服务,该芯片的性能较前代产品提升了近5倍。
不过,这些公司仍在使用英伟达芯片构建大规模计算集群。
老黄:免费送,也没用
尽管AI芯片新秀们群雄逐鹿,但这并不意味着英伟达即将会失去霸主地位。
黄仁勋曾在斯坦福大学演讲台上,掷地有声地表示,「即便竞争对手的芯片免费赠送,在性价比上仍然无法与我们相提并论」。
这句话,道出了英伟达十足的底气。
毕竟,如今市场中,在人工智能软件和推理计算方面,能打的芯片非英伟达莫属。
黄仁勋进一步指出,虽然新一代Blackwell人工智能芯片的能耗有所提升,但其单位能耗的计算效率大幅提高。目前市场对这款芯片的需求异常火爆。
另有据场研究机构IDC统计数据佐证了这一点。
数据显示,2024年全球人工智能半导体市场规模预计将达到1,175亿美元,并预计在2027年底进一步扩大至1,933亿美元。
IDC在2023年12月发布的最新研究报告显示,英伟达当前在AI芯片市场中占据着约95%的主导地位。
参考资料:
https://www.nytimes.com/2024/12/03/technology/nvidia-ai-chips.html
https://www.wsj.com/articles/amazon-announces-supercomputer-new-server-powered-by-homegrown-ai-chips-18c196fc
https://aws.amazon.com/cn/ec2/ultraclusters/
https://x.com/ArtificialAnlys/status/1864023052818030814
本文为专栏作者授权创业邦发表,版权归原作者所有。文章系作者个人观点,不代表创业邦立场,转载请联系原作者。如有任何疑问,请联系editor@cyzone.cn。