智元联手阶跃星辰,沪产机器人向“能看会说有智商”进阶......上海AI产业生态优势凸显 | 上海新“模”样


转载自:懂经

一贯低调的上海机器人企业憋出连环大招——

3月10日,智元机器人发布全国首个通用具身基座大模型go-1;

3月11日,b站百大up主稚晖君即智元联合创始人彭志辉,在断更7个月后,发布全新作品“灵犀x2”原型机,能丝滑骑单车、缝葡萄,会陪聊,还初步具备基本家务能力;

今天,就在刚刚,智元又与同为“上海籍”的大模型独角兽阶跃星辰签约。

这一系列动作让业内解读为:沪产机器人不满足于只做一名“体育生”,而是要向“能看、会说、有智商”进阶。

先看智元。由彭志辉于2023年2月创办的智元,兼具机器人本体制造和ai能力,这在国内机器人公司中不多见。

智元在临港的机器人量产工厂,今年1月6日已下线第1000台通用具身机器人。公司仅去年第四季度就实现亿元销售额。

智元的ai能力则表现在数据和算法上。其在浦东前瞻布局的4000平方米业内最大具身数据采集厂,复刻了家居、餐厅、工业、商超、办公五大类上百个细分场景,百余台机器人被真人一对一、手把手训练,学习各类任务,日均采集数据3万条以上,成为机器人认知真实世界、学习通用本领的关键语料。去年底,智元宣布开源百万真实机器人数据集agibot world,其中80%为长时任务数据,任务时长集中在60至150秒。

智元的算法亦出色。如小样本快速泛化算法,让机器人面对新场景、新任务时,仅需少量示范即能快速掌握,可在握持异形水杯、整理杂乱餐桌等较难任务时保持高成功率;又如,结合深度强化学习和模仿学习的算法优势,智元的灵犀x2能像人一样自然走路、灵动抖腿,踩滑板车、玩平衡车同样游刃有余。

再说此次与智元牵手的阶跃星辰,到下月才满两周岁,却已被贴“多模态卷王”标签,去年在10个月内连发11个模型,今年初又以“6天6模型”开启特殊拜年,狂秀语言、语音、推理、图片理解、视频生成等多个类别的模型“肌肉”。

2月18日,阶跃星辰宣布开源全球范围内参数量最大(达300亿)的开源视频生成模型阶跃step-video-t2v,以及业内首款产品级开源语音交互大模型阶跃step-audio。不仅卷技术,更卷落地,今年2月阶跃星辰宣布与吉利汽车等成为技术合作伙伴。此前的1月,全国数千家茶百道门店接入step-1v多模态理解大模型,实现对门店物料储备、环境卫生、操作规范、员工衣着等细枝末节的智能巡检,帮茶百道督导员节约75%的验核时间。

那么,稚晖君与“大模型卷王”的组合,将带来什么?智元机器人本身已具备底层大脑,在此基础上叠加大语言模型、多模态理解模型等,好比为一台手机接入多个app,其能力无疑将更为丰富细腻。

在稚晖君的最新视频里,他与灵犀x2展开对话。其中一个灵魂拷问是——“如果你和我的狗同时掉水里,你希望我先救谁?”机器人的回答是“先救狗狗吧,我没事”。事实上,灵犀x2之所以情商在线,是定制的多模态交互大模型训练的结果。

再看阶跃刚刚开源的step-audio,被称“最懂中文的开源语音交互大模型”,能听懂你的“川普”,能用粤语唠嗑,它更能识别用户情绪。当你用略带沮丧的语气询问时,它会用温和鼓励的话语回应。可以想见,当智元机器人搭载阶跃的聊天能力,情绪价值妥妥拉满。

另外,智元最新的villa(视觉-语言-潜在动作)架构,要让机器人光看视频就能自学技能。这也不禁让人期待,若有阶跃多模态的理解一体化模型的加持,机器人进化速度会更快。

值得说明的是,行走在街头或商场、以跑跳和翻跟头来吸睛的机器人,主打运动控制能力。这种能力与情感交互能力、通用作业能力一起,并称为人类对机器人寄予的三种细分能力。但,集齐这三种能力的机器人,才是真硬核。

据悉,此次智元阶跃两家上海本土ai公司的就近牵手,体现出上海ai产业的厚度。上海市经信委人工智能处介绍,上海始终致力于在智能算力集群、语料供给体系、虚实融合实训场、行业基座大模型等四大基础底座上发力——

大模型训练依旧遵循“大力出奇迹”的尺度定律,且模型后训练和推理需求很快将超过预训练需求。根据上海最新的人工智能“模塑申城”实施方案,今年上海智算规模力争突破10万p

高质量语料数据,未来将决定模型的能力上限。去年3月,全国首家人工智能语料公司“库帕思”在沪诞生,定位大模型语料超级工厂,主打低成本、高质量,并已在领先布局合成数据和思维链数据;

虚实融合实训场方面,1月21日,全国首个异构人形机器人训练场在沪启用,首期已部署超百台异构机器人,旨在实现人形机器人数据的规模化收集和生产,为开发一个通用机器人基础模型提供关键支撑。

另外,上海已炼出minimax、阶跃星辰、商汤和书生·浦语四大基模,且全球排名领先。如minimax旗下海螺ai,现全球月访问量已超过sora,位居世界第一。

因此,回归产业的根本逻辑,这次稚晖君之惊艳,以及与“大模型卷王”的梦幻联动,引发业内核爆般的震撼。但于上海而言,这不过是长期以来为ai产业不懈添柴加薪、厚积薄发的结果。

欢迎转发,但请注明出处“上海经信委”

觉得不错请点赞!

上观号作者:上海经信委

特别声明:本文经上观新闻客户端的“上观号”入驻单位授权发布,仅代表该入驻单位观点,“上观新闻”仅为信息发布平台,如您认为发布内容侵犯您的相关权益,请联系删除!