【独家】HAOMO AI DAY迎来DriveGPT雪湖·海若 毫末顾维灏:将重塑汽车智能化技术路线
- 来源: 财经网 2023-04-11 21:39:44
"DriveGPT雪湖·海若将重塑汽车智能化技术路线,面向全行业开放。毫未有信心在中国第一个进入自动驾驶3.0时代。"在4月11日举行的第八届HAOMOAIDAY上,毫末智行CEO顾维灏在《DriveGPT雪湖·海若驱动自动驾驶3.0时代加速到来》的演讲中,重磅发布自动驾驶生成式大模型DriveGPT,中文名"雪湖·海若",并分享了围绕大模型的应用能力,以及介绍了中国首个自动驾驶数据智能体系MANA和中国自动驾驶行业最大智算中心MANAOASIS雪湖·绿洲最新升级。同时,顾维灏还宣布雪湖·海若智能驾驶能力首发车型将落地在即将量产上市的新摩卡DHT-PHEV上。
(资料图片仅供参考)
(毫末智行CEO顾维灏)
重塑汽车智能化技术路线,毫末发布自动驾驶生成式大模型DriveGPT雪湖·海若
当下,AI大模型的落地应用再度引发广泛关注,而不同行业领域的从业者,也在积极探索面向各自细分行业行之有效的AI大模型。在AI自动驾驶领域,毫末是大模型研发和应用的先行者。AI DAY现场,顾维灏重磅发布自动驾驶生成式大模型DriveGPT,中文名雪湖·海若。
(毫末自动驾驶生成式大模型毫末DriveGPT,中文名"雪湖·海若")
"海若"出自《庄子·秋水》。《庄子·秋水》中有两个神话人物河伯和北海若。河伯请教北海若,何谓大小之分,北海若教导,不因天地而觉大,不因毫末而觉小。因此,毫末把DriveGPT中文名命名为"雪湖·海若",寓意着智慧包容、海纳百川,为行业发展贡献力量。
毫末DriveGPT雪湖·海若通过引入驾驶数据建立RLHF(人类反馈强化学习)技术,对自动驾驶认知决策模型进行持续优化。DriveGPT雪湖·海若的目标是实现端到端自动驾驶,现阶段主要用于解决自动驾驶的认知决策问题,后续持续会将毫末多个大模型的能力整合到DriveGPT雪湖·海若。目前,毫末DriveGPT雪湖·海若实现了模型架构与参数规模的升级,参数规模达到1200亿,预训练阶段引入4000万公里量产车驾驶数据,RLHF阶段引入 5万段人工精选的困难场景接管Clips。
DriveGPT雪湖·海若的底层模型采用GPT(Generative Pre-trained Transformer)生成式预训练大模型,与ChatGPT使用自然语言进行输入与输出不同,DriveGPT雪湖·海若面向自动驾驶场景,输入是感知融合后的文本序列,输出是自动驾驶场景文本序列,即将自动驾驶场景Token化,形成"Drive Language",最终完成自车的决策规控、障碍物预测以及决策逻辑链的输出等任务。
(DriveGPT雪湖·海若的技术原理介绍)
顾维灏对DriveGPT雪湖·海若的实现过程进行了详细的解释。首先在预训练阶段通过引入量产驾驶数据,训练初始模型,再通过引入驾驶接管Clips数据完成反馈模型(Reward Model)的训练,然后再通过强化学习的方式,使用反馈模型去不断优化迭代初始模型,形成对自动驾驶认知决策模型的持续优化。同时,DriveGPT雪湖·海若还会根据输入端的提示语以及毫末CSS自动驾驶场景库的决策样本去训练模型,让模型学习推理关系,从而将完整驾驶策略拆分为自动驾驶场景的动态识别过程,完成可理解、可解释的推理逻辑链生成。
(DriveGPT雪湖·海若的实现过程)
顾维灏还在现场宣布雪湖·海若智能驾驶能力首发车型是即将量产上市的新摩卡DHT-PHEV。他表示,雪湖·海若可以逐步应用到城市NOH、捷径推荐、智能陪练以及脱困场景中。有了雪湖·海若的加持,车辆行驶会更安全,动作更人性、更丝滑,并有合理的逻辑告诉驾驶者,车辆为何选择这样的决策动作。对于普通用户来说,车辆越来越像老司机,用户对智能产品的信任感会更强,理解到车辆的行为都是可预期、可理解的。
(毫末雪湖·海若智能驾驶能力首发车型:新摩卡DHT-PHEV)
目前,毫末DriveGPT雪湖·海若已正式对行业开放,开启对限量首批客户的合作,北京交通大学计算机与信息技术学院、高通、火山引擎、华为云、京东科技、四维图新、魏牌新能源、英特尔等已经加人。DriveGPT雪湖·海若对行业提供开放服务,将促进自动驾驶的从业者和研究机构快速构建基础能力,释放创新。
(毫末自动驾驶生成式大模型雪湖·海若对行业开放)
当前,毫末在使用数据过程中,逐步建立起一套基于4D Clips驾驶场景识别方案,具备极高性价比。在行业上,给出正确的标注结果,一张图片需要约5元;如果使用DriveGPT雪湖·海若的场景识别服务,一张图片的价格将下降到0.5元。单帧图片整体标注成本仅相当于行业的1/10。接下来,毫末会将图像帧及4D Clips自场景识别服务逐步向行业开放使用,这将大幅降低行业使用数据的成本,提高数据质量,从而加速自动驾驶技术的快速发展。
(雪湖·海若场景识别能力对外开放,价格为行业当前水平的十分之一)
MANAOASIS升级三大能力,为DriveGPT雪湖·海若提供算力支持
云端算力对于大模型平稳落地运行不可或缺。此前,毫末已经构建了中国自动驾驶行业最大的智算中心MANA OASIS(雪湖·绿洲)。活动上,顾维灏介绍,在DriveGPT雪湖·海若的算力支持方面,MANA OASIS从算力优化等层面升级了三大能力。
(MANAOASIS雪湖·绿洲)
首先,毫末与火山引擎全新搭建了"全套大模型训练保障框架",实现了异常任务分钟级捕获和恢复能力,可以保证千卡任务连续训练数个月没有任何非正常中断,有效保证了大模型训练稳定性。
其次,将"增量式学习"推广到大模型训练,构建 DriveGPT雪湖·海若大模型学习系统。毫末研发出以真实数据回传为核心的增量学习技术,并将其推广到了大模型训练,构建了一个大模型持续学习系统,自主研发任务级弹性伸缩调度器,分钟级调度资源,集群计算资源利用率达到95%。
最后,优化关键算子,以提升数据吞吐量,提升 DriveGPT雪湖·海若大模型训练效率。MANAOASIS通过引入火山引擎提供的Lego算子库实现算子融合,端到端吞吐提升84%,满足大模型训练的效率要求。
MANA视觉感知能力持续提升,MANA架构全线升级开放赋能
毫末打造的中国首个自动驾驶数据智能体系MANA,在经过一年多的应用迭代后,本次AIDAY也迎来了全面的升级。顾维灏介绍,首先,感知和认知相关大模型能力统一整合到DriveGPT雪湖·海若;其次,计算基础服务针对大模型训练在参数规模、稳定性和效率方面做了专项优化,并集成到OASIS当中;第三,增加了使用NeRF技术的数据合成服务,降低Corner Case数据的获取成本;最后,还针对多种芯片和多种车型的快速交付难题,优化了异构部署工具和车型适配工具。
(中国首个自动驾驶数据智能体系MANA全面升级,开放赋能)
此外,MANA的视觉感知能力持续提升,一方面可同时学习三维空间结构和图片纹理,并将纯视觉测距精度超过了超声波雷达,也使得BEV方案也拥有了更强的通用性和适配性;另一方面,可实现单趟和多趟纯视觉NeRF三维重建,道路场景更逼真,肉眼几乎看不出差异。通过NeRF进行场景重建后,可以编辑合成真实环境难以收集到的CornerCase。在原有的全局视角修改、添加光照/天气效果的基础上,新增合成虚拟动态物体的能力,可以在原有设定的运动轨迹上,合成各种Hard Case,模拟城市复杂交通环境,用更低成本测试提升城市NOH能力边界,更好提升应对城市复杂交通环境。
(MANA视觉感知能力进展)
值得一提的是,面对目前行业里最难的视觉任务之一——单目视觉测量,继特斯拉后,毫末也在中国率先开始验证能否使用鱼眼相机代替超声波雷达进行测距,以满足泊车要求。毫末把视觉BEV感知框架引入到了车端鱼眼相机,做到了在15米范围内达到30cm的测量精度,2米内精度高于10cm的视觉精度效果。泊车场景使用纯视觉测距来取代超声波雷达,将进一步降低整体智驾成本。
(毫末纯视觉测距精度可以使用鱼眼相机取代超声波雷达)
在演讲最后,顾维灏表达了毫末人的技术信仰,"毫末成立到现在接近三年半时间……毫末对技术的坚定投入始终未变。毫末人始终热爱技术,枕戈待旦,全力冲刺。再难,都不会放弃。所爱隔山海,山海皆可平。技术必将改变世界!"
标签:
【免责声明】
1、凡本网注明出处非(巨潮财经网)的作品,均转载于自其它媒体,并不代表本网赞同其观点和对其真实性负责,目的在于信息的传递,本网不承担稿件侵权行为的连带责任,如对稿件有质疑请与本网客服联系。
2、刊发此文目的在于传递更多信息,文章内容仅供参考,不构成投资建议,投资者据此操作,风险自担。
3、如涉及作品内容、版权等其它问题,请在15日内联系本网客服。
-
【独家】HAOMO AI DAY迎来DriveGPT雪湖·海若 毫末顾维灏:将重塑汽车智能化技术路线
"DriveGPT雪湖·海若将重塑汽车智能化技术路线,面向全行业开放。毫未有信心在中国第一个进入自动驾驶3 0时代。 "在4月11...
2023-04-11 21:39:44
-
盛京银行召开董事会、监事会 提名董监事候选人
2023年4月11日晚,盛京银行股份有限公司发布公告,该行董事会提名孙进先生为盛京银行执行董事候选人。该行监事会提名刘岩先生...
2023-04-11 21:49:28
-
抑郁症低龄化,怎么破?|快资讯
作者|《财经》记者辛颖实习生田芷绮编辑|孙爱民除了医院的治疗,青少年抑郁缓解需要改善父母行为,并和学校建立连接,让老师...
2023-04-11 19:49:32
-
大反转?谢娜张杰因名誉权、隐私权纠纷起诉房产中介,原爆料帖还在,账号继续更新 今日快看
每经记者刘颂辉每经编辑陈梦妤日前,明星夫妇买豪宅 "跳单门 "涉及的中介与房东合同纠纷案一审宣判,舆论的天平逐渐发生偏...
2023-04-11 18:45:20
-
今日观点!财面儿丨禹洲集团:前3月累计实现销售额54.05亿元 同比下滑52.6%
财经网讯4月11日,禹洲集团发布截至2023年3月份未经审核营运数据。2023年3月份,集团合约销售金额为人民币21 50亿元,同比下...
2023-04-11 18:50:03
-
【独家】HAOMO AI DAY迎来DriveGPT雪湖·海若 毫末顾维灏:将重塑汽车智能化技术路线
"DriveGPT雪湖·海若将重塑汽车智能化技术路线,面向全行业开放。毫未有信心在中国第一个进入自动驾驶3 0时代。 "在4月11...
2023-04-11 21:39:44
-
盛京银行召开董事会、监事会 提名董监事候选人
2023年4月11日晚,盛京银行股份有限公司发布公告,该行董事会提名孙进先生为盛京银行执行董事候选人。该行监事会提名刘岩先生...
2023-04-11 21:49:28
-
概念掘金 | AI搭载眼镜!盘前暴涨100%!Innovative Eyewea推出首款支持 ChatGPT 的智能眼镜,智能硬件厂商是下一个赢家? -全球最资讯
从音箱到眼镜,ChatGPT奔向可穿戴化
2023-04-11 21:14:25
-
胃不舒服怎么办?5个建议,坚持下去的人,胃越来越舒坦_焦点报道
胃黏膜是胃部的第一道防线,因此,保护好胃黏膜,是控制和治愈胃部疾病的关键。胃黏膜虽然有自我修复能力,但如果反复不良刺...
2023-04-11 21:01:11
-
游戏联名,能救一加?-精彩看点
当游戏手机开始逐渐退出历史舞台时,一加却在游戏联名这条路上动作越来越频繁。4月11日,一加官方公布原神定制版手机将于4月1...
2023-04-11 19:55:43
-
抑郁症低龄化,怎么破?|快资讯
作者|《财经》记者辛颖实习生田芷绮编辑|孙爱民除了医院的治疗,青少年抑郁缓解需要改善父母行为,并和学校建立连接,让老师...
2023-04-11 19:49:32
-
康美实业宣告破产,曾涉A股史上最大财务造假案
作者|《财经》记者王颖张云编辑|杨秀红完成重整后,ST康美摆脱了破产的命运,但经营发展也非一片坦途曾经的实际控制人、前 "...
2023-04-11 19:48:33
-
住宿餐饮等大众消费复苏,中小企业发展指数回升
作者|《财经》记者张舸编辑|王延春年初以来,各地陆续出台促消费措施,住宿市场回暖,行业内的中小企业发展信心随之逐渐回升...
2023-04-11 19:46:45
-
高考加油励志语短句送儿子为鼓劲的话给孩打气的 世界热文
1、高考加油励志语短句送儿子亲爱的儿子,高考虽然说是一场看不见硝烟的战争,但是你要相信,并不是你一个人在战斗。儿子,你...
2023-04-11 19:31:37
-
每日热门:金融报道|息差整体承压 多地中小银行下调存款利率
继2022年银行业内进行两轮存款利率下调后,部分地区的中小银行再度选择向下调整存款利率,河南、湖北、广东等地的区域性银行...
2023-04-11 18:45:18
-
家居丨市场监管总局:亚振家居木质家具产品抽检不合格
财经网讯4月11日,据市场监管总局发布的2022年家具产品质量国家监督抽查情况通报,本次抽查427家企业生产的469批次家具,涉及...
2023-04-11 18:48:42
-
当前热讯:快讯|惠泉啤酒去年营收增长5.39%至6.13亿元,餐饮渠道销量提高9%
财经网产经讯4月11日下午,惠泉啤酒发布2022年全年财报。披露公司去年营收增长5 39%至6 13亿元。归属净利提高28 41%至3984...
2023-04-11 18:36:52
-
大反转?谢娜张杰因名誉权、隐私权纠纷起诉房产中介,原爆料帖还在,账号继续更新 今日快看
每经记者刘颂辉每经编辑陈梦妤日前,明星夫妇买豪宅 "跳单门 "涉及的中介与房东合同纠纷案一审宣判,舆论的天平逐渐发生偏...
2023-04-11 18:45:20
-
今日观点!财面儿丨禹洲集团:前3月累计实现销售额54.05亿元 同比下滑52.6%
财经网讯4月11日,禹洲集团发布截至2023年3月份未经审核营运数据。2023年3月份,集团合约销售金额为人民币21 50亿元,同比下...
2023-04-11 18:50:03
-
标普:中国开发商销售状况有望在2023年下半年恢复_速讯
观点网讯:4月11日,标普全球评级表示,中国开发商的销售状况有望在2023年下半年恢复。然而,由于住房交付仍需时日,所以开发...
2023-04-11 18:48:18
-
安徽庐江:渔政执法人的“千里眼”
为保护长江、巢湖流域生态环境,提升渔政执法工作效能,安徽移动庐江县分公司搭建的庐江渔政多元联合感知平台,依托5G技术、将
2023-04-11 18:17:06
-
多家银行下调存款利率后储户收益将减少,专家:具有多方面积极意义 当前热议
多家银行下调存款利率后储户收益将减少,专家:具有多方面积极意义
2023-04-11 18:08:16
-
龙虎榜 | 首都在线获净买入额最多,抢筹传媒股!中文在线获深股通净买入2.38亿元 世界速讯
龙虎榜净买入额榜前三为分别为首都在线、人民网、中国科传
2023-04-11 17:56:07
-
上海商业地产市场一季度问询量上升 预计将企稳回升_天天短讯
2023年一季度,上海商业地产市场逐步回归常态。 "随着民众日常生活以及商务活动恢复正常,上海商业地产出现更多积极信号。 ...
2023-04-11 17:49:01
-
江泰保险经纪约5%股权被挂牌 分支机构加速裁撤为哪般
中国网财经4月11日讯(记者郭伟莹)近日,江泰保险经纪股份有限公司(以下简称 "江泰保险经纪 ")5 1217%股权被挂上北京产...
2023-04-11 17:51:09
-
2022年五大上市险企公布“成绩单”:日均净少赚1.21亿元,1.5万亿资产投向股市_焦点简讯
《中国经济周刊》记者谢玮|北京报道截至3月末,在沪港两地上市的中国人寿(601628 SH)、中国平安(601318 SH)、中国太保...
2023-04-11 17:54:57
-
华能水电选举孙卫为公司董事长|最资讯
财经网讯4月11日,华能水电公告,公司第三届董事会第十三次会议审议通过《关于选举公司董事长的议案》,一致同意选举孙卫为公...
2023-04-11 17:53:55
-
持续探索农险创新 中国太保筑起惠农“防护网”
在国家积极推动乡村振兴战略的大背景下,农业保险亦成为金融保险企业助力三农高质量发展的重要一环。近年来,中国太保坚定践...
2023-04-11 17:36:46
-
世邦魏理仕料今年港甲厦租金最多下跌5%-今日热议
观点网讯:4月11日,世邦魏理仕最新发表的《2023年第一季香港商业房地产市场观点》指出,随着通关后香港逐步恢复正常,写字楼...
2023-04-11 17:36:46
-
快讯|央行:一季度人民币存款增加15.39万亿元,同比多增4.54万亿元
财经网金融讯4月11日,央行官网发布2023年一季度金融统计数据报告。一、广义货币增长12 7%,狭义货币增长5 1%3月末,广义货...
2023-04-11 17:44:53
-
财面儿丨远洋集团:前3月累计实现协议销售额约165.5亿元 同比增长9.8% 每日观点
财经网讯4月11日,远洋集团发布未经审核营运数据。3月,集团的协议销售额约为人民币81 9亿元,环比增长61 5%,同比增长19 ...
2023-04-11 17:41:03
-
快讯|央行:3月末对实体经济发放的人民币贷款余额为223.96万亿元,同比增长11.7%|天天报道
财经网金融讯4月11日,央行官网发布,2023年3月社会融资规模存量统计数据报告。初步统计,3月末社会融资规模存量为359 02万...
2023-04-11 17:53:12
-
快讯|央行:一季度对实体经济发放的人民币贷款增加10.7万亿元,同比多增2.36万亿元
财经网金融讯4月11日,央行官网发布2023年一季度社会融资规模增量统计数据报告。初步统计,2023年一季度社会融资规模增量累计...
2023-04-11 17:53:55
-
岐山县气象台解除大风蓝色预警【Ⅳ级/一般】_世界讯息
岐山县气象台解除大风蓝色预警【Ⅳ级 一般】
2023-04-11 17:30:03
-
港股收评:恒指收涨0.75%,内房股狂飙,半导体股表现萎靡
南下资金全日净流入43 24亿港元,大市成交额为1268亿港元
2023-04-11 17:01:30