上海举办的全球开发者先锋大会上,斑陌易行搞了个主题为《端到端大模型在无人车上的应用和探索》的工作坊,给在场的行家们展示了他们在具身智能这块儿的技术干货。斑陌易行总裁陈强在会上聊了聊公司的牌子怎么立、未来咋走。他们既然定位于无人车领域的创新实干家,那目标自然是让端到端大模型和无人车深度融合,不再是只在实验室里捣鼓,而是要真正铺到路面上,去帮智慧物流场景解决问题。 这边负责技术的朱宝伟拆解了公司的技术架构,说的是打地基用工程能力,当发动机的是核心算法,最后要拉通的是开放的生态圈。他给大伙儿指了条明路,现在行业正处在换代的节骨眼上,以前那种靠规则的老路子在面对真真假假的复杂场景时表现一般,落地还挺贵,这成了阻碍大家大规模搞起来的一个坎儿。照现在的技术走势看,不管是跑在大街上的车还是慢吞吞的低速车,都得搞端到端结合具身智能才行。因为这种技术路子能跳过感知、融合、规划、控制这些中间环节少走弯路,既减少了时间延迟又防止了信息丢包。靠着不断有真实场景的数据投喂回来练手,模型就能自我学习和进化。运营的数据一多,车子做的决定准头自然就高,适应各种路况的能力也会跟着变强。 针对刚起步的创业公司没模型和没数据的难处,斑陌易行提出了个解决办法:把数据闭环和开源模型微调结合起来用。公司特意强调得让工程和算法两手都要硬,并且拿他们自己搞的Smartware2.0来说事儿。因为有了这种灵活适配的能力,他们能在传感器怎么读入数据、导航怎么设置、怎么把预测好的路线画出来、底盘怎么配合这些环节上下功夫。这种工程和算法合在一起的本事让技术方案能在不同的车型和硬件平台上轻松复用。 到了工程化部署这一步,团队分享了从拿到模型到最后车能跑起来的一整套实操经验。中间件在这里面扮演着关键的协调角色,把模型塞进去就能让各个模块跑得更顺溜。在仿真阶段可以通过单独测试模型或者把rosbag里的旧数据倒回中间件再跑一遍来检验性能好坏,好提前发现那些可能翻车的地方。到了上板环节就开始拆解那些要命的量化难题和怎么走最稳妥的路,还要分析一下工具链到底熟不熟、人够不够用。最后把模型真正装上车子实测一下才算完成任务。 这次工作坊算是个大家伙儿互相交流的窗口。现在的大趋势就是搞端到端的技术路子,底座模型也都开始往外放了。真正能把算法和工程都落地的本事成了关键的门槛,而手里的数据能不能闭环直接决定了你算法有多厉害。斑陌易行表示以后还是得靠着工程这块硬地基、算法的强能力加上生态的大圈子走下去。他们要把真实场景的数据当成基础,把开源的生态当作靠山,使劲推着低速无人车从“能用”的程度往“好用”的方向去发展。