首页 > 业界 > 关键词  > Talk2Drive最新资讯  > 正文

普渡大学发布Talk2Drive框架 为自动驾驶汽车提供智能指令解析能力

2024-02-26 14:05 · 稿源:站长之家

要点:

1. 普渡大学发布Talk2Drive框架,利用大型语言模型实现自动驾驶汽车的智能指令解析。

2. Talk2Drive框架通过接收命令、处理、生成可执行代码,结合实时环境数据,降低人类接管率。

3. 框架具有个性化服务,能理解不同驾驶员的指令,降低接管率,提供定制化驾驶体验。

站长之家(ChinaZ.com)2月26日 消息:普渡大学最新发布了Talk2Drive框架,利用大型语言模型为自动驾驶汽车提供智能指令解析能力。这一框架的核心在于通过接收命令、处理与推理,生成可执行代码,结合云端实时环境数据来实现人车交互的全新方式。

在处理命令时,框架考虑了关键的上下文信息,确保生成的驾驶策略安全且适应当前环境条件,从而降低人类接管率。

image.png

项目地址:https://purduedigitaltwin.github.io/llm4ad/

Talk2Drive框架通过先进的语音识别技术将人类口头命令转换为文本指令,确保人类意图准确被理解。结合云端的实时环境数据,框架能够考虑天气、交通状况等关键信息,在处理命令时作出相应调整,保证驾驶策略的安全性。

通过推理生成代码,框架不仅包含简单驾驶指令,还涉及复杂驾驶行为和低级控制器参数的调整,基于对道路状况和驾驶员需求的深入理解。

在个性化服务方面,Talk2Drive框架能够精确理解乘客的语言指令,满足其需求,并记录人车交互以优化系统,学习乘客偏好提供定制化驾驶体验。

实验结果显示,框架能够降低不同驾驶员的接管率,在不同场景下表现出色。这一突破性研究不仅展示了大语言模型在自动驾驶领域的潜力,也为未来自动驾驶技术发展开辟新道路,引领人机交互领域的进步。

普渡大学数字孪生实验室致力于在大语言模型与自动驾驶领域的创新和探索,欢迎全球研究者、工程师及行业同仁访问项目网站,共同推进自动驾驶技术发展,探索未来交通可能性。

Talk2Drive框架的推出将为自动驾驶汽车提供更加安全、舒适和个性化的驾驶体验,预示着以人为本、智能化的未来交通时代的到来。

举报

  • 相关推荐
  • 机器人0.103秒还原魔方破世界纪录 来自美国普渡大学

    5月13日,美国普渡大学发布一则引人关注的视频。视频中,该校学生成功打造出一台刷新纪录的魔方复原机器,该机器仅需0.103秒便能解开三阶魔方,其速度之快甚至超过人类眨眼时间。 此前,机器人复原魔方的吉尼斯世界纪录保持者是日本三菱电机开发的一款机器人,成绩为0.305秒。此次普渡大学学生打造的这台机器,成功将纪录大幅缩短。

  • 与Momenta达成战略协议 自动驾驶车辆2026年将引入优步平台

    快科技5月3日消息,Momenta与Uber(优步)联合宣布,双方正式达成战略合作协议,将自动驾驶车辆引入Uber平台,覆盖美国和中国以外的国际市场。据悉,首批合作商业化落地将于2026年初在欧洲启动,部署机器人出租车(Robotaxi),并配备车载安全员。双方表示,通过将优步的打车网络与Momenta的自动驾驶技术相结合,两家公司旨在加速和提供安全、可扩展和高效的Robotaxi服务。近年来,优步高层多次在财报电话会议及其他公开场合上加大了对公司自动驾驶战略的阐述力度。自2023年起,优步已与十多家汽车制造商达成合作,并投资了多家自动驾驶技

  • 文远知行获Uber自动驾驶领域最大投资,吹响Robotaxi规模化运营的号角

    2025年5月7日,文远知行宣布获得Uber追加1亿美元股权投资,这是Uber在自动驾驶领域的最大单笔投资。双方自2024年9月达成战略合作以来,已在阿布扎比部署中东最大Robotaxi车队,并拓展至迪拜市场。此次合作升级计划未来五年在欧洲、中东等15个城市部署数十万辆自动驾驶汽车,覆盖千万用户。Uber CEO表示这将加速全球自动驾驶服务普及。此次合作标志着自动驾驶产业迈向规模化、全球化新阶段,有望重塑人类出行方式,并为行业商业化进程树立新标杆。

  • 从阿布扎比到迪拜,文远知行的自动驾驶中东拓展之路

    文远知行是全球自动驾驶领军企业,已在10国30城开展研发测试运营,拥有中美等五国自动驾驶牌照。2024年4月宣布与Uber、迪拜交管局合作,在迪拜推出Robotaxi服务。这是Uber首次在美国以外上线自动驾驶车辆,也是中东规模最大的商业化Robotaxi车队。此前文远知行已在阿联酋深耕四年,2023年7月获该国首个全域自动驾驶牌照。此次合作将整合文远的技术积累与Uber的出行平台优势,推动迪拜智能交通转型,打造全球自动驾驶示范城市。

  • 因闸门和铁链碰撞,Waymo召回1200辆自动驾驶出租车

    Waymo在文件中表示,其安全委员会决定召回该特定版本的自动驾驶软件,以“履行相关监管报告义务”……

  • 文远知行 App 焕新升级,解锁全球便捷自动驾驶出行

    文远知行宣布旗下出行App"文远出行"正式上线,原WeRide Go更名升级。新App简化了操作流程,用户只需4步即可呼叫Robotaxi无人驾驶服务:选择上下车点、选择车型、解锁车门、完成支付。该平台还提供Robobus实时运营信息,满足多样化出行需求。目前服务网络已覆盖南京、鄂尔多斯、苏州、阿布扎比等全球多地,用户可通过微信公众号或官网查询各地运营动态。此次App升级标志着文远知行在自动驾驶商业化应用的重要布局,未来将持续优化服务体验。

  • 从法网接驳到高铁站服务,文远知行自动驾驶车辆驶入法国市场

    文远知行与欧洲自动驾驶运营商Beti合作,获得法国纯无人驾驶公开道路测试和运营牌照。这是该公司继2024年5月与雷诺集团合作开通法网公开赛场馆接驳服务后,在欧洲市场的又一突破。7月31日,法国驻广州总领事福希炜体验了文远Robotaxi和Robobus,对其技术进步印象深刻。2月27日,文远知行与雷诺集团、Beti及Macif保险集团在法国德龙省推出L4级自动驾驶出行服务,这是其在欧洲首个公开道路Robobus商业化部署。目前已在10国30城开展自动驾驶研发测试运营,产品落地法国、西班牙等多国。

  • 纯视觉不靠谱!华为车BU CEO靳玉志:走向L3/L4自动驾驶 汽车一定要有激光雷达

    华为智能汽车BU CEO靳玉志近日表示,实现L3/L4自动驾驶必须配备激光雷达,主要原因有二:一是激光雷达无需识别障碍物即可检测,而纯视觉方案需大量数据训练,仍存在极端场景下的识别风险;二是视觉方案在暗光、暴雨等环境下清晰度受限。激光雷达结合毫米波雷达等传感器能提升极端场景下的可靠性。目前特斯拉FSD、百度Apollo Lite和Mobileye SuperVision是主流纯视觉方案代表。

  • 小马智行CEO彭军透露:小马智行自动驾驶出租车已取消了安全员

    快科技5月15日消息,近日,小马智行CEO 彭军接受媒体采访时,透露了小马运营车辆已取消安全员的这一消息。彭军表示,小马智行很多体实际体验都没有安全员,也不是一步做到的。他解释说在最早的研发和测试阶段,都是带着安全员的,小马是在两年半以前真正做到足够安全之后,才把安全员去掉了。所以,彭军强调,小马智行最近的运营车辆是不带安全员的。他认为,随着技术以及政策层面的快速发展,远程监督员人车比放宽,若放宽至1:3甚至更高比例,单车监督员的成本也将从数十万元降至两三万元,这项成本下探也有利于单车盈利转正。与此同时,

  • 李想AI Talk第二季来了:理想VLA司机大模型是从动物到人类的进化

    在这期间,李想分享了他对人工智能的最新思考,以及包含智能驾驶和理想同学在内的人工智能技术的最新进展,并宣布基于自研基座大模型Mind GPT的理想同学从车机进入手机,App已于12月27日全量上线。