首页 > 业界 > 关键词  > 机器狗最新资讯  > 正文

MIT博士生用Vision Pro实时训练机器狗 开源项目Tracking Steamer火了

2024-03-11 15:12 · 稿源:站长之家

要点:

1、MIT博士生开源项目Vision Pro实时训练机器狗

2、应用程序利用Vision Pro追踪人类动作实时传输到其他机器人设备。

3、通过API和模仿学习算法,人类可以为机器人提供精准训练数据。

站长之家(ChinaZ.com)3月11日 消息:MIT博士生利用Vision Pro开源项目成功实现了对机器狗的实时训练。Tracking Steamer这一应用程序通过追踪人类动作,并将数据传输到其他机器人设备,为未来与机器人互动提供了新方式。

通过API和模仿学习算法,人类在训练机器人过程中更像是机器人的教练,为机器人提供精准的训练数据。

image.png

项目地址:https://github.com/Improbable-AI/VisionProTeleop

Vision Pro的开发使得非专业人员也能参与到机器人训练中,为机器人学习人类与现实世界交互的方式提供了充满前景的数据源。

作者的开源项目引起了广泛关注,人们看到了未来与机器人互动的新可能性。Vision Pro的追踪技术以及实时数据传输功能,为机器人学习人类动作提供了直观简单的交互方式。此外,作者还准备了Python API,让开发者能够接收并处理从Vision Pro传输的追踪数据,进一步推动了机器人技术的发展。

在未来,人们或许会像日常戴眼镜一样佩戴Vision Pro设备,这将为数据收集提供更多可能性。通过这些数据,机器人可以学习到人类如何与现实世界进行交互,进一步促进了人机交互技术的发展。虽然项目需要使用Vision Pro设备和开发者配件,但这不影响人们对其开源项目的兴趣和关注,展现了对未来科技发展的热切期待。

举报

  • 相关推荐
  • 大家在看
  • CameraCtrl:让文本生成视频实现镜头控制 支持AnimateDiff控制镜头

    随着人工智能技术的发展,视频生成领域取得了长足的进步。在现有的文本到视频生成模型中,对镜头姿势的精确控制往往被忽视镜头姿势在视频生成中扮演着表达更深层叙事细微差别的影视语言角色。这一技术的应用前景广阔,有望在视频生成领域发挥重要作用。

  • 据报道,苹果因需求低迷而削减 Vision Pro 产量

    苹果在VisionPro推出美国以外市场之前就已削减了订单。消息人士称,苹果现在预计2024年仅销售大约40万至45万台VisionPro市场预期为70万至80万台。郭明錤认为,某些虚拟现实和增强现实特定组件的需求,如MicroOLED显示屏,可能不会达到大规模生产所需的采纳率,无法应用于其他设备中。

  • Vision Pro实时训练机器狗MIT博士生开源项目火了

    VisionPro又现火爆新玩法,这回还和具身智能联动了~就像这样,MIT小哥利用VisionPro的手部追踪功能,成功实现了对机器狗的实时控制。不仅开门这样的动作能精准get:也几乎没什么延时。作者本人也在论文中写道:最后,提醒一下,如果你想上手试一试这个开源项目,那么除了必备一台VisionPro之外需要准备:苹果开发者账户VisionPro开发者配件安装了Xcode的Mac电脑嗯,看样子还是得先让苹果赚一笔了。

  • 用户吐槽苹果Vision Pro:佩戴后头疼、眼睛疲劳、黑眼圈

    不少用户抱怨,佩戴苹果VisionPro后,身体健康出现问题。某公司的营销主管EmilyOlman表示,第一次佩戴VisionPro后,她患上了黑眼圈”。如果出现眼睛疲劳、头疼等症状,则不建议继续使用VisionPro。

  • 吉大三院:成功用苹果Vision Pro辅助完成腹腔镜手术

    日前,吉林大学白求恩第三医院”公众号发文,称成功应用AppleVisionPro头显辅助完成腹腔镜乙状结肠癌根治术。VisionPro在此次手术中发挥了多层面的重要作用。VisionPro在使用中仅将腹腔镜视频信号传输到设备上,在此过程中,不会进行任何网络数据传播。

  • 官翻Steam Deck半价出售

    Steam商店现以折扣价出售旧款Steam掌机官翻版,64GB基础型号仅售279美元,较首发价便宜120美元:256GB中配型号仅售319美元;带防眩光雾面屏的512GB高配型号现售359美元,较首发价低了差不多300美元,几近腰斩。官翻已通过全面测试并附带一年质保,官方也鼓励用户自己动手维修或摩机,比如这种丧心病狂的改装案例:拥有十九年资历章的Steam资深用户深感游戏库太大,没地方能装下,于是用集线器SD卡NVME硬盘盒组合将SteamDeck的外部存储容量扩充至15.5TB:该装置利用一个类似MOLLE的快拆系统挂接在Deck背后,唯一的问题是供电由外部电源切换至Deck机内电源时盘符会弹出然后重新识别,在更换另一个品牌的NVME硬盘盒后这个问题也被解决了。有用户反映执行RMA流程返回的Ally掌机仍存在这方面的问题,许多主播仍在不负责任地大力推介。

  • 价值超10万元!海关查获4台未申报苹果Vision Pro

    据海关发布”公众号通报,近日上海虹桥机场海关关员在对入境航班进行监管时,从一名旅客行李箱中查获4台未申报苹果VisionPro。根据苹果官网,256GB、512GB、1TB三种存储容量的VisionPro,价格分别为3499美元、3699美元、3899美元。国内电商平台、二手交易平台搜索苹果VisionPro代购”可以看到,代购价格多在30000元至40000元之间,比官方高出不少。

  • 首个基于SSM-Transformer混合架构,开源商业大模型Jamba

    3月29日,知名AI研究实验室AI21在官网开源了,首个基于SSM-Transformer混合架构的商业大模型——Jamba。ChatGPT、StableDifusion、Lyria等产品使用的皆是Transformer架构,虽然在捕捉序列内长距离依赖关系、泛化能力、特征提取等方面非常优秀,但在处理长序列、训练大参数模型时存在AI算力消耗大、过拟合、内存占用大等缺点。耐克、Zoom、沃尔玛、三星、阿迪达斯、airbnb等知名企业在使�

  • AI日报:首个AI程序员Devin造假被抓;​Sora平替?StreamingT2V试玩地址公布;Udio AI还可以创作喜剧、演讲;XAI发布Grok-1.5Vision多模态模型

    欢迎来到【AI日报】栏目!这里是你每天探索人工智能世界的指南,每天我们为你呈现AI领域的热点内容,聚焦开发者,助你洞悉技术趋势、了解创新AI产品应用。新鲜AI产品点击了解:https://top.aibase.com/🤖📱💼AI应用Sora平替?2分钟超长AI视频模型StreamingT2V免费开源试玩地址公布UdioAI提供多功能音频生成还可以创作喜剧、演讲、电台广播等美图Wink“AI动漫”功能升级可将短剧作品转化为动漫风格StableDesign:适用于室内装修设计的SD方案文字提示就可修改室内设计图比换脸更强大!SwapAnything:替换图片中的任意元素AI延时视频生成工具MagicTime在线体验地址放出自动化写作工具STORM:可生成像维基百科一样的深度长篇内容Meta推出ViewDiff模型:文本生成多视角3D图像📰🤖📢AI新鲜事首个AI程序员造假被抓,Devin再次“震撼”硅谷!扒皮视频文字详解附上马斯克XAI发布Grok-1.5Vision多模态模型,可处理文本和图片信息360智脑7B参数大模型正式开源最长支持约50万字输入Adobe图像生成AI“Firefly”训练集中约有5%为AI图像代码、模型全开源!贾佳亚团队多模态模型Mini-Gemini登上热榜面壁智能开源MiniCPM2.0系列模型OCR等能力显著增强竞争升温!ChatGPT增长疲软3月全球访问量17.7亿次,Claude逐渐崛起InstantID团队推新风格迁移方法InstantStyle一键置身“梵高星空”——————每日midjourneyprompt:小说古风美女图源备注:图片由AI生成,图片授权服务商MidjourneyAbeautifulwomanfromancientChina,dressedinagorgeousredHanfu,withlonghairdrapedoverhershoulders,satinherboudoirwithasmile.Ancientstyle,hanfu,boudoir,gorgeous,palace,screen,carpet,softlight,eleganttemperament,ancientculture,inlinewithorientalaesthetics,richdetails,bestquality,exquisitemakeup,cleareyelinerpen,slendereyebrows,texturedskin,whiteskin,charmingheaddress,--ar3:4--niji6--styleraw一个中国古代美女,穿着华丽的红色汉服,长发披肩,微笑着坐在闺房内。

  • 曝折叠屏iPhone延期:由苹果Vision Pro工程师操刀

    目前,折叠屏设备主要分为两大类,一类是翻盖式小折叠,另一类是书本式大折叠屏。作为一家成功的科技公司,苹果正在积极研发折叠屏设备。该公司计划使用有机硅或丙烯酸酯等聚合物材料填充显示器,以有效减少光反射问题。

今日大家都在搜的词:

热文

  • 3 天
  • 7天