【新智元导读】ChatGPT横空出世后，RLHF成为研究人员关注的焦点。谷歌最新研究提出，不用人类标注，AI标注偏好后，也能取得与RLHF一样的效果。如果说，RLHF中的「人类」被取代，可行吗?谷歌团队的最新研究提出了，用大模型替代人类，进行偏好标注，也就是AI反馈强化学习（RLAIF）
......
本文由站长之家合作伙伴自媒体作者“新智元公众号”授权发布于站长之家平台，本平台仅提供信息索引服务。由于内容发布时间超过平台更新维护时间，为了保证文章信息的及时性，内容观点的准确性，平台将不提供完全的内容展现，本页面内容仅为平台搜索索引使用。需阅读完整内容的用户，请查看原文，获取内容详情。
（举报）
11.11云上盛惠！海量产品 · 轻松上云！云服务器首年1.8折起，买1年送3个月！超值优惠，性能稳定，让您的云端之旅更加畅享。快来腾讯云选购吧！
腾讯云
12-20
TechWeb文/卞海川毫无预热的情况下，OpenAI于9月13日凌晨发布了o1系列的大模型，这是传闻中内部代号为“草莓”的项目，也是OpenAI首款具备复杂推理能力的大模型。与其前代模型相比，新模型o1擅长通用复杂推理，在物理、信息学等领域表现优异，OpenAICEO奥特曼称它是一种新范式的开始：可以进行通用复杂推理的人工智能。但在一些自然语言任务中，GPT-4o更胜一筹。
当OpenAI放出AI文生视频模型Sora的几条作品时。Sora生成的视频马斯克随即在X上上表示:『gghumans/人类呜呼』。
像老师一样辅导孩子学习的智能地球仪——E2088AI2023年OpenAI发布ChatGpt4.0，彻底颠覆了传统的AI交互，人工智能正式迈入像人类一样思考的新纪元，可以辅助用户解决很多问题，这一技术也是一项很好的辅助小朋友学习的手段，可以帮助家长分担不少的辅导学习的压力。智能地球仪专家——伊思沃开始着手研发将这一技术应用到地球仪产品上，经过半年多的艰苦研发，伊思沃大模型AI辅学地球仪E2088AI一经问世即引起行业及用户的广泛关注，并取得了非常积极的反馈。这款产品是国内首个将大模型智能AI技术应用到地球仪产品之中，并专门针对小朋友做了深度的优化，除了传统AI系统的基础功能外可以深度辅导小朋友写作文、做数学题、练习英语对话，不再仅仅是个地球仪，也是辅导孩子学习的好帮手。
近日，德国马克斯普朗克分子遗传学研究所的科学家在一项重要研究中取得了突破性进展，他们发现人类细胞存在一种类似哺乳动物胚胎滞育”的机制。在自然界中，有些哺乳动物拥有一种独特的生存策略，暂缓正在生长发育的胚胎，以提高胚胎和母体的存活机会。这一发现对于辅助生殖技术具有重要意义，通过触发细胞的休眠状态，科学家可以获得更大的时间窗口来评估胚胎的健康状况，从选择更优质的胚胎进行植入，进增强人类繁殖能力。
【新智元导读】最近，陶哲轩向广大网友和数学爱好者发起了挑战:大众数学爱好者、证明助理、自动化助手和AI联合起来，是否可以证明扩展几个数量级的数学问题?想参加陶哲轩发起的「众包」数学研究项目吗?机会来了!AI辅助证明数学研究，越来越可行了在传统上，一个数学研究项目通常是由1到5名数学专家来完成的。他们每个人都对项目的各方面都足够熟悉，可以验证彼此�
【新智元导读】谷歌的AlphaChip，几小时内就能设计出芯片布局，直接碾压人类专家!这种超人芯片布局，已经应用在TPU、CPU在内的全球硬件中。人类设计芯片的方式，已被AI彻底改变。非常期待和社区合作，实现AI芯片以及芯片AI之间的闭环。
在世最长寿的猫咪罗西去世，享年33岁，相当于人类152岁。这位非正式”的在世最长寿猫咪纪录保持者，自1991年起便以其不凡的生命力，成为了猫主人莉拉生活中不可或缺的一部分。将目光投向历史长河，有史以来最长寿的猫咪传奇则属于一位来自美国得克萨斯州的神秘居民，它不可思议地活到了38岁零3天，这一数字在人类年龄换算中相当于惊人的165岁，于2005年平静离世，成为了猫咪界不朽的传奇。
北大校友打造的1000个智能体「我的世界」，火爆AI圈!随便一条推文，都能引来几十万网友围观:在这里，有着真正意义上的虚拟社会，包括文化、经济、宗教……每个智能体在GPT-4加持下，都是社会中独立自主的个体。比如这位名叫Olivia的农民，受探险故事启发，曾中途决定撂下锄头去闯荡江湖…它们以宝石作为统一货币，来完成物品交换。面对终极问题:AI智能体会取代人类吗?
SpaceX宣布，9月15日15点30分许，执行北极星黎明”任务的龙飞船已经成功返回地球，溅落在佛罗里达州海域。这一艘龙飞船是10日发射升空的，携带了4名非职业宇航员。这也是1972年阿波罗最后一次任务结束之后，人类暴露在太空中的最高高度。
AI玩黑神话，第一个精英怪牯护院轻松拿捏啊。在本项研究中，数据集中的有效数据为1000条。
Graphite Reviewer是一个AI代码审查工具，它通过即时反馈帮助团队提高代码审查的效率和质量。该工具利用代码库感知AI，自动检测代码中的bug和错误，使团队能够专注于构建而不是审查。它支持自定义规则，保证代码质量和一致性，同时确保代码的私密性和安全性。Graphite Reviewer的主要优点包括快速合并PR、强化质量和一致性、保持代码私密和安全、捕捉常见错误等。
Character SDK是一个能够创建AI角色的平台，这些角色可以实时听、说、看，甚至采取行动。它通过实时语音和视觉识别、高级OCR处理、多语言交流、自适应推理和基于意图的任务自动化等技术，帮助企业提高效率，减少成本，并提供个性化的用户体验。
Temperstack是一个企业级的主动式SRE平台，旨在减少SRE的重复劳动，提高服务的可靠性。它通过自动化服务目录、警报审计和跨您的监控工具的SLI报告，为从CTO到SRE工程师的团队提供可见性、主动发现问题并促进协作。Temperstack集成了流行的监控工具，提供统一的命令界面，以实现全面的SRE可见性和行动。
o1-engineer 是一个命令行工具，旨在帮助开发者通过 OpenAI 的 API 高效地管理和交互项目。它提供了代码生成、文件编辑、项目规划等功能，以简化开发工作流程。
Canvas是OpenAI推出的一个新界面，旨在通过与ChatGPT的协作来改进写作和编码项目。它允许用户在一个单独的窗口中与ChatGPT一起工作，超越了简单的聊天界面。Canvas利用GPT-4o模型，能够更好地理解用户的上下文，并提供内联反馈和建议。它支持直接编辑文本或代码，并提供快捷操作菜单，帮助用户调整写作长度、调试代码等。Canvas还支持版本回溯，帮助用户管理项目的不同版本。
Text Behind Image 是一个开源的设计工具，允许用户轻松创建文字背景图片设计。它提供了一个简洁的界面，让用户可以自由地在图片上添加文字，创造出独特的视觉效果。这个工具对于设计师、社交媒体运营者和内容创作者来说非常有用，因为它可以快速生成具有吸引力的视觉内容。
torchao是PyTorch的一个库，专注于自定义数据类型和优化，支持量化和稀疏化权重、梯度、优化器和激活函数，用于推理和训练。它与torch.compile()和FSDP2兼容，能够为大多数PyTorch模型提供加速。torchao旨在通过量化感知训练（QAT）和后训练量化（PTQ）等技术，提高模型的推理速度和内存效率，同时尽量减小精度损失。
Liquid Foundation Models (LFMs) 是一系列新型的生成式AI模型，它们在各种规模上都达到了最先进的性能，同时保持了更小的内存占用和更高效的推理效率。LFMs 利用动态系统理论、信号处理和数值线性代数的计算单元，可以处理包括视频、音频、文本、时间序列和信号在内的任何类型的序列数据。这些模型是通用的AI模型，旨在处理大规模的序列多模态数据，实现高级推理，并做出可靠的决策。
NVLM-D-72B是NVIDIA推出的一款多模态大型语言模型，专注于视觉-语言任务，并且通过多模态训练提升了文本性能。该模型在视觉-语言基准测试中取得了与业界领先模型相媲美的成绩。
gradio-bot是一个可以将Hugging Face Space或Gradio应用转化为Discord机器人的工具。它允许开发者通过简单的命令行操作，将现有的机器学习模型或应用快速部署到Discord平台上，实现自动化交互。这不仅提高了应用的可达性，还为开发者提供了一个与用户直接交互的新渠道。
AI-Powered Meeting Summarizer是一个基于Gradio的网站应用，能够将会议录音转换为文本，并使用whisper.cpp进行音频到文本的转换，以及Ollama服务器进行文本摘要。该工具非常适合快速提取会议中的关键点、决策和行动项目。
VARAG是一个支持多种检索技术的系统，优化了文本、图像和多模态文档检索的不同用例。它通过将文档页面作为图像嵌入，简化了传统的检索流程，并使用先进的视觉语言模型进行编码，提高了检索的准确性和效率。VARAG的主要优点在于它能够处理复杂的视觉和文本内容，为文档检索提供强大的支持。
JoyHallo是一个数字人模型，专为普通话视频生成而设计。它通过收集来自京东健康国际有限公司员工的29小时普通话视频，创建了jdh-Hallo数据集。该数据集覆盖了不同年龄和说话风格，包括对话和专业医疗话题。JoyHallo模型采用中国wav2vec2模型进行音频特征嵌入，并提出了一种半解耦结构来捕捉唇部、表情和姿态特征之间的相互关系，提高了信息利用效率，并加快了推理速度14.3%。此外，JoyHallo在生成英语视频方面也表现出色，展现了卓越的跨语言生成能力。
PhysGen是一个创新的图像到视频生成方法，它能够将单张图片和输入条件（例如，对图片中物体施加的力和扭矩）转换成现实、物理上合理且时间上连贯的视频。该技术通过将基于模型的物理模拟与数据驱动的视频生成过程相结合，实现了在图像空间中的动态模拟。PhysGen的主要优点包括生成的视频在物理和外观上都显得逼真，并且可以精确控制，通过定量比较和全面的用户研究，展示了其在现有数据驱动的图像到视频生成工作中的优越性。
Whisper large-v3-turbo是OpenAI提出的一种先进的自动语音识别(ASR)和语音翻译模型。它在超过500万小时的标记数据上进行训练，能够在零样本设置中泛化到许多数据集和领域。该模型是Whisper large-v3的微调版本，解码层从32减少到4，以提高速度，但可能会略微降低质量。
Realtime API 是 OpenAI 推出的一款低延迟语音交互API，它允许开发者在应用程序中构建快速的语音到语音体验。该API支持自然语音到语音对话，并可处理中断，类似于ChatGPT的高级语音模式。它通过WebSocket连接，支持功能调用，使得语音助手能够响应用户请求，触发动作或引入新上下文。该API的推出，意味着开发者不再需要组合多个模型来构建语音体验，而是可以通过单一API调用实现自然对话体验。
Saylo AI是一个AI角色扮演游戏，让你与AI角色互动，探索多样化的戏剧性故事。它利用人工智能技术，提供沉浸式的互动体验，让玩家在虚拟世界中与AI朋友交流，体验不同的故事情节。Saylo AI的背景信息展示了其创新性和娱乐性，旨在为玩家提供一种全新的娱乐方式。目前产品处于推广阶段，价格未明确标注。
twinny是一个为Visual Studio Code用户设计的AI扩展，旨在提供个性化的编程辅助，提高开发效率。它通过集成先进的AI技术，帮助开发者在编码过程中快速解决问题，优化代码，并提供智能提示。twinny的背景是响应开发者对于更加智能和自动化编程工具的需求，它通过简化开发流程，减少重复劳动，从而让开发者能够专注于更有创造性的工作。
Buildpad 是一个旨在帮助创始人从概念到成功最小可行产品(MVP)的在线平台。它通过提供智能验证工具、AI引导的开发流程、进度跟踪以及个性化的项目见解，帮助用户构建能够获得市场认可的产品。Buildpad 的主要优点包括简化产品开发流程、提高产品成功率、以及提供个性化的指导和支持。
Novela是一个专注于AI时代技能学习的在线平台，提供早期访问服务，用户可以免费试用。它旨在帮助用户掌握AI相关的技能，以适应未来职场的需求。
