台湾大学的研究人员推出新框架DogeRM（Domain knowledge merged Reward Model），它通过模型融合的方式，将特定领域的知识整合到通用的奖励模型中。这项技术是针对强化学习中的人类反馈（RLHF）环节设计的，目的是让大语言模型（LLMs）的行为更符合人类的期望。论文还提到，尽管DogeRM... 阅读全文

上海人工智能实验室、同济大学、南洋理工大学、北京大学和上海交通大学推出新型框架“Auto Cherry-Picker”（简称ACP），它能够自动从高质量的生成数据中学习，这些数据是由语言驱动生成的。例如，我们只需要给ACP一个简单的物品列表，比如“苹果、椅子、桌子”，它就能利用大语言模型生成详细的描述，并设计出合理的布... 阅读全文

微软推出T-MAC，在边缘设备上高效部署大语言模型（LLMs）。例如，我们想让智能手机、平板电脑或者家里的智能音箱能够更好地理解我们说的话，并且给出智能的回答，就需要在这些设备上运行一些非常复杂的算法，这些算法就是大型语言模型。但是，这些模型因为非常复杂，所以它们需要很多内存和计算能力，这对于边缘设备来说是个挑战。 论... 阅读全文

卡内基梅隆大学、上海交通大学和芝加哥丰田技术学院的研究人员推出新型自监督学习（Self-supervised Learning, SSL）模型XEUS（发音类似Zeus，意为“跨语言通用语音编码器”），旨在为数千种语言提供鲁棒的语音表示学习。XEUS模型在超过100万小时的数据上进行了预训练，涵盖了4057种语言，这使... 阅读全文

加州大学洛杉矶分校和加州理工学院的研究人员推出新型基准测试工具MIRAI，它专门设计用来评估大语言模型（LLMs）在国际事件预测方面的能力。例如，我们有一个智能系统，它可以通过分析历史数据和新闻文章来预测未来的国际事件，比如国家间的冲突、合作或外交关系的转变。这种预测对于政府决策者来说非常重要，因为它可以帮助他们做出更... 阅读全文

北京大学、BIGAI和加州大学洛杉矶分校的研究人员推出新型人工智能模型OmniJARVIS，它是为了在开放世界环境中，比如像《我的世界》这样的沙盒游戏中，让人工智能体按照指令行动而设计的。想象一下，你在游戏中拥有一个智能助手，它可以听懂你的话，理解你的想法，并在游戏中帮你完成各种任务，比如挖矿、建造或探索。 项目主页：... 阅读全文

微软推出全新文本到语音转换系统E2 TTS（Embarrassingly Easy Text-to-Speech），这是一种非自回归（non-autoregressive）的零样本（zero-shot）文本到语音合成技术，意味着它能够在没有特定训练数据的情况下，模仿任何人的声音来生成自然听起来的语音。E2 TTS的提出... 阅读全文

斯坦福大学的研究人员推出新型基准测试工具µ-Bench，它专门设计用来评估视觉-语言模型（Vision-Language Models, VLMs）在显微镜图像理解方面的表现。这类模型能够“看懂”显微镜下的图像，并且用语言描述它们所“看到”的内容，这对于生物学和生物医学研究非常重要。 项目主页：https://ale9... 阅读全文

上海人工智能实验室、香港中文大学、商汤科技集团和清华大学的研究人员推出大型视觉语言模型InternLM-XComposer-2.5（浦语·灵笔2.5），这个模型特别擅长处理需要长时间上下文输入和输出的任务。就像一个超级助手，能够理解你给它的长篇大论，无论是文字还是图片，并给出非常聪明的回答或者创作。 GitHub：ht... 阅读全文

浙江大学、蚂蚁集团和香港理工大学的研究人员推出一种新型的高效视觉投影器TokenPacker，它是为多模态大语言模型（MLLM）设计的。多模态大型语言模型是一种人工智能技术，它结合了视觉识别和语言处理的能力，可以理解和生成涉及图像和文本的内容。总的来说，TokenPacker是一个强大的工具，它通过高效地转换和打包视觉... 阅读全文

Illuin 技术、Equall.ai、巴黎-萨克雷中央高等电力学院和苏黎世联邦理工学院的研究人员推出新型文档检索系统ColPali，它利用了最新的视觉语言模型（Vision Language Models，简称VLMs）来从文档页面的图像中生成高质量的上下文嵌入（contextualized embeddings）。... 阅读全文

浙江大学、腾讯平台与内容事业群和哈尔滨工业大学的研究人员推出新基准KnowUnDo，用于更细致地评估知识忘却方法，特别是在版权内容和用户隐私领域。此外，论文还提出了MemFlex方法，它在实验中显示出在精确忘却特定知识方面优于现有方法，并能显著减少训练资源的消耗。最后，论文讨论了这种方法的局限性，并提出了未来研究的方向... 阅读全文