DeepTutor是香港大学数据智能实验室开源的个人学习助手,整合问答、测验、研究、可视化、解题和掌握路径等多种模式于一个Agent工作空间,支持文档问答、个性化练习生成和深度研究。它集成多引擎RAG、网络搜索和代码执行,共享学习上下文,形成完整学习闭环。近期版本增强Agent工具、GraphRAG和模型支持,并已在HyperAI平台提供在线教程供开发者体验。
AI Agent 正在从对话工具转变为任务执行者,广泛应用于自动化办公和代码生成等领域。与传统大语言模型不同,Agent 能够拆解任务并自主推进。为支持其能力,相关数据集强调过程能力,包括长程规划和多步推理。本文整理了10个关键数据集,涵盖长上下文理解、任务规划和工具调用等能力,推动 AI Agent 的研究与应用。
香港大学推出的开源AI交易助手Vibe-Trading,允许散户无需编写代码即可进行量化交易。该工具内置452个量化因子,支持用户通过自然语言指令进行策略回测和分析,并具备“影子账户”功能,实时监控用户交易行为,帮助避免情绪化决策。尽管不支持自动实盘交易,但为散户提供了与机构相当的量化研究能力。
香港大学的张富副教授团队研发的FAST-LIVO2技术获得IEEE机器人领域最佳论文奖。该技术通过激光、视觉和惯性传感器融合,提升机器人在复杂环境中的定位精度和实时性,广泛应用于无人机和移动机器人。FAST-LIVO2在GitHub上获得4.2k Star,推动了机器人感知与自主导航的发展。
香港大学数据智能实验室开源了轻量级个人AI助手nanobot,代码量不足4000行,功能强大且易于开发。nanobot支持多种模型接口和工具调用,具备多会话和跨会话记忆能力,已在GitHub获得41.1k stars,降低了开发门槛,提供详细教程,适合开发者快速上手。
蚂蚁与港大联合推出PromptCoT 2.0框架,专注于任务合成与强化学习。实验表明,该框架在数学代码推理任务上达成新SOTA,显著提升模型性能。PromptCoT 2.0通过期望最大化优化生成更具挑战性的问题,并开源4.77M合成数据,推动大模型推理能力的提升。未来将探索环境合成与多模态任务。
机器之心数据服务现已上线,提供高效稳定的数据获取,简化数据爬取流程。
机器之心数据服务已上线,提供高效稳定的数据获取,简化数据爬取流程。
香港大学、字节跳动Seed和复旦大学联合推出的Polaris方法,通过700步强化学习训练,使4B模型在数学推理能力上超越多款商业大模型,特别是在长文本生成方面表现突出。该方法强调动态调整训练数据和超参数,提升了模型的多样性和准确性。
UC伯克利等机构提出了All-Angles Bench基准,用于评估多模态大语言模型的多视图理解能力。研究显示,现有模型如GPT-4o在多视图推理方面与人类水平存在显著差距,尤其在遮挡和相机位姿估计任务中表现不佳。该基准涵盖90个真实场景,包含2100组问答对,旨在推动多视图理解研究的进展。
香港大学与英伟达等团队提出的Centaur方法,通过动态调整模型权重和使用Cluster Entropy评估不确定性,显著提升了自动驾驶汽车在不确定场景中的适应性与安全性。在navtest测试中,Centaur的表现接近人类驾驶水平,安全性能显著提高。
VideoRAG是香港大学黄超教授实验室的最新研究,旨在高效理解超长视频。该框架通过多模态知识索引和检索,整合视频中的视觉、音频和文本信息,支持跨视频推理。在LongerVideos基准数据集上,VideoRAG表现优异,显著提升了视频理解能力,为未来研究提供了新思路。
港大与字节合作推出新的视频生成模型Goku,基于校正流Transformer,支持文本生成视频和图像生成视频。该模型生成效果真实,成本低,受到网友称赞,认为其将颠覆市场。模型训练使用了大规模数据集,但尚未公开使用。
港大黄超教授团队提出的GraphAgent框架,通过多智能体协作,融合图数据与文本信息,显著提升预测与生成任务的性能。在8B参数下,该框架优于70B大模型,尤其在论文评审中有效预测录取可能性,展现出良好的零样本学习和跨域泛化能力。
AIxiv专栏促进了学术交流,报道了2000多篇深度伪造研究。近期综述分析了深度伪造检测模型的可靠性,提出迁移性、可解释性和鲁棒性三大挑战,强调模型在实际应用中的重要性。研究者需提升模型综合性能,以保护个人隐私。
GraphAgent是港大黄超团队开发的多智能体系统,旨在高效融合图数据与文本数据。通过图生成、任务规划和任务执行三个核心智能体,该系统支持知识图谱构建和文本生成等多样化任务,并在多个基准数据集上表现出显著的性能提升,具有广泛的应用潜力。
我和奶奶带着两个宝宝参加了香港大学的“幸福家庭博览会”。活动通过游戏和互动提升了对家庭福祉的认识,宝宝们在气球和摊位活动中玩得很开心,并获得了礼品。这次活动让我意识到家庭幸福与社会发展和环境变化密切相关,希望未来能创造更多美好回忆。
周日,宝妈在实验室工作,爷爷奶奶陪伴宝宝完成寒假作业。午餐后,全家参观香港大学,感受历史氛围。下午在尖沙咀逛街,享受购物与美景,最后带着美好回忆回家,记录亲子时光。
完成下面两步后,将自动完成登录并继续当前操作。