谷歌研究团队与DeepMind合作,推进医疗AI系统AMIE,实现实时临床视频咨询。该系统基于Gemini和Project Astra,能解读视觉与听觉线索,指导虚拟体检并实时诊断。在模拟研究中,AMIE在病史采集、诊断准确性等方面获临床评估者好评,患者更偏好视频体验。目前仍处研究阶段,需更多验证才能临床部署。
自2024年Google I/O发布以来,Project Astra成为谷歌AI助手的实验平台,旨在展示谷歌对未来AI的愿景。Astra具备主动性,能够在观察中主动提供帮助,如饮食提醒和错误纠正,并可访问用户的日历和邮件,提升实用性。尽管面临技术挑战,谷歌希望逐步减少用户操作需求,实现更智能的助手。
过去十年,我们开发了多模态模型Gemini 2.5 Pro,旨在理解和模拟现实,奠定现代人工智能基础。同时推进Project Astra和Project Mariner,提升AI助手的多任务处理能力,助力用户日常任务和科学进步。
谷歌在MWC上宣布为Gemini Live推出新AI功能,包括屏幕共享和实时视频解读,提升用户交互体验。这些功能属于Project Astra,旨在与GPT-4o竞争。相比之下,苹果的Siri升级进展缓慢,受到内部批评。
谷歌推出了Gemini的实时AI视频功能,允许部分Google One AI Premium用户通过手机摄像头实时查看屏幕并回答问题。这些功能基于“Project Astra”开发,展示了谷歌在AI助手领域的领先地位。
Gemini的Project Astra在Android XR中的应用令人印象深刻,去年12月的体验非常出色。
上周,谷歌宣布了Project Astra的更新,这是一个可以实时互动的通用AI助手原型。谷歌DeepMind的研究主任Greg Wayne在播客中将其形容为“像肩上的小鹦鹉,与你聊天”。他们讨论了该项目的技术及未来应用,包括语言学习、提醒和时尚建议。
斯嘉丽约翰逊拒绝OpenAI声音授权,OpenAI声称“Sky”声音是另一位女演员的声音,为保护隐私不透露身份。OpenAI宣布推出GPT-4o语音助手,可以解读面部表情、检测情绪。谷歌发布个人人工智能助理Project Astra。这些产品展示了下一代人工智能技术,引发了对风险的质疑。
在第167期播客中,讨论了OpenAI发布的免费快速模型GPT-4o,以及谷歌的Project Astra和最新的AI媒体创作模型Veo和Imagen 3。此外,OpenAI的首席科学家离职,Mike Krieger加入Anthropic担任首席产品官,并提到美国对自动驾驶车辆的调查和AI安全政策的进展。
谷歌I/O大会发布了Project Astra和Gemini等产品,但被GPT-4和Open AI的产品超越。谷歌的搜索功能和全家桶仍是其看家本领。Gemini在安卓系统中的应用将增强其本地智能操作能力。谷歌面临整合困难,但仍在各个领域有竞争力。Open AI是下一个时代的产品,谷歌的底层逻辑可能不足以应对新兴事物。
Google在Google I/O发布会上推出了多种新产品和升级,包括Gemini大模型、Gemma多模态大模型、AI in Google Workspace、Gemini App和Project Astra等。Google Search通过AI Review和Multi-step reasoning等功能提升搜索体验。Google还发布了Imagen 3、Music AI Sandbox和Veo等音乐和视频生成模型。Gemini家族新增了Gems和Gemini Advanced。Google还加强了安全和无障碍功能。整体而言,Google在AI领域取得了重要进展。
Google I/O大会AI成为焦点,Gemini AI模型应用于Workspace和Chrome,Google Lens通过视频搜索,Gemini 1.5 Flash模型优化快速响应,Gemini 1.5 Pro整合到Docs、Sheets、Slides、Drive和Gmail,Project Astra是多模态AI助手,生成AI模型Veo用于生成1080p视频,定制聊天机器人创建工具Gems,Gemini Live功能使语音聊天更自然,Gemini Nano添加到Chrome浏览器生成社交媒体帖子和产品评论的文本
DeepMind在Google I/O大会上展示了其名为Project Astra的通用助手的早期版本。Astra是一个实时的多模态AI助手,可以识别物体,回答问题和执行各种任务。它通过语音,文本,绘图,照片和视频进行工作。DeepMind还在研究其他模型,如Gemini 1.5 Flash,Veo和Gemini Nano。重点是创建能够代表用户完成任务的AI代理。DeepMind正在研究如何将多模态模型结合起来,并平衡大型通用模型与更小,更专注的模型。
完成下面两步后,将自动完成登录并继续当前操作。