谷歌在人工智能领域再次迈出重要一步,发布了其最新一代模型Gemini 2.0的首款变体——Gemini 2.0 Flash。据谷歌官方博客透露,Gemini 2.0 Flash在关键基准测试中的表现是1.5 Pro版本的两倍之快,这一进步无疑为人工智能技术的发展注入了新的活力。
Gemini 2.0 Flash不仅在处理速度上有了显著提升,更引入了多模态输出的功能。这意味着用户现在可以获得混合了文本、原生生成的图像以及可操控的文本转语音(TTS)多语言音频的综合性输出。该模型还能直接调用谷歌搜索、执行代码以及第三方用户自定义函数等工具,为用户提供了前所未有的便捷性。
为了进一步推动动态和交互式应用程序的开发,谷歌还推出了Multimodal Live API。该API支持实时音频和视频流输入,并能同时使用多个组合工具,为用户带来更加丰富的交互体验。
在AI Agent方面,谷歌同样带来了令人瞩目的更新。其中,通用AI Agent Project Astra的最新版本尤为引人注目。这个全视、全听和全记忆的AI助手现在能够记住长达10分钟的视频内容,并能根据用户的对话和个人偏好提供更加个性化的服务。Project Astra还支持多种语言和混合语言交谈,能够更好地理解口音和不常见的单词。通过新的流媒体功能和本机音频理解,Agent能以接近人类对话的延迟理解语言,使对话更加自然流畅。
另一个值得一提的AI Agent是Project Mariner,它能够完成多步骤的复杂任务。通过理解和推理浏览器屏幕上的信息,包括像素、文本、图像和表单等,Project Mariner能够自动执行一系列任务。虽然目前仍需人类介入,但这一技术已经表明了在浏览器中导航的可行性。在WebVoyager基准测试中,Project Mariner作为单一Agent设置实现了83.5%的最佳工作结果。
谷歌还在探索AI编程Agent Jules的更新。Jules是一种直接集成到GitHub工作流程中的实验性AI驱动的编程Agent,能够解决问题、制定计划并执行,所有过程都在开发人员的指导和监督下进行。这一领域的长期目标是构建在所有领域都有帮助的AI Agent。
谷歌还构建了游戏Agent,帮助用户在视频游戏的虚拟世界中导航。这些Agent能够仅根据屏幕上的动作来推理游戏,并在实时对话中提供下一步操作的建议。目前,谷歌正在与游戏开发商合作,探索这些Agent在各种游戏中解释规则和挑战的能力。
在硬件方面,谷歌也宣布了其最强AI芯片Trillium TPU的普遍可用性。这款第六代TPU相比上一代芯片在训练性能、推理吞吐量、能效等方面都有了显著提升。Trillium TPU是谷歌云AI超级计算机的关键组成部分,其架构采用了性能优化的硬件、开放的软件以及领先的机器学习框架和灵活的消费级模型的集成系统。这一硬件的升级无疑为Gemini 2.0等模型的训练和推理提供了强大的支持。