Google AI Edge Gallery – 谷歌开源项目|完全本地运行大模型APP

Google AI Edge 画廊是一款实验性应用,将最先进的生成式 AI 模型直接交到您的手中,在您的 Android (现已上线) 和 iOS (即将推出) 设备上完全本地运行。探索一个充满创意和实用 AI 应用场景的世界,在加载模型后无需网络连接即可运行。

作者
J.Cling
广告也精彩
Google AI Edge Gallery – 谷歌开源项目|完全本地运行大模型APP

Google 在大上周的发布会还悄悄发布了一个开源项目,一个完全本地运行的开源大模型APP——Google AI Edge Gallery。

这个项目使用 Gemma3n, 并且同时集成了多模态能力,可以上传图片和音频。想要自己构建安卓 AI APP 的同学完全可以把这个项目当作模板使用。

Google AI Edge 画廊是一款实验性应用,将最先进的生成式 AI 模型直接交到您的手中,在您的 Android (现已上线) 和 iOS (即将推出) 设备上完全本地运行。探索一个充满创意和实用 AI 应用场景的世界,在加载模型后无需网络连接即可运行。您可以尝试不同的模型,进行对话,用图片提问,探索提示,等等!

概览

图片查询

提示实验室

AI 聊天

核心功能

  • 📱 本地运行,完全离线: 无需网络连接,体验 GenAI 的神奇。所有处理都在您的设备上直接进行。
  • 🤖 选择模型: 轻松切换来自 Hugging Face 的不同模型,并比较它们的性能。
  • 🖼️ 询问图片: 上传图片并提问。获取描述,解决问题,或识别物体。
  • ✍️ Prompt Lab: 概要总结、重写代码或使用自由格式提示来探索单轮 LLM 用例。
  • 💬 AI Chat: 进行多轮对话。
  • 📊 性能洞察: 实时基准测试(TTFT、解码速度、延迟)。
  • 🧩 自带模型: 测试您本地的 LiteRT .task 模型。
  • 🔗 开发者资源: 快速链接到模型卡片和源代码。

技术亮点

  • Google AI Edge: 用于设备端机器学习的核心 API 和工具。
  • LiteRT: 优化模型执行的轻量级运行时。
  • LLM 推理 API: 用于设备端大型语言模型的强大支持。
  • Hugging Face 集成: 用于模型发现和下载。

更新日志

v 1.0.3

修复图像捕获表中的一些潜在内存泄漏问题

获取方式

官方网站

https://github.com/google-ai-edge/gallery

相关图书

写AI提示词,完全遵循“不确定性原理”

最近因为Gemini、Claude都升级了模型,所以在试着更新提示词,利用模型的最新性能,过程真是痛并痛着。当然,不改也行,但是多数时候,都需要根据模型变化,调整一下。同一个模型版本迭代要改,换到其他模型执行任务更要改。(我称之为提示词移植)

精选26大领域MCP服务器大全

精选的优秀模型上下文协议 MCP服务器 列表,涉及各个领域包括:Aggregators、浏览器自动化、艺术与文化、云平台、编程智能体、命令行、社交、客户数据平台、数据库、数据平台、开发者工具、数据科学工具、文件系统、金融与金融科技、游戏....

如何通过提示词让AI翻译更加精准?

从 AI翻译 效果上来说,先解释后重写会更自然,没有机器翻译的感觉,因为解释后会让上下文更充足,尤其是人工指定对特定的点进行解释,会帮助AI更好的理解上下文从尊重原意的角度来说,直译意译的方式会更尊重原意,也一般不会遗漏内容从自动化的角度,直译意译的方式提示词好写...