Liquid AI 开源 Pipette 基准测试套件，评估端侧 AI 模型性能

Techub News 消息，Liquid AI 本周开源了 Pipette，这是一个用于在边缘设备上对基础模型进行基准测试的开源平台。Pipette 将端侧行为视为部署系统的属性，而非孤立模型，其测量单元为完整配置：模型 + 量化 + 运行时 + 设备。初始数据集涵盖了超过 1000 种模型、量化、运行时、设备和上下文配置组合，涉及 30 多个模型。 Pipette 以 Apache 2.0 许可证发布，包含基础设施、公共结果数据集、托管仪表板以及原生 iOS 和 Android 基准测试应用。该套件旨在帮助从独立开发者到大型 OEM 厂商的各类团队，在模型与量化选择、硬件采购验证、回归测试等场景下评估端侧 AI 性能。 Liquid AI 与独立验证机构 Artificial Analysis 合作开发了 Pipette，以确保方法论的可靠性。发布的数据集包含五项端侧性能指标，初步已验证结果来自配备 M5 Max 的 MacBook Pro、iPhone 17 Pro 和 Galaxy S26 Ultra 等设备。（MarkTechPost）

内容来源：TECHUB NEWS