Liquid AI 開源 Pipette 基準測試套件，評估端側 AI 模型性能

Techub News 消息，Liquid AI 本周開源了 Pipette，這是一個用於在邊緣設備上對基礎模型進行基準測試的開源平台。Pipette 將端側行為視為部署係統的屬性，而非孤立模型，其測量單元為完整配置：模型 + 量化 + 運行時 + 設備。初始數據集涵蓋了超過 1000 種模型、量化、運行時、設備和上下文配置組合，涉及 30 多個模型。 Pipette 以 Apache 2.0 許可證發佈，包含基礎設施、公共結果數據集、託管儀表板以及原生 iOS 和 Android 基準測試應用。該套件旨在幫助從獨立開發者到大型 OEM 廠商的各類團隊，在模型與量化選擇、硬件採購驗證、回歸測試等場景下評估端側 AI 性能。 Liquid AI 與獨立驗證機構 Artificial Analysis 合作開發了 Pipette，以確保方法論的可靠性。發佈的數據集包含五項端側性能指標，初步已驗證結果來自配備 M5 Max 的 MacBook Pro、iPhone 17 Pro 和 Galaxy S26 Ultra 等設備。（MarkTechPost）

内容來源：TECHUB NEWS