Знаете, почему характеристики модели на сайте редко совпадают с тем, как она работает на вашем телефоне? Потому что бенчмарки делали для серверов, а не для периферии. Liquid AI выпустила Pipette — открытую платформу для измерения моделей прямо на edge-устройствах. Оценивается всё совместно: качество, время выполнения, квантизация и железо. Artificial Analysis подключилась как независимый валидатор. Раньше не было стандартизированного способа понять, как модель поведёт себя на смартфоне. Теперь он появился. Что это значит: разработчики смогут наконец сравнивать модели не по серверным синтетическим тестам, а по реальной производительности на устройствах пользователей.