Fara-7B — это новая система искусственного интеллекта от Microsoft, предназначенная для автоматизации пользовательских интерфейсов, использующая исключительно визуальный ввод. Несмотря на свои компактные размеры, модель, основанная на Qwen2.5-VL-7B от Alibaba, демонстрирует выдающиеся результаты, работая локально на устройствах пользователей.
Система обрабатывает интерфейсы, ориентируясь на скриншоты, предсказывая координаты кликов и генерируя нажатия клавиш. Она принимает решения, опираясь на три последних скриншота и историю действий пользователя. С 7 миллиардами параметров, Fara-7B не только снижает задержки, но и повышает конфиденциальность, обрабатывая данные локально.
Ключевым достижением является решение проблемы нехватки обучающих данных. Microsoft применяет мультиагентную платформу Magentic-One для автоматической генерации данных, собрав около 145 000 успешных сценариев. В тестах Fara-7B показала 73,5% успеха, что превышает результаты конкурентов. В среднем она выполняет задачи за 16 шагов, значительно экономя время и ресурсы.
Вопрос-ответ
Какова основная функция Fara-7B?
Fara-7B представляет собой систему искусственного интеллекта, предназначенную для автоматизации пользовательских интерфейсов по визуальному вводу. Она анализирует скриншоты, предсказывает координаты кликов и генерирует нажатия клавиш, принимая решения на основе трех последних скриншотов и истории действий пользователя.
На чем основана архитектура Fara-7B?
Модель базируется на Qwen2.5-VL-7B от Alibaba и развернута для локальной обработки на устройствах пользователей, что снижает задержку и улучшает конфиденциальность за счет локальной обработки данных.
Как достигается высокая точность и достаточное количество обучающих данных?
Microsoft применяет мультиагентную платформу Magentic-One для автоматической генерации данных, что позволило собрать около 145 000 успешных сценариев. Это решение обеспечивает доступ к обширному набору примеров без ручного сбора данных.
Каковы результаты и преимущества Fara-7B по сравнению с конкурентами?
В тестах Fara-7B достигла 73,5% успеха, что выше, чем у конкурентов, и выполняет задачи в среднем за 16 шагов, что экономит время и вычислительные ресурсы. Локальная обработка также повышает конфиденциальность пользователей.