Google розширила можливості свого асистента Gemini на macOS, додавши функцію під назвою Computer Use. Тепер ШІ здатен не лише відповідати на запитання, а й самостійно діяти на комп'ютері: відкривати програми, натискати кнопки, вводити текст і працювати з локальними файлами, спираючись лише на текстову інструкцію від людини.

За задумом розробників, це має перетворити Gemini з простого довідкового інструмента на повноцінного виконавця рутинних офісних і творчих операцій.

Що саме вміє робити Gemini на Mac

Користувачу достатньо сформулювати бажаний результат словами, а далі асистент сам визначає послідовність дій: відкриває потрібні меню, вписує дані у форми та натискає відповідні елементи інтерфейсу. Google стверджує, що це дозволяє позбутися десятків одноманітних ручних кроків, які раніше доводилося виконувати самостійно.

Компанія навела низку сценаріїв застосування нової функції:

  • обробка зображень — масове коригування кольору фотографій у графічних редакторах та побудова складних 3D-сцен
  • автоматизація документообігу — витягування ваги, розмірів і адрес із PDF-файлів для оформлення заявок на доставку
  • створення презентацій — збирання метрик і скриншотів дашбордів із різних регіонів та формування слайдів у Google Slides
  • онлайн-продаж речей — аналіз фото одягу з папки на комп'ютері, пошук ринкових цін, фіксація характеристик товару та публікація оголошень на майданчиках перепродажу

Раніше вже повідомлялося, що Google випустила модель Gemini 4 Argon, яка підтримує контекст у мільйон токенів і має посилений захист від кіберзагроз.

Як Google контролює дії штучного інтелекту

Усі операції Gemini виконує у відокремленому фоновому вікні, а хід виконання користувач бачить прямо в чаті у вигляді попереднього перегляду. Це означає, що основний робочий екран і курсор миші залишаються вільними, і людина може паралельно займатися своїми справами, поки асистент виконує доручене завдання.

Передбачено й кілька рівнів безпеки: саме користувач вирішує, яким застосункам відкрити доступ для Gemini, має змогу стежити за процесом у реальному часі та в будь-який момент поставити виконання на паузу. Перед критично важливими діями система додатково запитуватиме явний дозвіл.

Наразі Computer Use доступна англійською мовою і лише для користувачів у США в десктопному застосунку Gemini для Mac, який можна завантажити з офіційного сайту Google.

Нагадаємо, що раніше Google також представила модель Gemini 4 Carbon із розширеними функціями кібербезпеки.