Важливі новини щодня — додайте «Експерт» в улюблені джерела Google

Google розширила можливості свого ШІ-помічника Gemini для macOS. Тепер він може аналізувати вміст екрана комп’ютера, а також автоматично покращувати продиктований користувачем текст у будь-яких програмах.

Одним із головних оновлень стала функція розумного диктування (intelligent dictation). Вона працює за замовчуванням і відрізняється від звичайного голосового введення тим, що не просто перетворює мову на текст.

Gemini може прибирати слова-паразити, паузи та зайві звуки, а також одразу редагувати текст у місці, де встановлений курсор. Функція працює в різних програмах на Mac — достатньо натиснути клавішу Fn і почати говорити.

Завдяки цьому користувачі можуть створювати чернетки листів, повідомлень чи документів без переходу у вікно чат-бота та без додаткового редагування.

Друга нова можливість отримала назву screen-aware reasoning — розумний аналіз екрана. На відміну від диктування, її потрібно окремо активувати в налаштуваннях.

Після отримання дозволу Gemini може аналізувати відкриті вікна на Mac. Наприклад, якщо на екрані відкриті нотатки, користувач може попросити ШІ зробити короткий підсумок або підготувати текст для зустрічі.

Асистент також здатен виконувати складніші команди. Він може допомогти скласти лист, використовуючи інформацію з відкритих файлів, або змінити текст під час диктування, якщо користувач змінює умови.

Однак доступ ШІ до екрана створює нові ризики для приватності. Експерти попереджають про небезпеку так званих prompt injection — прихованих команд у документах або на сайтах, які можуть змусити ШІ виконати небажані дії.

Якщо користувач дозволяє Gemini аналізувати вміст комп’ютера, варто уважно контролювати, які файли та сторінки відкриті під час роботи асистента.

Оновлений Gemini для macOS уже почали поширювати у світі англійською мовою. Підтримка інших мов з’явиться пізніше.