Google змінює наше уявлення про курсор: функція Magic Pointer з ШІ суттєво розширює можливість вашої мишки
Що таке Magic Pointer від Google?
Google представила експериментальну AI-функцію Magic Pointer, яка дозволяє Gemini розуміти рухи курсора та текстові команди користувача. Про нову технологію компанія розповіла на офіційному блозі Google.
Важливо! Magic Pointer може розпізнавати не лише місце курсора, а й сам об’єкт, на який вказує користувач.

Новий курсор. Фото: deepmind.google
У Google пояснили, що нова система створена для більш природної взаємодії людини зі штучним інтелектом. Замість складних текстових запитів користувачі зможуть просто вказувати на елементи екрана та давати короткі команди.
Розробники наголошують, що Magic Pointer поєднує контекст сторінки, рух курсора та текстові підказки. Саме це дозволяє системі краще розуміти наміри людини.
«Ми хочемо, щоб ШІ зустрічав користувача в усіх інструментах, якими він користується, не перериваючи його робочий процес», - пояснили у Google.
Наприклад, користувач може обвести предмет на фотографії, натиснути в іншій частині екрана та написати «перенеси сюди». Після цього Gemini автоматично виконає дію без додаткових уточнень.

Новий курсор. Фото: trustedreviews
Як Magic Pointer працюватиме у Chrome?
У Google повідомили, що нові AI-принципи вже інтегрують у браузер Chrome та нову платформу Googlebook. Користувачі зможуть взаємодіяти з Gemini прямо на сторінках сайтів без окремих вікон чат-бота.
Наприклад, система дозволить виділити кілька товарів на сайті та попросити Gemini порівняти їх. Також AI зможе допомагати з редагуванням фото, аналізом PDF-файлів або створенням графіків.
«AI-enabled pointer would streamline this process by smoothly capturing the visual and semantic context around the pointer», - зазначили розробники Google.
Компанія вважає, що курсор комп’ютера майже не змінювався понад 50 років, хоча способи взаємодії з технологіями стали зовсім іншими. Саме тому Google хоче переосмислити сам принцип роботи вказівника у часи штучного інтелекту.
Наразі Magic Pointer працює як експериментальна функція. У компанії вже анонсували подальше тестування технології в інших продуктах та сервісах Google.
Читайте по темі:
- Відправить за вас листи у вашому ж стилі: Gmail вводить нову ШІ-функцію для зручності користувачів.
- Справа на пару хвилин: що обов’язково потрібно зробити відразу після купівлі нового смартфона.
- Instagram відключив наскрізне шифрування в особистих повідомленнях: що це означає для користувачів.