Цей хак дозволив мені більше не бути прив’язаною лише до Meta AI.
Я використовувала свої смарт-окуляри Ray-Ban Meta для багатьох справ: від покупок до перегляду шоу Bad Bunny на початку цього року. Я вважаю їх чудовими, окрім однієї проблеми: я прив’язана до Meta AI.
І хоча це не обов’язково погано — врешті-решт, Meta AI було створено спеціально для окулярів і може використовувати їхню камеру, щоб відповідати на запитання про те, що я бачу. Але ChatGPT — це AI-асистент, яким я користуюсь значно частіше, тому я почала думати, що станеться, якби я могла надати ChatGPT той самий “погляд”.
І цей експеримент може дати уявлення про те, куди загалом рухається ChatGPT. OpenAI вже співпрацює з колишнім керівником відділу дизайну Apple Джоні Айвом над новим поколінням AI-обладнання. Їхній перший пристрій, за повідомленнями, — це портативний, безекранний асистент, оснащений камерами та сенсорами, який може розуміти, що відбувається навколо нього, а також розробляються ще кілька пристроїв.
Ми ще не знаємо, чи будуть серед них смарт-окуляри, але цей напрямок підкреслює, що OpenAI думає про майбутнє, де використання ChatGPT не обов’язково означатиме діставати телефон і відкривати додаток.
Я не хотіла чекати на це, і, враховуючи чутки про ціну в 300 доларів, я вирішила, що краще вже використати те, що маю: мої окуляри Ray-Ban Meta.
Як я отримала ChatGPT Vision на своїх Ray-Bans
Одразу скажу: я не зламувала свої Ray-Bans і жодним чином не замінювала Meta AI. Натомість я використовувала свій iPhone як міст між камерою окулярів і ChatGPT.
Результатом став, по суті, ChatGPT з парою очей. Є дві основні частини, які роблять це можливим: голос і зір. З очевидних причин, голос — це легша половина, і це була моя головна причина для проведення цього експерименту. Мені більше подобається новий ChatGPT Voice.
Окуляри Ray-Ban Meta підключаються до iPhone через Bluetooth і вже можуть обробляти аудіо з дзвінків, музики та інших додатків. Це означає, що я можу запускати ChatGPT на своєму iPhone, використовуючи окуляри для відтворення його відповідей.
Зір вимагає трохи більше роботи. Meta’s Wearables Device Access Toolkit надає розробникам доступ до функцій сумісних окулярів Meta, включаючи їхню камеру від першої особи. Це створює спосіб для iPhone-додатку отримувати зображення з окулярів, а не покладатися на власну камеру iPhone.
Мій iPhone фактично став посередником.
Налаштування виглядало приблизно так:
Камера Ray-Ban > iPhone > ChatGPT > Динаміки Ray-Ban
Коли я хотіла, щоб ChatGPT щось побачив, додаток міг захопити зображення з точки зору окулярів і надіслати його разом із моїм запитанням до ChatGPT. Потім ChatGPT міг проаналізувати те, що я бачила, і відповісти через окуляри. Це, безсумнівно, повільніше, і iPhone робить багато роботи за лаштунками, але це виконує завдання.
Дозвольте мені ще раз чітко це сказати: я не встановлювала ChatGPT безпосередньо на Ray-Bans, і фраза “Hey Meta” раптом не викликає ChatGPT. Але коли телефон був знову в кишені, це почало відчуватися на диво близьким до наявності окулярів з ChatGPT.
Я ставила ті самі запитання обом AI
Використання ChatGPT на телефоні вимагає свідомих дій. Мені потрібно дістати телефон, відкрити додаток і навести камеру на щось, перш ніж я зможу запитати про це.
З окулярами камера вже дивиться туди, куди дивлюся я. Замість того, щоб фотографувати щось, що я не розпізнавала, я могла просто подивитися на це і запитати. Я могла подивитися на продукт і запитати ChatGPT, що він думає. Я могла попросити його прочитати щось переді мною, а потім поставити додаткове запитання.
1. Тест у продуктовому магазині
Мій перший тест — це те, що я робила раніше з Ray-Ban Meta glasses та ChatGPT окремо, але поєднання їх було цікавим. Я почала з двох схожих продуктів (Pringles та Cape Cod Potato Chips) і попросила обидва AI допомогти мені вибрати між ними.
Я вже використовувала Meta Ray-Bans з їжею, але хотіла побачити, що зможе ChatGPT. Обидва дали мені однакову відповідь, але з дещо різною подачею. Meta додала “якщо ви хочете…”, тоді як ChatGPT був більш категоричним. Якщо я прошу поради, я хочу отримати чітку відповідь.
2. Тест “Що я бачу?”
Цей тест несподівано показав різницю між Meta AI та ChatGPT. Я показала обом AI свого товстого рудого кота, але ChatGPT вже знав його ім’я — Jolly. Завдяки пам’яті ChatGPT, яка вже запам’ятала сотні запитів, ChatGPT знає про мене більше, ніж Meta AI.
3. Тест на читання
Голос та відповіді ChatGPT набагато дружніші та створюють враження, ніби я розмовляю з кимось, хто мене насправді знає. Meta зазвичай переходить прямо до суті та пропонує нульовий “ліричний відступ” у розмові.
Це, безумовно, особиста перевага. Але для мене ChatGPT кращий навіть для найнудніших завдань.
Meta AI має одну величезну перевагу
Тут нікуди не дітися: Meta AI належить цим окулярам. Інтеграція чистіша, тому що Meta контролює все.
Камера, мікрофони, динаміки, команда активації та AI були розроблені для спільної роботи. Я можу сказати “Hey Meta”, запитати щось про те, що бачу, і отримати відповідь, не замислюючись про те, що відбувається за лаштунками.
У моєму налаштуванні ChatGPT iPhone непомітно знаходиться в середині процесу.
Це вводить більше кроків і більше можливостей для збоїв. Можуть виникати проблеми з затримкою, і з’єднання може бути нестабільним. Є речі, які Meta може зробити зі своїм обладнанням, які мій експеримент просто не може відтворити.
Якби мене цікавила лише найшвидша можлива відповідь на запитання “Що я бачу?”, Meta AI було б дуже важко перевершити.
Але насправді саме тому я хотіла мати ChatGPT в окулярах. ChatGPT надав мені щось інше, із загалом більш дружньою атмосферою. Мати ChatGPT як ношений пристрій, а не на телефоні, стало грою, що змінює правила, настільки, що шкодую, що не спробувала цього раніше.
Справжній висновок
Для мене головний висновок цього експерименту полягає в тому, що я нарешті відчула, як виглядають окуляри з іншим AI. Ми рухаємося до світу, наповненого AI-обладнанням: окуляри, навушники, годинники, значки та абсолютно нові категорії пристроїв.
Робота OpenAI з Джоні Айвом свідчить про те, що вони серйозно замислюються над тим, як виглядатиме ChatGPT, вирвавшись із екрана. Meta вже там зі своїми Ray-Ban Meta.
Але є ще одне питання, яке, на мою думку, стане важливим: чому купівля обладнання повинна визначати, якого AI-асистента я мушу використовувати? Я б хотіла колись відкрити налаштування своїх окулярів і мати можливість вибрати будь-якого AI-асистента за замовчуванням. Я б навіть хотіла бачити Alexa+ на окулярах!
І хоча сьогодні Ray-Ban Meta працює не так, і моє налаштування не є таким бездоганним, як вибір ChatGPT з меню, сама можливість вибору відчувається як наступний крок.
- Найрозумніший AI-трюк — це не промпт, а ваш Google Drive
- Я знайшла секретне меню ChatGPT — ці 9 функцій змінюють усе
- Claude має 4 вбудовані навички, якими я постійно користуюся — ось як їх знайти
За матеріалами: www.tomsguide.com