З недавніх пір ChatGPT вміє не просто розпізнавати зображення, а й використовувати його деталі для міркувань як частину завдання. Завдяки моделям o3 та o4-mini, які «думають» за допомогою картинок, завантаження фото стало ще одним повноцінним способом взаємодії з нейромережею.
Зрозуміти, що перед тобою, перекласти з урахуванням контексту, розшифрувати напис, пояснити суть — все це робиться швидко і в одному вікні. Напрочуд працює досить круто. Ось кілька ситуацій, коли функція виявляється не просто корисною, а несподівано зручною.
1. Розпізнавання об’єктів
Найочевидніший сценарій, який напрошується насамперед, показати, що в тебе в кадрі. ChatGPT легко визначить дивного птаха на балконі, неїстівний гриб на дачі, дерево під вікном, модель старої камери з барахолки або незрозумілий логотип на одязі. Іноді бонусом розкаже цікаві факти або запропонує посилання без зайвих запитів і вгадувань.
2. Визначення фільму по кадру
Достатньо зробити фото або знімок з екрана і чат-бот вгадає, з якого фільму кадр. Може розпізнати фільм як за культовими сценами, так і за менш очевидними. Нейромережа підкаже назву, опише персонажів і навіть відтворить діалог, якщо розпізнає момент. Якщо картина рідкісна, ChatGPT може попросити уточнити деталі: рік виходу, країну, жанр чи контекст сцени. Але й у таких випадках часто вдається розплутати загадку по крихтах — ніби говориш із дуже ерудованим кіноманом.
3. Підказки з дизайну
Завантажив знімок спальні й отримав ідеї, як покращити освітлення, розставити меблі та вибрати кольори. Показав ділянку біля будинку — ChatGPT запропонував, де влаштувати мангальну зону, поставити альтанку та як краще викласти плитку. Все це без вимірів, схем та креслень просто по кадру. Повноцінного проєкту, звичайно, не вийде, але для перших кроків та натхнення більш ніж достатньо.
4. Інформація про продукт на етикетці
Якщо просто зробити фото пакування, ChatGPT розповість, який продукт перед вами, звідки він, що у складі та з чим його їдять. У випадку з вином підкаже сорт, регіон, смаковий профіль і навіть порекомендує страви в пару. Якщо це соус із загадковою назвою, нейромережа пояснить, гострий він чи солодкий і чи підійде до курки. Іноді може здивувати: попередити про шкідливі добавки або запропонувати схожий, але вдалий варіант.
5. Підбір рецептів з фото
А якщо сфотографувати вміст холодильника — можна взагалі отримати конкретні рецепти. Чат-бот розпізнає продукти на фото, визначає, що з чим поєднується, і запропонує варіанти від перекусів до повноцінних страв. Якщо чогось не вистачає, нейромережа підкаже, чим замінити чи як адаптувати рецепт під конкретні умови. Нарешті можна не морочити голову над вічним питанням «А що сьогодні на вечерю?».
6. Первинна оцінка симптомів
ChatGPT не замінить лікаря і він сам про це чесно попереджає. Але якщо показати йому родимку, висипання або іншу підозрілу ділянку шкіри, нейромережа може помітити тривожні ознаки та порекомендувати звернутися до фахівця. Саме так все і сталося у 24-річної Трініті Девенпорт: вона жартома попросила ChatGPT погадати на руці, а той звернув увагу на родимку і порадив її перевірити. У результаті лікар діагностував рідкісний тип меланоми. Звичайно, це в жодному разі не інструмент самодіагностики, але без сумнівів він може стати першим дзвіночком і приводом не відкладати візит до лікаря.
7. Пояснення мемів та жартів
Якщо інтернет-жартівники перемудрили або ви просто поза контекстом — ChatGPT розкладе все по поличках: хто зображений у кадрі, звідки він, чому це смішно (чи має бути), до чого посилає жарт і який контекст за ним стоїть. Працює особливо добре з англомовними мемами, де часто зустрічаються культурні посилання, гра слів чи візуальні натяки. Часто пояснення виявляється навіть смішніше самого оригіналу, особливо коли нейромережа сприймає все занадто серйозно.
8. Переклад та підказки у подорожах
Звичний Google Translate показує переклад, але не завжди допомагає зрозуміти суть. ChatGPT вміє більше: зчитує текст з вивіски, меню або таблички й відразу пояснює, що саме мається на увазі, як це працює і на що варто звернути увагу. Нейромережа підкаже, що за страва перед вами, чи потрібно бронювати столик, чи чому вхід до музею виявився закритим. Це вже не просто переклад, а розбір ситуації із контекстом та корисними деталями.
9. Поради щодо проходження ігор
ChatGPT допоможе навіть в іграх. Зробіть скриншот місця, де застрягли, і він пояснить, що робити далі. Підкаже, як вирішити головоломку, куди йти, порадить тактику проти конкретного боса чи підбере білд під ваш стиль гри. Зручно, що можна попросити відповісти натяком без спойлерів. Виходить як гайд, але точково, під конкретний запит витрати часу на пошуки в інтернеті.
10. Визначення страви та її рецепт
Бажаєте повторити апетитну страву з ресторану чи натрапили на кулінарне відео без назви? ChatGPT легко дізнається, що це за їжа, з чого вона складається і як її приготувати. Достатньо одного кадру, щоб отримати докладний рецепт чи хоча б базову інструкцію. Зручно, коли хочеться повторити побачене, а загуглити за описом не виходить.
11. Розшифровка та обробка чеків
ChatGPT здатний не лише прочитати чек по фото, але й розібратися у його змісті: виділити позиції, ціни, розрахувати проміжний підсумок і навіть поділити суму між учасниками спільної вечері. Можна завантажити відразу кілька чеків — він акуратно їх підсумує та покаже, хто скільки винен. Якщо потрібно повернути товар, допоможе знайти артикул, дату покупки та уточнити, де це вказано. А якщо чек іноземною мовою – переведе та пояснить, що саме ви купили.
12. Порівняння з етикеток
Важко вибрати між двома схожими товарами? Тоді просто зробіть фото упаковок, і ChatGPT порівняє склад, калорійність, наявність добавок і навіть порахує ціну за грам або мілілітр, якщо фасування різне. Неоціненно, коли шрифт надто дрібний, формулювання заплутані, а хочеться просто зрозуміти, який варіант кращий. Нейромережа швидко видає суть без маркетингових прикрас і виявляє різницю, яку не видно з першого погляду.
13. Пояснення графіків, діаграм та схем
Якщо не хочеться вдивлятися у складну візуалізацію з підписами та легендами, просто надішліть її ChatGPT. Він сам розбереться, що зображено, виділить головне, пояснить сенс і допоможе зрозуміти, до яких висновків веде ця схема. Можна поставити уточнюючі питання, попросити спростити формулювання або перевести дані в текст для конспекту або звіту. Корисно для чогось складного, або коли діаграма вирвана з контексту і незрозуміло, що вона взагалі показує.
14. Інтерпретація вуличних знаків
Десь написано No parking, трохи нижче – 1 hour zone, збоку – стрілка, внизу – щось про шкільні дні. І все це на одному стовпі. ChatGPT допоможе розібратися: достатньо зробити фото, і він пояснить, що означає кожен знак, як вони пов’язані між собою і що можна чи не можна робити. Підходить не тільки для паркувань, а й для складних покажчиків, тимчасових обмежень, дорожніх табличок та інших урбаністичних ребусів, які спокійно перекладає нейромережа на людську.
15. Діагностика помилок за кодом
Завантажте скріншот помилки й ChatGPT розшифрує її та пояснить зрозумілою мовою, що пішло не так і як це виправити. Дуже зручно, якщо повідомлення вийшло іншою мовою, обрізане або виглядає як безглуздий набір символів. Завжди можна уточнити деталі та запитати про альтернативні рішення. Працює як особистий сисадмін — без очікування на лінії техпідтримки та порад на кшталт «Перезавантажувати пробували?».
16. Допомога з комп’ютером
Не можете знайти потрібну кнопку в налаштуваннях? Чи не розумієте, як активувати функцію інструкції? Зробіть скріншот або фото на смартфон — ChatGPT підкаже, куди натиснути, що ввімкнути та як це має виглядати. Допомагає навіть у складних інтерфейсах: чат-бот може пояснити, як оновити драйвер, вимкнути автозапуск чи активувати потрібний режим. Немає потреби переказувати, що бачите на екрані: просто показуєте й одразу отримуєте відповідь.
17. Виявлення несправностей в електроніці
Якщо техніка перестала працювати, можна просто сфотографувати плату і ChatGPT спробує допомогти. Він здатний визначити, де перегорів елемент, помітити здутий конденсатор, обрив доріжки чи дива в пайці. Нейромережа може підказати модель плати, знайти схему та вказати на типове пошкодження. Звичайно, це не заміна мультиметра, але як швидка перевірка на очевидні дефекти працює несподівано точно.
Більше цікавого: