Віднедавна ChatGPT не лише розпізнає зображення, а й використовує їхні деталі для міркувань — як частину завдання. Завдяки моделям o3 та o4-mini, які «мислять» за допомогою картинок, завантаження фото стало ще одним повноцінним способом взаємодії з нейромережею.
Зрозуміти, що саме перед вами, перекласти з урахуванням контексту, розшифрувати напис, пояснити суть — усе це тепер виконується швидко і в одному вікні. І працює, на диво, дуже добре. Ось кілька ситуацій, коли ця функція не просто корисна, а неочікувано зручна.
1. Розпізнавання об’єктів
Найочевидніший сценарій — показати, що у вас в кадрі. ChatGPT легко впізнає дивного птаха на балконі, неїстівний гриб на дачі, дерево під вікном, модель старого фотоапарата з барахолки чи незрозумілий логотип на одязі. Іноді ще й додасть цікаві факти або посилання — без зайвих запитів і здогадок.
2. Визначення фільму за кадром
Достатньо зробити фото або скріншот — і чат-бот вгадає, з якого це фільму. Розпізнає як культові сцени, так і менш відомі. Нейромережа підкаже назву, опише персонажів і навіть відтворить діалог, якщо впізнає момент. Якщо фільм рідкісний, ChatGPT може попросити додаткові деталі: рік випуску, країну, жанр чи контекст сцени. Але й тоді часто вдається розплутати загадку — наче спілкуєшся з ерудованим кіноманом.
3. Поради з дизайну
Завантажив фото спальні — і отримав ідеї, як покращити освітлення, переставити меблі чи підібрати кольори. Показав двір — ChatGPT запропонував, де облаштувати зону барбекю, поставити альтанку чи як викласти плитку. Без креслень і замірів — просто з кадру. Повноцінного проєкту не буде, але для старту і натхнення — цілком достатньо.
4. Інформація про продукт за етикеткою
Фото упаковки — і ChatGPT розповідає, що це за продукт, звідки він, склад і з чим його їдять. У випадку з вином — підкаже сорт, регіон, смаковий профіль і навіть порекомендує страву. Якщо соус із дивною назвою — пояснить, гострий він чи солодкий, чи пасує до курятини. Іноді може здивувати: попередити про шкідливі добавки або запропонувати кращу альтернативу.
5. Підбір рецептів за фото
Сфотографував вміст холодильника — і отримаєш конкретні рецепти. Чат-бот розпізнає продукти, оцінює поєднання і пропонує варіанти — від легких перекусів до повноцінних страв. Якщо чогось бракує — підкаже заміну або адаптує рецепт під умови. Нарешті можна не ламати голову над «що на вечерю?».
6. Первинна оцінка симптомів
ChatGPT не замінить лікаря — і чесно про це попереджає. Але якщо показати родимку, висип чи іншу підозрілу ділянку шкіри, нейромережа може звернути увагу на тривожні ознаки й порадити звернутися до спеціаліста. Так і сталося з 24-річною Трініті Девенпорт: пожартувала, попросивши «погадати на руці», а ChatGPT звернув увагу на родимку. Лікар згодом діагностував рідкісний тип меланоми.
Це не інструмент для самодіагностики, але у разі сумнівів — хороший привід не зволікати з візитом до лікаря.
7. Пояснення мемів і жартів
Коли інтернет-меми здаються занадто складними або ви «не в темі», ChatGPT усе пояснить: хто на фото, звідки це, чому це смішно (або мало б бути), на що натякає жарт і який контекст. Особливо добре працює з англомовними мемами, де повно культурних посилань, гри слів або візуальних натяків. Іноді пояснення буває навіть смішніше за сам мем — особливо коли нейромережа сприймає все надто серйозно.
8. Переклад і підказки в подорожах
Google Translate показує переклад, але не завжди пояснює суть. ChatGPT вміє більше: зчитує текст із вивіски, меню чи таблички і одразу пояснює, що саме мається на увазі, як це працює і на що звернути увагу. Підкаже, що це за страва, чи треба бронювати столик, або чому музей зачинено. Це вже не просто переклад — а розбір ситуації з корисними деталями.
9. Поради щодо проходження ігор
Скріншот із гри, де застрягли — і ChatGPT підкаже, що робити далі. Як вирішити головоломку, куди йти, якого боса як перемогти або який стиль гри підійде. Можна попросити дати лише натяк — без спойлерів. Як гайд, але точково і без довгих пошуків в інтернеті.
10. Визначення страви і рецепт
Хочете повторити апетитну страву з ресторану або знайшли кулінарне відео без назви? ChatGPT з одного кадру визначить, що це за їжа, з чого складається і як її приготувати. У результаті — або докладний рецепт, або хоча б базова інструкція. Дуже зручно, коли не знаєш, як сформулювати запит.
11. Розшифрування і обробка чеків
ChatGPT не просто читає чеки з фото, а ще й аналізує: виділяє позиції, ціни, підраховує проміжний підсумок, навіть ділить суму між друзями. Можна завантажити кілька чеків — він усе акуратно підсумує. Якщо потрібно повернути товар — допоможе знайти артикул, дату покупки і місце. Якщо чек іноземною мовою — перекладе і пояснить, що саме було куплено.
12. Порівняння за етикетками
Важко обрати між двома схожими товарами? Просто сфотографуйте упаковки — ChatGPT порівняє склад, калорійність, добавки, ціну за грам або мілілітр. Незамінно, коли шрифт дрібний, формулювання заплутані, а хочеться простого висновку. Нейромережа видає суть без маркетингових прикрас — і знаходить відмінності, які важко помітити з першого погляду.
13. Пояснення графіків, діаграм і схем
Не хочеться вдивлятися в складну візуалізацію з підписами та легендами? Просто надішліть її ChatGPT. Він сам розбере, що зображено, пояснить суть і допоможе зрозуміти висновки. Можна поставити уточнювальні запитання, попросити спростити мову або перетворити графік у текст — для конспекту чи звіту. Дуже зручно для складних тем або випадків, коли діаграма «відірвана» від контексту.
14. Тлумачення дорожніх знаків
Написано No parking, нижче — 1 hour zone, збоку — стрілка, а внизу — щось про шкільні дні. І все це на одному стовпі. ChatGPT розшифрує: достатньо зробити фото, і він пояснить, що означає кожен знак, як вони поєднуються і що в підсумку дозволено або заборонено. Це стосується не тільки парковок, а й інших складних вказівників, тимчасових обмежень, табличок тощо.
15. Діагностика помилок за кодом
Скріншот помилки — і ChatGPT пояснює, що пішло не так і як це виправити. Зручно, якщо повідомлення іноземною мовою, обрізане чи виглядає як набір символів. Можна поставити додаткові питання, запитати про альтернативи. Як особистий системний адміністратор — без очікування на лінії підтримки і фраз типу «А ви перезавантажували?».
16. Допомога з комп’ютером
Не можете знайти потрібну кнопку в налаштуваннях? Не розумієте інструкцію? Зробіть фото — і ChatGPT підкаже, куди натискати, що вмикати і як усе має виглядати. Працює навіть у складних інтерфейсах: допоможе оновити драйвер, вимкнути автозапуск або активувати потрібний режим. Не потрібно нічого описувати — просто показуєте екран.
17. Виявлення несправностей в електроніці
Якщо техніка перестала працювати, сфотографуйте плату — ChatGPT може допомогти. Виявить перегорілий елемент, здуті конденсатори, обрив доріжки або дефекти пайки. Може визначити модель плати, знайти схему, вказати типову поломку. Звісно, це не заміна мультиметру, але як швидка перевірка — працює дивовижно точно.