GPT-4o, последняя флагманская модель от OpenAI, вызвала неоднозначные отзывы пользователей. В то время как одни впечатлены его скоростью и мультимодальными возможностями, другие разочарованы тем фактом, что он не демонстрирует улучшений в интеллекте и рассуждении по сравнению с GPT-4. Но независимо от того, являетесь ли вы командой «потрясенной» или командой «нет», все равно трудно игнорировать тот факт, что мультимодальные возможности GPT-4o меняют правила игры.
Вот некоторые способы, которыми GPT-4o сможет помочь вам после того, как OpenAI выпустит новые возможности голоса и зрения.
Партнер по обучению/преподаватель
Благодаря способностям GPT-40 он может стать идеальным партнером в обучении или наставником. Вы можете использовать его для изучения языков или получить помощь в решении математических задач. Вы можете указывать на объекты, чтобы получить помощь в изучении языка, или поделиться с ними своими математическими вопросами. Он не будет просто раздавать вам ответы или делать за вас домашнее задание.
https://www.youtube.com/watch?v=_nSmkyDNulk
Он может создать серию вопросов, которые помогут вам понять концепцию и самостоятельно перейти к решению проблемы, как настоящий репетитор. Более того, благодаря своим расширенным возможностям, он способен «сочувственно» справиться с ситуацией. Таким образом, обучая вас, он может демонстрировать невероятное терпение и сочувствие, подталкивая вас в правильном направлении, не разочаровываясь. Для многих людей иногда бывает довольно сложно добиться этого в реальной жизни.
Дальнейшие приложения будут еще более интригующими, если вы сможете использовать GPT-4o на умных очках (взяв идею из проекта Google Project Astra), чтобы всегда иметь под рукой своего партнера по обучению.
Получите помощь с подготовкой к собеседованию
ChatGPT, работающий на базе GPT-4o, может стать идеальным партнером в подготовке к собеседованиям. Хотя вы уже могли моделировать двусторонний разговор с помощью ChatGPT, чтобы подготовиться к собеседованию, и это могло фантастически помочь в его технических аспектах, этот процесс был не таким естественным из-за таких факторов, как задержка и отсутствие мультимодальности в ядре ChatGPT.
Но благодаря расширенным возможностям рассуждения с помощью голоса и зрения он может сделать еще один шаг вперед, помогая вам. Во-первых, благодаря своей новой способности «видеть» вас, он может даже помочь вам с эстетической частью подготовки к собеседованию, например, с выбором одежды.
https://www.youtube.com/watch?v=wfAYBdaGVxs
Однако последствия гораздо более впечатляющие. Благодаря своим визуальным возможностям и способности интерпретировать человеческие эмоции он может даже дать вам обратную связь по языку вашего тела, как настоящий тренер.
Помощник по встречам
ChatGPT может присоединяться к вашим собраниям, прослушивать ваши звонки, а также расшифровывать, обобщать и даже представлять свое мнение — и все это в режиме реального времени, как настоящий помощник.
Вы можете спросить его, что обсуждалось во время звонка, как каждый человек придерживается определенной точки зрения, выявить противоречивые точки зрения, поработать над проблемами анализа данных, найти определенную информацию и многое другое.
Персональный языковой переводчик
GPT-4o может стать отличным помощником в языковом переводе. Он может переводить разговор в режиме реального времени без необходимости повторять его несколько раз. Таким образом, вы можете вести обычный разговор на разных языках, и каждый раз, когда говорящий заканчивает говорить, ChatGPT переводит его на второй язык.
Чем он отличается от использования Google Translate или любого другого инструмента перевода? Помимо того факта, что вам не нужно каждый раз включать перевод и это сохраняет естественность разговора, способность GPT-4o понимать интонацию слов означает, что при переводе теряется меньше.
Помощник по обеспечению доступности для слепых
ChatGPT-4o, благодаря своим возможностям зрения, может помочь людям с нарушениями зрения, рассматривая за вас окружающую среду и описывая ее вам.
https://www.youtube.com/watch?v=KwNUJ69RbwY
Хотя в нынешнем состоянии это кажется довольно амбициозным, представьте себе последствия, если бы вы могли использовать GPT-4o в умных очках, таких как очки Meta Rayban, где GPT-4o мог бы буквально быть глазами для человека с ослабленным зрением. Даже в нынешнем виде довольно удивительно, что люди могут направить камеру своего телефона на что-то, и она может предоставить все детали.
Если ChatGPT сможет интерпретировать язык жестов, в будущем он сможет даже помочь глухим людям.
Возможности мониторинга
ChatGPT-4o «потенциально» можно использовать для наблюдения за детьми, домашними животными, больными и пожилыми людьми или даже просто за входными дверями и т. д. Представьте, что вам нужно на мгновение отойти в сторону и вы хотите, чтобы кто-то следил за вашим ребенком или домашним животным и сразу предупредит вас, если они занимаются опасной деятельностью (которую вы можете определить).
Хотя пройдет некоторое время, прежде чем вы сможете доверять ИИ, чтобы он не совершал ошибок и каждый раз давал надежные результаты, это определенно интересный вариант использования в будущем.
Помощник по кодированию
Благодаря возможности ChatGPT получить доступ к вашему экрану с помощью совместного использования экрана, у вас может быть помощник по программированию, который будет сопровождать вас во всем. Хотя это будет полезно и для других приложений, благодаря расширенным возможностям кодирования GPT-4o лучшим приложением будет помощь в кодировании.
Анализ данных
GPT-4o имеет удивительные улучшения в скорости по сравнению с GPT-4 Turbo, и он также обеспечивает эту скорость при анализе данных. Он может обрабатывать электронные таблицы, анализировать данные и даже создавать статистические диаграммы, графики и диаграммы менее чем за 30 секунд.
Создание 3D-моделей
GPT-4o может даже создавать файлы STL для 3D-моделей из отдельных текстовых подсказок, ускоряя процесс визуализации и прототипирования. Итак, хотите ли вы ускорить свой рабочий процесс или у вас нет технических знаний, необходимых для решения этой задачи, ChatGPT может вам помочь!
Я использовал GPT-4o для создания STL-файла для 3D-модели на своем телефоне примерно за 20 секунд. Довольно примечательно то, что теперь можно создать с помощью искусственного интеллекта и простых подсказок. pic.twitter.com/2fbObrpPol
– Мин Чой (@minchoi) 14 мая 2024 г.
Создание единообразных персонажей
Некоторое время назад OpenAI представила в ChatGPT возможности генерации изображений DALL-E. Но с помощью GPT-4o вы можете создавать несколько изображений одного и того же символа, сохраняя при этом единообразие символов. Итак, теперь вы можете использовать ChatGPT для создания единообразных персонажей для ваших историй, и он может создавать их изображения в различных действиях.
Транскрипция рукописных заметок
Благодаря расширенным возможностям GPT-4o в распознавании изображений он теперь может лучше расшифровывать рукописные заметки. Вы можете использовать его для оцифровки школьных или студенческих конспектов. Он даже демонстрирует удивительные возможности транскрипции при обработке рукописных писем восемнадцатого века. Таким образом, хотя и будут ошибки, это еще и ускорит весь процесс в геометрической прогрессии!
GPT-4o действительно замечателен по 18-му почерку. Я дал ему следующее письмо и попросил его переписать. Пара очень мелких ошибок… потрясающе! pic.twitter.com/3JevZvd5p5
— Генеративная история (@HistoryGPT) 14 мая 2024 г.
Хотя GPT-4o не является огромным обновлением по сравнению с GPT-4 с точки зрения интеллекта и рассуждения, это ни в коем случае не является небольшим обновлением. Даже если вас больше напугал его антропоморфизм или сходство с искусственным интеллектом Скарлетт Йохансен в «Она», вы не можете отрицать, что тот факт, что он стал более умным, будет полезен на практике.
Однако есть еще один факт, который нельзя упускать из виду при рассмотрении практического применения GPT-4o — контекстное окно ChatGPT размером 128 КБ. Благодаря ограниченному контекстному окну ChatGPT может быть полезен только в таких сценариях, как помощник на собраниях или языковой переводчик. Вопрос о том, как долго после встречи/разговора закончится контекстное окно ChatGPT, является чрезвычайно актуальным. Также существует вопрос об ограничении использования GPT-4o.