Будь то Siri, Cortana или Google Assistant, ИИ-помощники уже давно присутствуют на смартфонах. А благодаря быстрому развитию технологий искусственного интеллекта во всех областях эти помощники со временем станут только лучше.
Первым примером этого является Gemini от Google, который заменил Google Assistant на смартфонах Android в качестве искусственного помощника по умолчанию. Если раньше Gemini был весьма ограничен в своих возможностях по сравнению с Google Assistant, Google недавно объявил о крупных обновлениях, которые сделают чат-бота невероятно мощным и более полезным.
Особенно это касается Gemini Nano, который был анонсирован на телефонах Pixel 8 и Samsung Galaxy S24 еще в январе. Вот как Google планирует обновить эту модель, чтобы она стала еще лучше.
Контекстная осведомленность Близнецов значительно улучшается
Как и другие чат-боты, Gemini обычно понимает контекст, в котором вы с ним взаимодействуете, хотя это не всегда так. Вот почему одно из наиболее важных изменений, которое произойдет с ним, — это значительное улучшение его возможностей контекстуальной осведомленности.
Gemini теперь может легко понять, что происходит на вашем экране, и даже понять, какое приложение вы используете в любой момент времени. По данным Google, пользователи смогут вызывать оверлей Gemini и использовать ИИ, одновременно используя другое приложение. Например, вы можете создавать изображения с помощью Gemini и напрямую перетаскивать их в Сообщения Google, Gmail или другое приложение.
Другой пример: когда вы смотрите видео на YouTube, вы можете использовать функцию Gemini «Спросить это видео», чтобы получить информацию из этого видео. Это похоже на функцию «Спросить этот PDF» в Gemini Advanced, которая может помочь вам быстро получить информацию из PDF-файла без необходимости его полного прочтения.
Наконец, есть динамические предложения, которые Gemini предложит, проверив ваш экран. Это может произойти даже без необходимости что-либо вводить, поскольку Gemini автоматически поймет контекст того, над чем вы работаете.
Например, если вы разговариваете в Сообщениях Google о том, чтобы пойти выпить кофе, Gemini может автоматически порекомендовать лучшие кофейни рядом с вами на Картах Google.
Вскоре пользователи смогут получить доступ к Gemini через накладную панель, которая будет присутствовать даже во время предоставления результатов, поэтому вам не придется каждый раз открывать ее в полноэкранном режиме.
Gemini Nano получит полные мультимодальные возможности
До сих пор Gemini полагалась на текстовый или голосовой ввод, чтобы понять запрос пользователя и дать соответствующие ответы. Теперь Google модернизирует свои возможности и называет его Gemini Nano с мультимодальностью. Это связано с тем, что обновленная модель также может использовать визуальные эффекты, устную речь и звуки, чтобы понять, чего хочет пользователь.
Это огромное, но очень долгожданное обновление, которое кардинально изменит возможности смартфонов с искусственным интеллектом. Вы сможете использовать свой смартфон Pixel для получения информации из вашего окружения через камеру и микрофон, а не просто полагаться на текст.
Круг для поиска был обновлен, чтобы помочь студентам
Еще в январе Google анонсировал новую функцию для некоторых смартфонов Android — Circle To Search, которая позволяет вам использовать простой жест для поиска информации, не выходя из используемого вами приложения. Это работает с множественным поиском, позволяя вам использовать как изображения, так и текст, чтобы задать Google вопрос о чем-либо на вашем экране.
С момента запуска Circle To Launch был дополнен такими функциями, как полноэкранный перевод, но на конференции разработчиков ввода-вывода Google анонсировала еще одно обновление. Теперь он может помочь ученикам с домашними заданиями, помогая им легко решать задачи по математике и физике.
Студентам просто нужно обвести кружком проблему, с которой им нужна помощь, и Gemini предложит им шаги, которые им необходимо выполнить, чтобы получить ответ.
Google также объявил, что Circle To Search вскоре сможет помогать решать сложные задачи, связанные с графиками, диаграммами, формулами и многим другим. Google также расширяет эту функцию на большее количество смартфонов Pixel и Samsung.
Talkback предложит более качественные описания
Talkback — это функция Android, призванная помочь людям с нарушениями зрения, объясняя, что отображается на экранах их смартфонов. Благодаря тому, что Gemini Nano приобретает мультимодальные возможности, Talkback также становится намного лучше описывать объекты и элементы.
Что самое впечатляющее в этом, так это то, что это работает, даже когда ваше устройство находится в автономном режиме. Обновленная модель Gemini Nano может предлагать описания, которые будут очень похожи на те, что предоставляет человек, что делает ее гораздо более полезной по сравнению с тем, как Talkback работает сейчас.
Gemini теперь может предупреждать вас о мошеннических звонках
Поскольку средства защиты от мошенничества с годами стали более надежными, мошеннические звонки также стали более изощренными. Таким образом, несмотря на эти меры защиты, многие люди по-прежнему не могут отличить мошеннические звонки от подлинных. Вот почему Google тестирует новую функцию, которая позволит Gemini Nano предоставлять оповещения в режиме реального времени для защиты от мошенничества.
Он сможет обнаруживать закономерности в разговорах, обычно присутствующие в мошеннических звонках, и немедленно предупреждать вас. Например, если вам позвонит кто-то, назвавшийся представителем банка, и попросит вас перевести средства или что-то в том же духе, вы получите предупреждение. А поскольку это защита на устройстве, ваша конфиденциальность не будет нарушена.
Gemini Nano был представлен в серии телефонов Pixel 8 и Samsung Galaxy S24 в начале этого года. Ожидается, что обновленная модель появится на телефонах Pixel позднее в этом году, а такие функции, как оповещения о мошеннических вызовах, появятся на всех устройствах Android.
Благодаря этим обновлениям Google делает Gemini более мощным и лучшим виртуальным помощником, который может помочь вам, когда вам это понадобится. Однако большинство этих функций будут ограничены флагманскими телефонами, по крайней мере, на данный момент, поэтому нам, возможно, придется подождать некоторое время, чтобы увидеть их на других устройствах.