Что персональный ИИ-агент на вашем телефоне на самом деле делает, изнутри

Персональный ИИ-агент на телефоне следит за почтой, сообщениями, досками вакансий и календарём, сопоставляет по смыслу и звонит вам, только когда это важно. Как это работает.

Персональный ИИ-агент, который сегодня реально работает на телефоне, не бронирует вам рейсы. Он следит за тем, что и так уже доходит до вашего телефона (почтовый ящик, доска вакансий, календарь, шторка уведомлений), решает, совпадает ли каждая новая запись с тем, что вы попросили своими словами, а затем выбирает, насколько громко вам сообщить: телефонный звонок, будильник или ничего, пока вы сами не посмотрите. Это меньше, чем в демонстрациях. Это же и тот вид агента, который строим мы.

На iPhone такой агент может следить за Gmail, новыми вакансиями Upwork и Google Calendar, включая звонки, но не может читать уведомления других приложений в фоне. iOS этого не разрешает; Android — разрешает. Там, где iPhone отличается, я говорю об этом отдельно.

Что такое персональный ИИ-агент?

Большинство страниц, которые ранжируются по этой фразе, описывают чат-ассистента с «руками»: вы просите найти отель, и он открывает браузер и бронирует его. Другой вид работает в обратную сторону. Вы один раз говорите, что для вас важно, и с этого момента он напоминает о себе, только когда что-то совпало.

OLL.E (произносится «Олли») — это тот, которого построили мы, так что здесь он служит примером, но принцип общий. Вы пишете фразу, выбираете, насколько громко, и при желании добавляете действие. Фраза может звучать как «Позвони мне, когда лид напишет про цену или демо», и после сохранения мы называем это отслеживанием. Срочные отслеживания получают настоящий телефонный звонок или будильник. Всё остальное уходит в Шорт-лист — беззвучный список, который вы читаете, когда удобно. Действия — это то, что происходит вслед за отслеживанием: отправить утверждённый вами ответ или короткий, подходящий под сообщение, переслать письмо партнёру, поставить метку, пересказать переписку, подготовить отклик на Upwork, создать событие в календаре. Они выстраиваются в цепочку, так что одно совпадение может пересказать, переслать, а затем поставить слот в вашем календаре.

Большинство демонстраций «ИИ-агента» — про то, как он что-то делает за вас. На телефоне, как мне кажется, полезная версия — про то, как он решает, что имеет право вас прерывать. Делать — это лёгкая часть. Решить, заслуживает ли именно это сообщение, из всего, что сегодня попало на ваш телефон, звука, — сложнее.

Что персональный ИИ-агент реально умеет на телефоне сегодня?

Четыре источника. Уведомления любого установленного приложения — WhatsApp, Messenger, SMS, Slack, Discord, Telegram, Fiverr, всё, что выводится в шторку. Gmail. Новые вакансии на Upwork. Google Calendar: новые события, изменения, отмены и напоминание за заданное время до события. Это полный список, и я предпочитаю, чтобы он был у вас, а не чтобы вы гадали.

Настройка — это короткий диалог за кнопкой Monitor Now: фраза, какой аккаунт или приложение, насколько громко и действия, выбираемые из ряда чипов.

Push-уведомление — это одна строка в списке, который вы научились пролистывать, рядом с промо доставки еды. Телефонный звонок захватывает весь экран и достаёт вас, даже если телефон лежит экраном вниз через всю комнату, поэтому агент, который умеет звонить, должен делать это редко, оставляя остальное тихому Шорт-листу.

Как он решает, что важно?

По смыслу, а не по строкам, и в этом честное отличие от запа Zapier или апплета IFTTT. Эти инструменты сопоставляют правила: если тема содержит «цена», сделать X. Правило дешёвое, и промахивается оно в обе стороны. «Сколько это будет стоить для команды из шести человек?» не содержит слова «цена» и пропускается. Рассылка под заголовком «Наши новые цены» проходит. Подробнее об этом — в Zapier против IFTTT для оповещений.

Сопоставление по смыслу работает как коллега, которого вы проинструктировали. Оно читает запись на фоне фразы и решает: этот отправитель — лид в том смысле, в каком это понимает человек, или поставщик, который гонится за оплатой счёта? Вопрос про то, сколько мы берём, даже если само слово ни разу не встречается? Это суждение, и иногда оно ошибается. Мы не публикуем цифру точности, и я бы не доверял тем, кто публикует.

Уровень оповещения — это то, как вы назначаете цену ошибки. Начните новое отслеживание с Шорт-листа, где ложное совпадение ничего не стоит, и как только оно какое-то время будет правильным, настройте ту же фразу уже на звонок. Первые фразы обычно получаются слишком широкими. Обычно помогает добавить «не рассылки» или «только от новых отправителей».

Вот как срабатывает одно отслеживание, от начала до конца. Это «Позвони мне, когда лид напишет про цену или демо», с телефонным звонком как оповещением и двумя действиями в цепочке: зарезервировать слот в календаре, затем подготовить ответ, который его предложит.

  1. 14:12. Приходит письмо с адреса, которому вы никогда не писали. Тема: «Короткий вопрос». Текст: «Увидели ваш сайт, могли бы провести нам экскурсию на следующей неделе и сказать примерно, сколько это будет стоить для шести человек?» Ни «цены». Ни «демо».
  2. OLL.E читает его на фоне отслеживания. Новый отправитель, спрашивает цену, просит показать продукт: совпадают обе части.
  3. Уровень оповещения — телефонный звонок, поэтому телефон звонит. На Android поверх любого открытого приложения разворачивается оверлей и показывает происходящее в реальном времени: совпадение найдено, письмо, выполняемое действие, результат.
  4. Первое действие создаёт событие в вашем Google Calendar на следующей неделе, чтобы зарезервировать слот. Второе готовит в переписке черновик ответа, который его предлагает.
  5. Вы берёте трубку, открываете переписку, читаете черновик, меняете одну фразу и отправляете. Этот запуск также записывается во вкладке Feeds.
  6. На iPhone телефон звонит точно так же. Отличается только оверлей: iOS не разрешает приложению рисовать поверх другого приложения, поэтому вместо него приходит уведомление, и нажатие на него открывает происходящее.

Почему на iPhone это работает иначе?

Из-за одного правила операционной системы. У Android есть разрешение на доступ к уведомлениям (откройте «Настройки» и найдите «доступ к уведомлениям»). Дайте его один раз — и приложение получает уведомления, которые публикует телефон, в фоновом режиме. Так работает отслеживание для WhatsApp или Fiverr: агент читает то, что эти приложения сами решили показать на экране блокировки, тот же текст, что прочитали бы вы сами. У iOS такого аналога нет, и приложение может читать только собственные уведомления и больше ничего. Отслеживания Gmail, Upwork и Calendar по-прежнему работают полностью на iPhone, потому что они никогда не проходят через шторку уведомлений. OLL.E подключается к Gmail и Calendar через ваш вход Google, а отслеживания Upwork читают открытые объявления о вакансиях.

Для остального есть OLL.E PinG — маленький брелок в духе AirTag, который сопрягается с телефоном, передаёт поток уведомлений по Bluetooth и воспроизводит сигналы. На iPhone он нужен для отслеживания сообщений и уведомлений, или если вы хотите настоящий будильник и для остальных видов. Продаётся отдельно.

Ещё одно отличие. Автоматический ответ на сообщение в другом приложении — только на Android; на iPhone ответ приходит черновиком, который вы подтверждаете касанием.

Что он делает с моими данными?

Он читает только то, что нужно отслеживанию. Отслеживание Gmail читает именно этот аккаунт Gmail и не видит ваш WhatsApp. Отслеживание уведомлений видит текст уведомления — ту часть, которую приложение уже вывело на экран блокировки, а не базу данных самого приложения. Нет отслеживания по источнику — ничего из него не читается.

Он не хранит содержимое сообщений или писем, и ничего из полученного не обучает ИИ-модели — ни наши, ни чужие. Всё шифруется при передаче и при хранении.

Чего он пока не умеет?

Он не подключается к HubSpot, Notion, GitHub, финансовым счетам, ценам на авиабилеты, сайтам или MCP-серверам. Всё это в списке. Ничего из этого ещё не работает, и я не называю дату.

Он также не бродит по интернету сам по себе. Единственный момент, когда он касается открытого веба, — это шаг внутри действия, которое вы прикрепили, например отслеживание BTC, которое проверяет настроение в X перед тем, как прислать сводку. Он реагирует на то, что приходит, а не ищет сам.

И иногда он будет ошибаться в совпадениях, чаще — пока отслеживание новое.

Если вы хотите попробовать агента, который решает, когда вас прерывать, OLL.E — наш вариант. Вы пишете отслеживание так, как сказали бы вслух, и он следит за вашими уведомлениями, Gmail, новыми вакансиями Upwork и Google Calendar, звонит или будит вас по срочным совпадениям, хранит остальное в Шорт-листе и выполняет действия, которые вы прикрепили. Четыре отслеживания можно запустить бесплатно, без карты. Pro стоит 19,99 $ в месяц, с 7-дневным пробным периодом. На iPhone для слежения за сообщениями других приложений нужен брелок PinG, отдельная покупка.

Вопросы, которые задают

В чём разница между персональным ИИ-агентом и чат-ботом?

Чат-бот ждёт ваш вопрос и отвечает в том же окне. Персональный ИИ-агент на телефоне принимает одну инструкцию, а затем следит за вашей почтой, сообщениями, досками вакансий или календарём и прерывает вас только тогда, когда что-то подходит. Вы разговариваете с ним один раз, при настройке.

Может ли персональный ИИ-агент читать мои сообщения WhatsApp на iPhone?

Сам по себе — нет, потому что iOS не разрешает ни одному приложению читать уведомления других приложений в фоне. Отслеживания Gmail, Upwork и Google Calendar работают на iPhone полностью. Для WhatsApp, Slack или SMS OLL.E нужен PinG — Bluetooth-брелок, который передаёт поток уведомлений и воспроизводит сигналы.

Нужно ли персональному ИИ-агенту выходить в интернет?

Нет. Полезная версия на телефоне реагирует на то, что приходит, а не занимается поиском. OLL.E выходит в веб только как часть действия, которое вы прикрепили к отслеживанию, например проверка настроения в X перед тем, как пересказать движение цены.

Это то же самое, что Zapier или IFTTT?

Нет. Zapier и IFTTT следуют точным правилам, например содержит ли тема письма слово, поэтому они пропускают клиента, который спрашивает про стоимость, не написав «цена», и пропускают к вам рассылку, где это слово есть. Агент судит по смыслу сообщения и может позвонить вам вместо ещё одного уведомления. Суждения бывают ошибочными, поэтому вы сами выбираете, насколько громким будет каждое отслеживание.

Отслеживания из этой статьи

Читать дальше

Choose your colour

Your PinG is reserved in the colour you pick here.