Что такое плагины ChatGPT? Наступила следующая фаза разговорного ИИ

ChatGPT — одно из самых быстрорастущих приложений всех времен, которое побудило ряд технологических компаний переосмыслить свои бизнес-модели. Однако чат-бот OpenAI обычно извлекает информацию со своих собственных внутренних серверов — до сих пор.

С плагины (открывается в новом окне), третьи стороны, такие как Instacart или Kayak, могут подключаться к ChatGPT с надстройками, которые предоставляют информацию от этих компаний. Это похоже на версию магазина приложений ChatGPT, навык Amazon Alexa или расширение для браузера Chrome.

Впервые анонсированные в марте, плагины ChatGPT будут доступны всем, у кого есть учетная запись ChatGPT Plus (20 долларов в месяц) к 19 мая.

OpenAI объявляет, что пользователи ChatGPT Plus теперь могут включать плагины в настройках. (Кредит: OpenAI Discord)

«Плагины позволяют компаниям легко интегрировать бизнес-контекст в ряд возможных действий, которые может выполнять ChatGPT», — говорит Даниэль Галати, разработчик программного обеспечения и владелец BeABetterDev(Открывается в новом окне). «Типы вариантов использования, которые открывает эта функция, практически безграничны».

Ранее доступ к плагину был ограничен лист ожидания(откроется в новом окне). Выпуск его для (платных) масс может определить будущее чат-ботов и интернет-поиска, хотя они могут стать первым большим провалом OpenAI. (Как часто вы используете навыки Amazon Alexa?)

Что такое плагины ChatGPT и как они работают?

Любая корпорация, частное лицо (с инженерными навыками) или сама OpenAI может разработать плагин и сделать его доступным для пользователей ChatGPT.

В настоящее время OpenAI предлагает два плагина. Первый предоставляет ChatGPT доступ в Интернет, необходимый для разговоров о последних событиях. Основные данные обучения ИИ доступны только до сентября 2021 года. Любой, кто использует бесплатную общедоступную версию ChatGPT, столкнется с этим ограничением, как это произошло с PCMag при сравнении ChatGPT, Google Bard и Microsoft Bing AI.

С помощью подключаемого модуля для просмотра веб-страниц пользователи могут своевременно задавать вопросы, например: «Как «Селтикс» играли прошлой ночью?», — говорит Матиас Келлер, главный научный сотрудник и старший вице-президент по технологиям в Kayak. «Затем он переходит на реальную веб-страницу, очищает данные и извлекает результат».

Второй плагин OpenAI, Code Interpreter, помогает пользователям выполнять сложные вычисления на языке программирования Python. «Доступ к очень энергичному младшему программисту, работающему со скоростью кончиков пальцев, может сделать совершенно новые рабочие процессы легкими и эффективными, а также открыть преимущества программирования для новой аудитории», — OpenAI. говорит (откроется в новом окне).

Интерпретатор кода с текстовой сводкой (сзади) и всплывающим окном, показывающим расчет. (Кредит: OpenAI)

Сторонние плагины, такие как тот, который создала команда Келлера, работают по-другому. Они подключают ChatGPT к внешней компании, чтобы помочь пользователям планировать поездки, в случае с Kayak или Expedia, или покупать продукты с помощью Instacart.

В вирусном твите ниже пользователь ChatGPT включил плагин Instacart и попросил его разработать план питания. Он указал бюджет, завтраки, которые можно быстро приготовить, и предпочитаемую кухню на ужин (пакистанскую, китайскую или итальянскую). Затем ChatGPT создал список рецептов и предоставил ссылку, чтобы добавить все продукты для них в свою корзину Instacart. Для существующих пользователей Instacart плагин автоматически выбирает самый последний продуктовый магазин (или самый популярный для новых пользователей).

Твитнуть(откроется в новом окне)

Плагины Kayak или Expedia лучше всего использовать для генерации идей: «Допустим, вы хотите поехать в Европу этим летом, но точно не знаете, когда хотите поехать. Или, может быть, вы хотите найти самое дешевое место между Мадридом и Барселоной. У Kayak есть вся эта информация, но он выводит ее на поверхность», — говорит Келлер.

Слишком много власти? Проблема с плагинами

Как и все, что связано с ChatGPT, плагины вызывают споры. Во-первых, они направляют еще больше власти, денег и влияния в руки OpenAI, побуждая людей взаимодействовать с ChatGPT, а не с отдельными сайтами и предприятиями. Это проблема, которую PCMag выделила в творческой индустрии — чат-боты узурпируют веб-трафик и, следовательно, доход из его источников — но для предприятий и организаций всех типов.

В примере с каяком являются все еще иногда кто-то захочет использовать основной веб-сайт вместо общения с ChatGPT. «Если вы знаете, что собираетесь в деловую поездку в Нью-Йорк на следующей неделе, вы, вероятно, просто захотите зайти на веб-сайт Kayak и забронировать рейс и отель», — говорит Келлер. Он отмечает, что ChatGPT показывает лишь небольшую часть результатов, которые кто-то увидит на Kayak.

Твитнуть(откроется в новом окне)

В долгосрочной перспективе предприятия могут отказаться от плагинов ChatGPT по мере разработки аналогичных сервисов. «Я думаю, что в подходе с использованием плагинов есть несколько серьезных недостатков, — говорит Крис Уоттс, основатель и генеральный директор CoFounder Inc. пользователя вне контекста его собственного приложения».

Он прав. Instacart создает своего собственного ИИ-помощника «Спросите Instacart», который будет работать в приложении и будет запущен в конце этого года. Expedia, предлагающая плагин для ChatGPT, делает то же самое. Оба используют базовую технологию ChatGPT, GPT-4, для выполнения задач на серверной части, сохраняя при этом пользователей на своих бизнес-сайтах.

«Первым был плагин Expedia, доступный на веб-сайте ChatGPT, где пользователь может начать разговор в ChatGPT, чтобы начать планирование поездки», — сообщает Expedia PCMag. «Второй интересный продукт делает все наоборот, добавляя ChatGPT в наше приложение Expedia для iOS».

Но для небольших компаний плагины могут принести ИИ компаниям и службам, у которых нет ресурсов для разработки собственных инструментов. «Внешние компании могут использовать эту технологию, чтобы связать свой бизнес и пользователей с минимальными собственными усилиями», — говорит Галати из BeABetterDev. «Это смена парадигмы, не похожая ни на одну другую».

Ограничения плагинов ChatGPT

Там являются некоторые вещи, которые не могут делать плагины, например, обработка платежной информации или выполнение заказов. ChatGPT может предоставить оптимальный список продуктов или маршрут поездки в Барселону с ограниченным бюджетом, но людям все равно нужно завершить процесс на соответствующих веб-сайтах этих компаний. Говоря о веб-сайтах, у ChatGPT нет мобильного приложения, поэтому этот опыт доступен только для настольных компьютеров.

«В настоящее время ChatGPT все еще подключается к Kayak, — говорит Келлер. «Сейчас внутри ChatGPT нет коммерции, нет понятия оплаты, адресов или чего-то подобного».

Это преимущество Instacart и Expedia, разрабатывающих чат-ботов на своих сайтах, даже если эти чат-боты работают на основе технологии OpenAI. Это упрощает работу пользователей, которые получают на месте те же возможности, что и через ChatGPT, с дополнительным преимуществом, заключающимся в возможности совершать транзакции, такие как бронирование поездки или заказ продуктов.

Еще одно ограничение в ChatGPT: пользователи могут устанавливать столько плагинов, сколько захотят, но могут использовать только три одновременно. И они могут включить только один плагин в категории, например Kayak. или Expedia для планирования поездок, говорит Келлер.

Какие плагины ChatGPT доступны сегодня?

Твитнуть(откроется в новом окне)

В дополнение к двум плагинам OpenAI (просмотр веб-страниц, интерпретатор кода), компания говорит более 70 сторонних плагинов (открывается в новом окне)были созданы, первые из которых перечислены ниже. Они охватывают целый ряд отраслей и деловых предприятий, включая покупки, недвижимость, акции, путешествия и продукты питания.

• Экспедия

• фискальное примечание

• Инстакарт

• каяк

• Кларна

• Майло

• Открытый стол

• Shopify

• Слабый

• Говорить

• Вольфрам

• Запир

Другие больше ориентированы на производительность для работы. Два — AskYourPDF и ChatWithPDF — запрашивают у пользователя URL-адрес PDF-документа, который ChatGPT будет собирать для получения информации, Mashable отчеты(откроется в новом окне). Это было бы полезно для особенно длинных документов, таких как контракты (хотя убедитесь, что вы трижды проверяете вывод). GitHub также поддерживает список(откроется в новом окне) плагинов, наиболее полезных для кодирования.

Как создать плагин ChatGPT?

OpenAI спроектировал свою инфраструктуру таким образом, что любой, у кого есть необходимые навыки, может создать плагин. следуя этим указаниям(Откроется в новом окне). И люди, конечно, пробуют это. На канале OpenAI Discord есть целый раздел под названием «Витрина плагинов», где люди могут демонстрировать свои новые творения. Один из них, называемый TextbookGPT, извлекает академические диаграммы, чтобы помочь визуализировать вопросы, которые могут возникнуть у студентов.

Пример плагина TextbookGPT. (Источник: OpenAI Discord/пользователь @lessand.ro)

Другой, под названием Shifu, подключает ChatGPT к устройствам IoT. «Этот плагин позволяет ChatGPT не только извлекать данные с устройств, но и управлять ими», — говорит его создатель @Yongli. «Например, подключив IP-камеру через плагин, пользователи могут отображать изображения в реальном времени и управлять камерой в чате, открывая новые возможности для взаимодействия ИИ с человеком».

Рекомендовано нашими редакторами

Демонстрация плагина Shifu на OpenAI Discord. (Источник: пользователь-создатель OpenAI Discord/Shifu @Yongli)

Для создания плагина Kayak команда Келлера предоставила OpenAI две основные части информации: как получить доступ к существующему API Kayak и документацию, объясняющую информацию в API.

«Мы уже используем стандартную отраслевую документацию, которая называется OpenAPI и обычно представляет собой очень технический документ, — говорит он. «Что мы делаем для OpenAI, так это обогащаем его аннотациями на естественном языке, похожими на человеческие. [For example]если у нас есть имя поля, например, аэропорт отправления, мы добавляем одно или два предложения, чтобы объяснить, откуда человек может захотеть начать свой полет».

Эти детали делают данные в API Kayak более диалоговыми, поэтому ChatGPT может лучше распознавать, когда их нужно отображать в чате с человеком.

Этот процесс относительно прост, говорит Келлер, и устанавливает стандарт того, как разработчики ожидают, что плагины для других инструментов искусственного интеллекта, таких как Google Bard, будут работать.

«Что особенного в этом, так это то, что для таких разработчиков, как мы, это довольно просто», — говорит он. «Допустим, вы хотели развить [skills] для Алексы. Вы должны сделать целую интеграцию, где вы загружаете SDK с Amazon, блокируете свои данные в нужных местах, а затем все начинает течь. [But OpenAI’s] способ интеграции заключается в том, что вы в основном показываете им документацию, и все».

Доступны ли плагины ChatGPT в бесплатной версии?

Прямо сейчас только платные пользователи могут исследовать плагины. Однако это может измениться в зависимости от OpenAI. трехэтапный подход к развертыванию функций(откроется в новом окне). Ранее плагины находились на стадии альфа-тестирования, что дает «небольшой группе пользователей… доступ к новой функции для тестирования и получения отзывов».

По словам OpenAI, к 19 мая функция будет выпущена для всех пользователей ChatGPT Plus на этапе бета-тестирования, предоставляя большую группу для тестирования и обратной связи. После того, как OpenAI оценит, «готова ли функция для более широкой аудитории», она может сделать ее доступной для всех пользователей ChatGPT.

Есть ли у Google Bard плагины?

Предстоящие расширения Google Bard (Источник: Майкл Кан)

Google Bard пока не предлагает плагины, но на конференции разработчиков ввода-вывода на прошлой неделе Google заявил, что планирует добавить их в ближайшем будущем. Как и OpenAI, Google будет разрабатывать собственные собственные плагины, а также предлагать другие сторонние сервисы, такие как Walmart, Spotify и Uber Eats.

«Забегая вперед, мы представим возможности приложений и сервисов Google, которые вы, возможно, уже используете — Документы, Диск, Gmail, Карты и другие — прямо в интерфейсе Bard», — Сисси Сяо, вице-президент и генеральный директор Google Assistant и Bard, пишет в сообщение в блоге (откроется в новом окне). «Bard также сможет подключаться ко всем видам услуг в Интернете с расширениями от внешних партнеров, чтобы вы могли делать то, что раньше было невозможно».

Google перечисляет подобных партнеров для своих плагинов, таких как ChatGPT: Kayak, OpenTable, ZipRecruiter, Instacart, Wolfram и Khan Academy. Келлер говорит, что Kayak не получил от Google информации о том, когда они смогут приступить к созданию плагина, поскольку продукт все еще находится в разработке.

Из того, что сказал Google, кажется, что он начинает с более визуальных плагинов на основе изображений. Предстоящая интеграция с продуктами искусственного интеллекта Adobe позволит генерировать изображения в Bard, подобно сервисам DALL-E и Midjourney.

«Допустим, я планирую вечеринку по случаю дня рождения моего 7-летнего ребенка, который любит единорогов, и я хочу разослать забавное изображение с приглашениями», — говорит Google. «Все, что мне нужно сделать, это попросить Барда: «Создайте изображение единорога и торта на детской вечеринке», и он создаст изображение за считанные секунды, соблюдая при этом высокие стандарты качества и этической ответственности Adobe».