Как работает ChatGPT?

ChatGPT – это можно сказать улучшенная версия предыдущей модели GPT 3, которая была натренирована на миллиардах слов и предложений по всему интернету. Когда он генерирует текст, он пытается предсказать каким должно быть следующее слово в данном конкретном предложении, опираясь на свою огромную выборку текстов. Конечным результатом становится имитация текста, написанного якобы человеком. ChatGPT еще иногда называют GPT 3.5, и основным различием является то, что OpenAI добавили обратную связь от людей в процесс обучения. Это называется Supervised Reinforcement Learning – обучение с учителем с подкреплением.

Почему это называется «обучение с учителем»? Потому что во время обучения модели, различные версии ответов на тот или иной запрос программой ранжируются человеком по качеству ответа: от наилучшей к худшей, и программе дается цифровое поощрение, когда она улучшает качество своего ответа. Модель дальше подвергается тонкой донастройке и регулированию, и процесс повторяется несколько раз.

Такой метод в итоге произвел языковую модель ИИ, которая в 100 раз меньше по размеру чем предыдущая модель GPT 3, но эффективность которой существенно выше. Для увеличения эффективности, разработчики модели создали архитектуру, состоящую из 175 млрд параметров (предыдущая модель состояла всего из 1,5 млрд параметров).

Как уже сказали, основное изменение по сравнению с предыдущей версией было то, что добавили обратную связь от человека. И в этом есть смысл, потому что очевидно, что люди знают, что нравится и что нужно другим людям, намного лучше чем компьютер, который пытается предугадать это вслепую.

Примеры использования

Давайте посмотрим на несколько интересных примеров использования ChatGPT.

1. Персональный фитнес-тренер и нутрициолог. Один пользователь попросил ChatGPT рассчитать его ежедневное количество потребления калорий, предоставив чату свой рост, возраст, вес и тот факт, что он не очень активный. ChatGPT рассчитал этот показатель (около 1800 калорий). Далее пользователь попросил какой дефицит калорий ему необходим, чтобы уменьшить свой вес на 8 килограмм за 4 месяца – ChatGPT рассчитал и этот объем. Далее ChatGPT создал план питания на неделю с указанием, что необходимо есть этому пользователю на завтрак, обед и ужин (включая сами рецепты, как их готовить и список ингредиентов), чтобы соответствовать тому плану, который обеспечит ему этот дефицит калорий для снижения веса.

высока вероятность того, что текст был написан искусственным интеллектом.

Интересен случай с одним университетским профессором. Он попросил ChatGPT написать эссе на заданную им тему, и после того как ChatGPT написал это эссе, он попросил его же и оценить это эссе, и ChatGPT предоставил полноценный анализ и оценку для написанного им же самим эссе.

Другой профессор провел тест: он взял эссе всех своих студентов и добавил к нему эссе, написанное ChatGPT. Дальше было проведено слепое тестирование (профессор не знал, какое из эссе написано компьютером). В результате эссе, написанное ИИ, набрало такое же количество баллов, как и 20 самых плохо написанных эссе в его классе. Получается, что уровень пока не такой высокий, но с учетом того, что ИИ развивается экспоненциально, посмотрим каков будет результат через 2 года. Вспомните, как развивались автоматические переводчики от Google Translate, например. В середине 2010-х годов за ними приходилось постоянно исправлять, и они выдавали зачастую полную ахинею в плане перевода. Сейчас уровень перевода на другие языки сопоставим с уровнем высококлассных переводчиков, и практически ничего не надо исправлять. Поэтому можно смело утверждать, что следующие версии ChatGPT и похожих языковых моделей могут быть похожи на разговор с экспертом в той или иной области. Пока же все еще есть моменты, которые требуют доработки.

3.Деловая переписка. Из одного предложения с основной идеей и кучей грамматических ошибок, ChatGPT может выдать полноценный email, написанный по всем правилам делового этикета. Представьте, как это может сократить время для сотрудников в течение рабочего дня.

4.Составление юридических документов. ChatGPT может составить за вас письма в налоговую, администрацию города, можно попросить его написать письмо, чтобы оспорить штраф за неправильную парковку. Недавно даже появилась компания, которая использует ChatGPT, чтобы создавать официальные письма в ведомства для оспаривания штрафов. Она называет себя «Первый в мире робот-

адвокат» www.donotpay.com

5.Исследовательская работа. Ученые в восторге – ChatGPT может

сформировать аргументативную статью на заданную вами тему. Этого не может сделать тот же Google или какой-то другой поисковик, которые просто предложат вам список ссылок по этой теме.

6.Знакомства. Многие люди стали использвать ChatGPT, чтобы поддерживать общение на сайтах и в приложениях для знакомства. Вы сообщаете боту основные параметры понравившегося вам пользователя (интересы, хобби, предпочтения и пр) и просите его составить список вопросов, сообщений и шуток, которые могут «зацепить» этого пользователя продолжить с вами общение и заинтересоваться вашей личностью.

7.Составление новостных статей. Один пользователь создал новостной сайт, похожий на сайт известной газеты New York Times, и новости для него он сгенерировал с помощью ChatGPT, предоставив ему только пару предложений для «затравки» и попросив бота написать статьи в формате и стиле New York Times. Стоит отметить, что вы даже можете указать какой настрой должен быть у статьи: оптимистичный, пессимистичный или нейтральный.

8.Программирование. Мы уже упоминали о том, что ChatGPT может как самостоятельно генерировать программный код на основе вашего запроса, так и проверять, редактировать и оптимизировать написанный вами программный код. Это может стать революцией и сделать работу многих тестировщиков и джуниор программистов просто ненужной.

Здесь примечателен один пример. Компьютерный инженер, который работал в Твиттере, написал ChatGPT запрос примерно следующего содержания:

«Я работаю на Илона Маска, но последнюю неделю, я особо ничего не делал по работе, поэтому напиши мне 10 пунктов, которые я мог бы сделать, если бы работал в качестве инженера в Твиттере, и которые были бы достаточно продуктивными и ценными. И если тебе не сложно, напиши, пожалуйста, компьютерный код, который бы соответствовал каждому из этих проектов».

И ChatGPT сделал это за несколько секунд, приложив к ответу код,

который работал (https://www.youtube.com/watch?v=V-hB-4fnqtM).

9.Интерактивный репетитор. ChatGPT уже хорошо зарекомендовал себя в пояснении сложных учебных понятий и правил. Например, вы можете спросить: «Объясни доступным для 10-летнего ребенка

языком, что значит «логарифм» и «интеграл» и приведи конкретные практические примеры, в которых их можно использовать в ежедневной жизни». Причем, если выданное пояснение вам не нравится, вы можете просить предоставить другое объяснение с другими примерами нужное вам количество раз.