Копирайтер против ChatGPT: чей текст про Python лучше

После того, как OpenAI запустила открытый бета-тест ChatGPT, интернет заполонили заявления в духе: “Копирайтеры больше не нужны”. Мол, теперь контент можно получить в два клика, и рынок авторов обязательно погибнет. 

Мы решили подкрепить эти предсказания экспериментом. Мы попросили написать статью о причинах популярности Python машину и человека, ChatGPT и среднего копирайтера, который мало-мальски разбирается в IT.

Предлагаем вам сравнить статьи и решить, кто же справился с задачей лучше.

Условия задачи

И ChatGPT, и копирайтер получили одинаковую структуру текста, которую мы составили заранее. Это — план статьи, по которому машина и человек должны были написать материалы.

			Введение

а. Язык Python стал самым популярным в 2022 году
б. Как он стал самым популярным
в. Кто оценивал популярность
г. Подводка: разбираемся, как это случилось и какой путь прошёл Python как язык программирования

История языка Python

а. Как был разработан Python
б. Как и почему он набирал популярность в 90-е годы
в. Как и почему он набирал популярность в 00-е годы
г. Как и почему он набирал популярность в 10-е годы

Отличительные черты Python

а. Что отличает Python от других языков программирования
б. Плюсы и минусы Python по сравнению с Java
в. Плюсы и минусы Python по сравнению с С-языками

Перспективы Python в дальнейшем

а. В области AI / ML
б. В веб-разработке
в. В разработке приложений
г. В областях Big Data / Data Science

Заключение

а. Подведение итогов
б. Call-to-action, призыв к дискуссии
		

Также мы попросили, чтобы в тексте были нейтральный Tone of voice, структурированные заголовки и списки. 

Объем текста — 8000 знаков, оригинальность — 90%, вода — до 60%.

Полное ТЗ можно посмотреть здесь.

Как справился ChatGPT

Сказать честно, не очень хорошо. Когда мы составляли статью, ChatGPT ещё был основан на GPT-3, и языковая модель раз за разом предлагала абстрактные ответы без сравнения, к примеру, библиотек и их возможностей.

Пришлось несколько раз подредактировать запросы, чтобы добиться хоть какого-то упоминания технологий. 

Получив сколько-то удовлетворительный ответ, мы вставляли его в статью. Каждый пункт в плане статьи — это отдельный запрос. 

Иногда ChatGPT повторялся: в сравнении с C++ и Java он выделял одни и те же преимущества — адаптируемость, масштабируемость (что бы это ни значило), читаемость кода, и так далее.

Абстрактные ответы мы удалили из финального текста. Мы вмешались в результат машины потому, что в статью копирайтера всё же давались редакторские правки. Значит, и результат ChatGPT нужно было редактировать. 

Вот, что получилось у ChatGPT:

Как справился копирайтер

Поскольку целью эксперимента было сравнение писательских навыков машины и человека, мы искали копирайтера, который обладал бы примерно теми же знаниями в области IT. 

На бирже копирайтинга мы нашли такого автора, у которого был неплохой рейтинг и множество отзывов.

Что касается рейтинга, автор был помечен другими заказчиками на две звезды из трёх. Это — средний рейтинг. Мы остановились именно на нём, чтобы получить работу средней руки сферического копирайтера в вакууме. 

Честно говоря, после того, как копирайтер прислал нам первую версию текста, возникло подозрение, что и автор использовал ChatGPT. Уж больно текст автора был похож на тот, что написала нейросеть на нашей же площадке. 

Поговорили с автором, обсудили нейросети, и копирайтер сказал, что не использовал ChatGPT, а сходство возникло из-за одинаковой структуры текста. 

Проверить это, к сожалению, не удалось: все сервисы для проверки текст на ChatGPT работают только с английским языком. Поверили на слово.

Мы внесли несколько правок, и автор сдал работу. 

Голосование

Пожалуйста, ознакомьтесь с двумя текстами про популярность Python: с написанным ChatGPT материалом и написанным человеком. 

Как вы считаете, кто лучше справился с задачей? Есть ли существенная разница между работами? 

И, в конце концов, наступила ли гибель копирайтинга?