Методист онлайн-школы «Инглекс» Анастасия Пожидаева проверила, насколько хорошо ChatGPT владеет английским, допускает ли он ошибки и замечает ли у других. Спойлер: экзамен он не сдал, зато извинился.
Появление и развитие искусственного интеллекта (ИИ) вызвало немало опасений. Заменит ли ИИ копирайтера, дизайнера, не отнимет ли работу у фотографа, музыканта? Не осталась в стороне и сфера онлайн-образования: можно ли использовать нейросеть для изучения английского языка и сможет ли ChatGPT заменить преподавателя?
ИИ вместо переводчика — не стоит рассчитывать на многое
Хоть ИИ владеет огромной базой данных, его словарный запас ограничен, а в переводах много неточностей и ошибок.
Разговор преподавателя английского с Chat GPT
ИИ переводит слишком буквально. Преподаватель английского языка перевел бы это предложение так, чтобы было понятно русскому читателю. ChatGPT сделал дословный перевод, но предложение стало буквальным, лишенным смысла для русскоязычного читателя.
Для сравнения приведем адаптированный вариант перевода от преподавателя. Обратите внимание, как хорошо оно описывает душевное состояние человека и подходит к ситуации:
I want something human. — Хочу, чтобы рядом была живая душа.
Буквальный перевод убил смысл предложения
ИИ не учитывает контекст. Смысл выражения to go to sleep зависит от контекста, поэтому фраза не всегда переводится буквально «пойти спать». ИИ не учел, что фраза to go to sleep может означать «онеметь в результате длительного давления», «потерять чувствительность из-за недостатка кровотока». Как стоит перевести это предложение:
The arm holding the boy’s head has gone to sleep. — Рука, которой он поддерживал голову мальчика, затекла.
ИИ передал форму, но упустил суть
ИИ не руководствуется логикой. ИИ «не чувствует» идиомы в тексте, поэтому не способен сделать хороший перевод. Фраза in the teeth of означает «навстречу», «наперекор», «несмотря на». Поэтому адекватный перевод выглядел бы так: «Изредка из трубы фермерского дома поднимался дым, который тут же подхватывал ветер». Чувствуете разницу?
ИИ допускает ошибки
При обучении с помощью ChatGPT нужно помнить о том, что на точность ИИ рассчитывать не стоит. По крайней мере, до тех пор, пока он не «доучится».
Выясняем, умеет ли ИИ использовать артикли
ИИ не разбирается в артиклях. Предложение, сформулированное с ошибкой, он счел верным.
❌ My husband is doing a MSc in civil engineering. — Мой муж получает степень магистра в области гражданского строительства.
Мы указали ChatGPT на ошибку и сослались на книгу Longman Dictionary of Common Mistakes, в которой указано, что артикль должен быть другим. ИИ согласился и принес извинения за свой промах.
✅ My husband is doing an MSc in civil engineering. — Мой муж получает степень магистра в области гражданского строительства.
Преподаватель исправляет предлоги, ИИ соглашается
ИИ сомневается в предлогах. Просим ИИ проверить предложение на наличие грамматических ошибок — и он опять их не видит. После пары-тройки объяснений ИИ вновь извиняется.
В защиту искусственного интеллекта скажем, что он учится и исправляет ошибки. Мы получили этому доказательство, обратившись к нему с тем же запросом через несколько месяцев. На этот раз ChatGPT нашел ошибку в предложении и предложил ее исправить.
ИИ считает предложение с ошибками грамматически и стилистически верным
ИИ не находит ошибки в обычных упражнениях
ИИ допускает грамматические ошибки. Еще одно слабое место ИИ — он не всегда хорошо разбирается даже в простой грамматике. Например, какие английские существительные исчисляемые, а какие нет.
ИИ не разбирается в английских идиомах и не помнит, о чем говорит
Идиомы — неотъемлемая часть языка, но перевести их бывает трудно. Чтобы понять смысл и логику идиомы, нужно знать историю ее возникновения. Искусственный интеллект здесь не помощник: он не всегда корректно рассказывает, откуда появилась та или иная идиома.
В английском языке есть интересная идиома to steal someone’s thunder — «перейти дорогу кому-либо», «сорвать ожидавшийся эффект», «испортить праздник».
ChatGPT рассказал такую историю ее происхождения: «Идиома to steal thunder уходит корнями в театральную сферу. Ее происхождение связано с пьесой „Подземная жизнь“ (“Appius and Virginia”) английского драматурга Джона Денниса (John Dennis), поставленной в 1709 году. В этой пьесе Деннис использовал механическое устройство для воспроизведения звука грома. Но звуковой эффект грома не сработал, а само устройство предположительно было украдено или испорчено конкурентом Денниса. После этого инцидента Деннис использовал фразу to steal thunder для описания ситуации, когда кто-то присваивает чужие заслуги».
Через некоторое время мы решили попробовать еще раз и снова спросили о происхождении to steal someone’s thunder. ИИ рассказал уже совершенно другую историю.
ИИ дает новую версию происхождения идиомы, забыв о старой
ИИ просит прощения за путаницу в истории происхождения идиомы
Можно ли использовать искусственный интеллект для изучения английского языка
Эксперимент показал разницу между изучением английского языка с искусственным интеллектом и обучением у педагога. Пока ИИ есть над чем работать: он делает ошибки и не замечает их, переводит буквально и не учитывает контекст. А преподаватель может не только обнаружить ошибки в тексте или речи, но и четко объяснить, почему должно быть так, а не иначе.
Чат-бот по английскому языку — это полезный инструмент, который позволяет заниматься бесплатно, но с его помощью не получится повысить уровень владения языком, улучшить произношение или разобраться в сложных грамматических темах. К тому же ИИ не способен заменить полноценное человеческое общение, необходимое для формирования разговорного навыка. Поэтому учить язык лучше с преподавателем.