Разработчик, изучавший немецкий язык в школе, университете и на курсах, решил создать приложение для тренировки склонения прилагательных. Он использовал большие языковые модели DeepSeek, Claude и ChatGPT для генерации тестов. За несколько часов нейросети создали сотни JSON-файлов с упражнениями, что казалось быстрым решением. Однако, когда приложение было готово на 90%, автор показал его жене, которая работает заведующей кафедрой немецкого языка в университете. Она долго смеялась: ошибок было неисчислимое количество.
Проблемы оказались системными. Во-первых, окончания прилагательных часто были неправильными, что сводило на нет всю обучающую ценность приложения. Во-вторых, нейросети генерировали грамматически верные, но абсурдные по смыслу предложения, например: «Was für ein junger, erfahrener Professor unterrichtet dich?» («Какой молодой, опытный профессор преподает тебе?»). Для носителя языка такие фразы звучат как чушь, но для автора с неидеальным немецким они казались нормальными. Самая курьёзная ошибка: по аналогии с единственным числом ИИ придумал тип склонения во множественном числе, которого в немецком языке не существует.
Автор пытался исправить ситуацию, пробуя разные нейросети, но ни одна не давала приемлемого результата. В итоге жена вручную выверила все тесты, исправляя сотни ошибок в течение месяца. Приложение вышло в App Store, и пока ни один пользователь не пожаловался на ошибки. Автор задаётся вопросом, стоит ли указывать в описании, что тесты составлены человеком, а не нейросетью.
Этот случай иллюстрирует ограничения LLM в задачах, требующих точного знания предметной области. Немецкая грамматика — сложная система с множеством правил и исключений, и модели, обученные на общих текстах, не всегда справляются с генерацией учебных материалов. Ошибки возникают из-за недостаточной специализации моделей и отсутствия контроля качества. Для образовательных продуктов, где ошибки недопустимы, ручная проверка остаётся необходимой.
Интересно, что сам автор признаётся: он так и не выучил склонение прилагательных, потому что ему больше нравится писать приложения, чем учить окончания. Это добавляет иронии: приложение для изучения грамматики создал человек, который сам её не освоил, но благодаря жене-филологу продукт получился качественным.
