- Статья посвящена исследованию работы мозга при использовании ИИ для изучения иностранных языков.
- Модели ИИ обучаются на английском, но могут неплохо говорить на других языках.
- Команда из EPFL провела эксперимент для изучения работы LLM на разных языках.
- Использовалась методика Logit lens для анализа скрытых состояний модели.
- Результаты показывают, что LLM имеет родной язык, но не английский, а язык концепций.
- Английский остается опорным языком для модели, но в другом смысле.
На каком языке думают языковые модели
11 авг 2024
Краткий пересказ
от нейросети YandexGPT
Источник:
habr.com