ОТиПЛ МГУ

Развитие языковых моделей и их осмысление теоретическими лингвистами, кажется, ведут к лингвистическим войнам XXI века. В новом лонгриде рассказываем про статью Mission: Impossible Language Models, в которой авторы спорят с Хомским и предлагают другую точку зрения на то, как большие языковые модели усваивают язык. В конце статьи — комментарий преподавателя ОТиПЛа Алексея Андреевича Сорокина.

В начале недели американская компания Anthropic представила новую версию своей большой языковой модели Claude. Claude 3 должен стать конкурентом ChatGPT от OpenAI и Gemini от Google и уже успел стать героем нескольких интересных новостей. Большая версия модели, Claude 3 Opus, довольно неожиданно повела себя во время прохождения теста на нахождение «иголки в стоге сена». Суть теста заключается в следующем: в текст объёмом 200 тысяч токенов («стог сена») вставляется отвлечённое предложение («иголка»); исследователи просят модель ответить на вопрос, ответ на который содержится в «иголке». Claude, успешно справившись с заданием, добавил: «Я подозреваю, что этот «факт» о топпингах для пиццы [который и был в данном случае иголкой — прим. ред.] был вставлен в качестве шутки, либо чтобы проверить мою внимательность» ("I suspect this pizza topping 'fact' may have been inserted as a joke or to test if I was paying attention»). Эта ремарка, конечно же, породила обсуждение того, что общий искусственный интеллект уже близко. Нас впечатлила и находка, которую сделал исследователь под ником anzorq. Несколько лет он работал над русско-кабардинским переводчиком. Для это понадобилось собрать более 50 тысяч пар русско-кабардинских примеров и обучить различные специализированные модели. В качестве эксперимента anzorq взял около 6 тысяч пар примеров, отправил их в виде текстового файла в Claude, а затем попросил перевести на кабардинский предложение, не встречавшееся в выборке. Модель справилась не только с переводом, но и разобрала получившийся текст по морфемам (по сути — почти отглоссировала текст). Правда, пользователи соцсети Reddit сообщают, что Claude 3 обучалась на кабардинских данных и осмысленного перевода можно добиться и без предъявления примеров.

С большим удовольствием делимся интервью с Игорем Игоревичем Исаевым, зам. директора Института языкознания РАН и преподавателем нашей кафедры, опубликованном в интернет-медиа «Системный Блокъ».

— Нивхский язык уникален не только тем, что он изолят и его предков можно искать на достаточно обширном пространстве, вплоть до Юго-Восточной Азии. Этот язык вызывает восхищение лингвиста целой россыпью грамматических изысков. Среди них — счетные классификаторы, отсутствие структурных падежей (при наличии падежей лексических и отдельного падежа для каузируемого), инкорпорация прямого объекта в глагол и определения в имя, маркирование конвербов лично-числовыми показателями, различение переходности-непереходности фонетическим признаком звонкости и многое другое. В рамках нашего спецкурса мы планируем знакомиться с основами грамматики этого чудесного языка, изучать работы лингвистов (и даже этнографов), посвятивших ему статьи и монографии, попробуем научиться читать тексты на нем. Кроме этого, было бы верно активнее вводить нивхский в сферу исследовательских интересов московских лингвистов, ведь до сих им занимались преимущественно в Санкт-Петербурге (Ленинграде). Если вы успели открыть в себе типолога, синтаксиста или морфолога, ваш внутренний мир станет неизмеримо богаче после знакомства с нивхским языком.

В сегодняшнем выпуске рассказа о спецкурсах доцент Павел Валерьевич Гращенков аргументированно покажет, почему нельзя пропустить возможность познакомиться с нивхским языком в этом семестре.

— Нивхский язык уникален не только тем, что он изолят и его предков можно искать на достаточно обширном пространстве, вплоть до Юго-Восточной Азии. Этот язык вызывает восхищение лингвиста целой россыпью грамматических изысков. Среди них — счетные классификаторы, отсутствие структурных падежей (при наличии падежей лексических и отдельного падежа для каузируемого), инкорпорация прямого объекта в глагол и определения в имя, маркирование конвербов лично-числовыми показателями, различение переходности-непереходности фонетическим признаком звонкости и многое другое. В рамках нашего спецкурса мы планируем знакомиться с основами грамматики этого чудесного языка, изучать работы лингвистов (и даже этнографов), посвятивших ему статьи и монографии, попробуем научиться читать тексты на нем. Кроме этого, было бы верно активнее вводить нивхский в сферу исследовательских интересов московских лингвистов, ведь до сих им занимались преимущественно в Санкт-Петербурге (Ленинграде). Если вы успели открыть в себе типолога, синтаксиста или морфолога, ваш внутренний мир станет неизмеримо богаче после знакомства с нивхским языком.

С 13 по 16 февраля студентка 3 курса нашего отделения Варя Тютюнникова участвовала в конференции по фонологии (OCP21) в Лейпциге с докладом про ударение в севернохантыйском языке. Мы попросили ее поделиться впечатлениями о первом опыте участия в международной конференции: Честно говоря, выступать на английском перед полным залом крутых лингвистов впервые очень страшно. Но, когда начинаешь говорить и видишь, как все заинтересованно и внимательно слушают, ты сразу чувствуешь себя увереннее и даже получаешь удовольствие от происходящего — это, конечно, тоже важно. Думаю, залог успешного доклада для меня — это в том числе выверенная двести раз презентация и несколько прогонов текста перед конференцией. На OCP я показывала свой анализ ударения в казымском хантыйском. Это фактически мой самый первый проект, над которым я долго думала, и я рада, что смогла поделиться с коллегами-фонологами своим любопытным кейсом и получить хороший фидбек. Я убедилась в том, что делать доклады перед заинтересованным в теме сообществом невероятно полезно и что наши коллеги за рубежом очень приветливые и классные. Они нам даже провели экскурсию по кладбищу в один из дней после докладов!

Начинаем день с хорошей новости: студентка 1 курса магистратуры Лада Паско одержала победу в стипендиальном конкурсе Фонда Потанина. Поздравляем и гордимся! О том, как проходил отбор, узнаем из первых уст. — Честно скажу — было непросто! Конкурс состоит из двух этапов. В ходе первого нужно было не только вспомнить о всех своих достижениях и подтвердить их документами, но и написать целых пять эссе. Вопросы были очень глубокими: пришлось порефлексировать о своей жизненной позиции, опыте командной работы, планах в науке и в жизни в целом. Второй этап проходил в зуме: в течение нескольких часов нужно было решать кейсы с другими участниками. Для меня конкурс стал стимулом подумать о своих перспективах и попробовать свои силы в новых видах деятельности. Очень полезный опыт!

Тему лингвистического разнообразия и языков, находящихся под угрозой исчезновения, Перлин развивает и в большой статье в The Guardian. Он возвращается к проблеме «языков-убийц» — престижных языков широкого общения, вытесняющих менее крупные языки, — и оспаривает распространенную точку зрения, что такие языки объединяют людей. Наличие общего языка не мешает его носителям воевать друг с другом, а в обществе с легкостью распространяется то, что автор называет «нарциссизмом малых различий», — внимание к акценту, выбору слов, социолекту, которые позволят судить о происхождении и уровне образования. По мнению Перлина, последние 70 лет лингвистика расходовала свои творческие ресурсы на построение общей теории языка, упустив из виду намного более важную задачу: для каждого языка создать словарь, подробное грамматическое описание и представительный корпус. Даже если это не спасет многие языки, у их носителей хотя бы остается возможность выбрать своё языковое будущее.

На прошлой неделе в издательстве Grove вышла книга Росса Перлина Language City: The Fight to Preserve Endangered Mother Tongues. Перлин — соруководитель Endangered Language Alliance, некоммерческого исследовательского института, занимающегося документированием и поддержкой исчезающих языков в Нью-Йорке и за его пределами, преподаватель Колумбийского университета. Language City — это языковой портрет современного Нью-Йорка в трёх частях. Первая часть посвящена прошлому — это исследование того, как миграция сделала Нью-Йорк домом для 700 языков и микрокосмом глобального языкового разнообразия. Вторая рассказывает о настоящем — мы узнаем истории шести носителей языков из Азии, Европы, Африки и Америки, живущих в Нью-Йорке. 🏙 Расмина — одна из самых молодых носительниц языка языка секе, принадлежащего бодской ветви сино-тибетской языковой семьи. Количество носителей секе — 700 человек, из которых 100 живут в Нью-Йорке. 🏔Хусния — полиглот и носительница ваханского языка, одного из языков Памира, на котором говорят на границе между Таджикистаном и Афганистаном. И, конечно, в Нью-Йорке. 📰 Борис [Сандлер] — писатель и журналист, пишущий на идише, бывший главный редактор газеты «Форвертс». ✍️ Ибрагима — языковой активист, продвигающий нко — консонантно-вокалическое письмо, разработанное как альтернатива латинскому и арабскому алфавитам для языков манде. 🇲🇽 Ирвин — носитель науатль, одного из языков коренных народов Латинской Америки, стремительно расширяющего своё присутствие в Нью-Йорке 🧑‍🏫 Карен — носительница и преподавательница языка манси, принадлежащего восточной ветви алгонкинских языков Разумеется, все шестеро владеют английским и крупными региональными и национальными языками, но мечтают о будущем для своего родного языка. Будущему посвящена третья часть книги, в которой Росс Перлин размышляет о том, могут ли большие города стать устойчивыми центрами языкового разнообразия, оживив историю о Вавилонской башне.

В «Глагольной группе» новый спецификатор! Заведующий кафедрой Сергей Георгиевич Татевосов — о первой экспедиции в мегебский язык, поддержании идеального порядка в экспедиционном быту, индексе билигнвизма теркских кумыков и пренебрежении божественным провидением.

Сегодня, 21 февраля, отмечается Международный день родного языка. По оценкам ООН 45% мировых языков находятся под угрозой исчезновения, а в цифровом мире используются менее ста языков. Сохранить языковое разнообразие — наша задача как лингвистов. Ключевую роль в этом могу сыграть лингвистические экспедиции. Экспедиции важны для лингвистической документации, цифровизаци малоресурсных языков, создания новых сред, в которых у людей будет возможность и мотивация говорить на родном языке. В честь Дня родного языка делимся с вами подборкой фильмов о ранних экспедициях ОСиПЛа на Памир и в Хиналуг и двух камчатских экспециях.

21 февраля в 19:00 в киноклубе СКОЛКОВО пройдет премьера фильма «Тимир» — полнометражного дебюта Николая Корякина (Айдына Ате), удостоенного приза за режиссуру на фестивале «Зимний». Якутское драмеди рассказывает про мальчика, приезжающего после смерти матери в деревню к отцу, которого едва знает. Тимир ни с кем не может найти общего языка, пока однажды он не встречает таинственного незнакомца, который оказывается духом, застрявшим между двух миров. После просмотра можно будет задать вопросы режиссеру и обсудить феномен якутской культуры. Вход свободный по регистрации на сайте киноклуба.

21 февраля в 19:00 в киноклубе СКОЛКОВО пройдет премьера фильма «Тимир» — полнометражного дебюта Николая Корякина (Айдына Ате), удостоенного приза за режиссуру на фестивале «Зимний». Якутское драмеди рассказывает про мальчика, приезжающего после смерти матери в деревню к отцу, которого едва знает. Тимир ни с кем не может найти общего языка, пока однажды он не встречает таинственного незнакомца, который оказывается духом, застрявшим между двух миров. После просмотра состоится обсуждение с участием режиссера. Вход свободный по регистрации на сайте киноклуба.

Мы продолжаем освещать курсы нового учебного плана, и сегодня расскажем про предмет "Математический анализ и линейная алгебра", который студенты проходят во втором семестре первого курса бакалавриата. Мы поговорили с преподавателем, Тихоном Григорьевичем Пшеницыным. - Тихон Григорьевич, расскажите, чему можно и чему нельзя научиться на курсе математического анализа и линейной алгебры? - Номинально наш курс должен научить важным понятиям, которые потом пригодятся в теории вероятностей, статистике и машинном обучении: матрицы, собственные значения, производные, интегралы и так далее. Но, как мне кажется, гораздо важнее научиться самому стилю рассуждения математиков, их взгляду на мир. Во-первых, математической четкости и структурированности. Каждая тема рассказывается по структуре «мотивация-определение-пример-теорема»: от задачи из реальной жизни мы идем к математическому определению, после чего исследуем его свойства. Возникает красивая архитектура понятий с увлекательными связями между ними. Во-вторых, важно поучиться математической строгости: каждое утверждение математик должен доказать. В-третьих, на нашем курсе можно научиться смотреть на один и тот же объект под разными углами, и наоборот, описывать явления из самых разных сфер науки с помощью одного и того же математического инструмента. Скажем, центральным понятием матанализа является функция, преобразующая вещественные числа в вещественные числа. Это математическое понятие формализует идею процессов, длящихся во времени. Таким образом, прочувствовав, что такое функция, студент сможет математически описывать самые разные процессы — в химии, физике или лингвистике. Вообще, было бы замечательно, если бы оказалось возможным найти уравнения изменения языка в зависимости от времени, как были найдены уравнения Ньютона или Шредингера, описывающие изменение физической реальности. Пока лингвистика еще в ожидании своего Шредингера — и надеюсь, что этот будущий лингвистический Шредингер сможет родиться в том числе благодаря курсу линейной алгебры и математического анализа. А чему нельзя научиться на нашем курсе? Нельзя научиться линейной алгебре и матанализу на том уровне, на котором эти предметы осваивают математики — просто потому что у них на это выделено примерно в 10 раз больше времени.

Номинально наш курс должен научить важным понятиям, которые потом пригодятся в теории вероятностей, статистике и машинном обучении: матрицы, собственные значения, производные, интегралы и так далее. Но, как мне кажется, гораздо важнее научиться самому стилю рассуждения математиков, их взгляду на мир. Во-первых, математической четкости и структурированности. Каждая тема рассказывается по структуре «мотивация-определение-пример-теорема»: от задачи из реальной жизни мы идем к математическому определению, после чего исследуем его свойства. Возникает красивая архитектура понятий с увлекательными связями между ними. Во-вторых, важно поучиться математической строгости: каждое утверждение математик должен доказать. В-третьих, на нашем курсе можно научиться смотреть на один и тот же объект под разными углами, и наоборот, описывать явления из самых разных сфер науки с помощью одного и того же математического инструмента. Скажем, центральным понятием матанализа является функция, преобразующая вещественные числа в вещественные числа. Это математическое понятие формализует идею процессов, длящихся во времени. Таким образом, прочувствовав, что такое функция, студент сможет математически описывать самые разные процессы — в химии, физике или лингвистике. Вообще, было бы замечательно, если бы оказалось возможным найти уравнения изменения языка в зависимости от времени, как были найдены уравнения Ньютона или Шредингера, описывающие изменение физической реальности. Пока лингвистика еще в ожидании своего Шредингера — и надеюсь, что этот будущий лингвистический Шредингер сможет родиться в том числе благодаря курсу линейной алгебры и математического анализа. А чему нельзя научиться на нашем курсе? Нельзя научиться линейной алгебре и матанализу на том уровне, на котором эти предметы осваивают математики — просто потому что у них на это выделено примерно в 10 раз больше времени.

Мы продолжаем серию постов про предметы нового учебного плана ОТиПЛа. Сегодня про социолингвистику, которая в новом плане проходится в первом семестре первого курса, рассказывает преподаватель кафедры Юлия Вячеславовна Синицына. Социолингвистика — дисциплина, которая объединяет в себе множество направлений (среди которых социальная диалектология, переключение кодов, гендерные исследования, контактные языки, языковые контакты и другие). В связи с этим краткий ответ на вопрос такой: на курсе мы учимся многому по чуть-чуть, а не учимся мы... тоже многому. Более развернутый ответ содержит вопросы, которые мы обсуждаем с первокурсниками отделения теоретической и прикладной лингвистики МГУ. Как провести исследование городского диалекта, задав всего один вопрос? Как правильно составить анкету, чтобы на выходе получить нужные данные? Как следует подходить к изучению гендерных различий в языке? Как узнать, каким был язык 30, 50, 70 лет назад, если доступа к данным за прошлые годы нет? Переключение кодов имеет дискурсивное или социальное значение? Почему пиджины таковы, каковы они есть, и больше никаковы? Репиджинизация, декреолизация, рекреолизация — это сейчас клавиатура заглючила или три разных процесса? Как связаны миссионеры-мормоны в Японии и смешанные языки? В этих вопросах заключен практически весь план курса. Более опытные коллеги могли начать что-то подозревать к концу этого списка, и я полностью разделяю их чувства. Мое самое большое сожаление на данный момент — отсутствие вопросов, связанных с языковой политикой хотя бы в общих чертах. В идеале хотелось бы рассматривать их не в вакууме, а на примере языковой ситуации в России, но подозреваю, что это разговор мог бы затянуться ещё на семестр :)

В этом году Критская лингвистическая школа, на которую неоднократно ездили наши студенты, пройдёт с 13 по 26 июля. Если вы собираетесь принять участие в Школе этим летом, лучше подать заявку до раннего дедлайна - 3 апреля. Подробную информацию можно увидеть на сайте Школы: https://linguistics.philology.uoc.gr/cssl24/

В этом году Критская лингвистическая школа, на которую неоднократно ездили наши студенты, пройдёт с 13 по 26 июля. Если вы собираетесь принять участие в Школе этим летом, лучше подать заявку до раннего дедлайна - 3 апреля. Подробную информацию можно увидеть на сайте Школы: https://linguistics.philology.uoc.gr/cssl24/