Компьютерные методы анализа текста
advertisement
Зачем социологам этот курс Некоторые темы Компьютерные методы анализа текста Курс по выбору Кирилл Александрович Маслинский НИУ ВШЭ Санкт-Петербург 2014/2015 Что будет Зачем социологам этот курс Некоторые темы Что будет Автоматическая обработка текста в социологических исследованиях ??? В социологии много задач, где требуется анализ текстовых данных: ∙ Ключевые слова, частотные тренды ∙ Автоматическое определение тематики текста ∙ Извлечение мнений и оценок / Sentiment analysis ∙ Извлечение фактов и отношений ∙ Стилистический анализ и атрибуция текста :-) Автоматический анализ текстов! Зачем социологам этот курс Некоторые темы Что будет Автоматическая обработка текста в социологических исследованиях ??? В социологии много задач, где требуется анализ текстовых данных: :-Ъ У нас есть Интернет: ∙ автоматизировать сбор текстов −→ ∙ собрать много текстов −→ ∙ получить внушительные количественные данные :-( Традиционный контент-анализ слишком дорог :-) Автоматический анализ текстов! Зачем социологам этот курс Некоторые темы Как правильно считать слова Что будет Зачем социологам этот курс Некоторые темы Что будет Статистические языковые модели Замечено: далеко не глупые люди на мгновение впадают в замешательство, если предложение заканчивается не так, как они борщ. Зачем социологам этот курс Некоторые темы Topic modeling Что будет Зачем социологам этот курс Некоторые темы Что будет Sentiment analysis Популярное мнение гласит, что самое скучное занятие – это смотреть на сохнущую краску. Поэтому это может быть отличным способом проверить людей на выносливость, согласно организаторам мирового чемпионата по наблюдению за сохнущей краской, который будет проходить в Великобритании в 2012 году. Зачем социологам этот курс Некоторые темы Работа с реальными текстовыми коллекциями ∙ Анекдоты на школьную тему ∙ Дисциплинарные взыскания в протоколах педсоветов советской школы ∙ Советские арифметические задачи ∙ Креативный город: транскрипты интервью ∙ Форум LittleOne, тема «Беременность и роды» ∙ здесь может быть ваша коллекция Что будет Зачем социологам этот курс Некоторые темы Что вас ждет Что будет Зачем социологам этот курс Некоторые темы Что вас ждет Практическая работа с реальными текстами на каждом семинаре. ∙ командная строка ∙ R ∙ регулярные выражения ∙ чуть-чуть программирования на python Что будет Зачем социологам этот курс Некоторые темы Работа в группах Что будет Зачем социологам этот курс Некоторые темы Что будет Задачи курса ∙ State-of-the-art автоматического анализа текстов: ∙ круг решенных задач ∙ проблемные области и нерешенные вопросы ∙ Терминология: ∙ необходимый минимум лингвистических терминов ∙ ключевые слова для поиска исследований и инструментов ∙ Инструментарий: ∙ Методы анализа и границы их применимости ∙ Существующее ПО для анализа текстов (на русском языке) ∙ Существующие лингвистические ресурсы — словари, корпуса (на русском языке)
