Задание по кластеризацииx

Задание по кластеризации
Дано:
Лексема «конструкция»
Множество контекстов, где встречается слово «конструкция»
Будем считать, что 3 значения:
(1) строительная конструкция,
(2) устройство,
(3) конструкция в языкознании
Задача:
Разделить контексты на группы в зависимости от значения слова «конструкция»
Подсказка
1. Разметьте (можно в Excel) примеры по значениям
2. Выберите для каждой из групп те слова, которые вам покажутся «значимыми» для
различения данного контекста. (а) в antconc составить частотный список, посчитать
«документную частоту» каждого из слов, встретившихся в контекстах (в скольких
контекстах встретилось данное слово: оно должно встречаться больше, чем в 1 или
2-х контекстах, но не больше, чем в 1/3 контекстов), (б) стоит также посмотреть
толкования в словаре и выбрать те слова, которые встречаются в толковании
3. Составьте матрицу: контекст – ключевые слова
Отметьте в матрице, какие из списка отобранных вами слов (ключевых) есть в
данном контексте
4. Посчитайте, сколько всего слов из вашего списка встретились в каждом из
контекстов
5. Вычислите матрицу расстояний между контекстами
Расстояние можно определить по мере Джаккарда: число совпадающих для 2-х
контекстов слов / сумма встретившихся слов в контексте A и контексте B.
Можно вычислить расстояние по любой другой метрике
NB
(1) вычислите матрицу расстояний для вашего списка
(2) для списка, в который также будут входить слова «и», «в»
(3) для списка, в который будут входить какие-то слова, встретившиеся по 1 разу
6. Выполните кластеризацию контекстов по Single link (см. Salton гл. 10 или любую
презентацию по кластеризации) и Complete link
7. Прокомментируйте результаты: соответствуют ли получившиеся кластеры
значениям слова конструкция, при каком выборе контекстных слов получаются
лучшие результаты, встретились ли контексты, которые не попали в нужный / ни в
какой кластер. Почему.
Контексты:
(1) На первом этапе происходит изготовление деревянной конструкции оконных блоков на
Кочевском деревообрабатывающем комбинате, который обладает парком
высокотехнологичного
(2) нас появилась совсем недавно, а на лечебном корпусе все деревянные конструкции были
установлены еще в прошлом году.
(3) В зависимости от формы ножа и его конструкции предусмотрено два варианта захвата
рукояти ножа: прямой и обратный.
(4) В ее конструкции предусмотрен газовый регулятор, имеющий два рабочих положения ―
«нормальное» и «усиленное
(5) Третья нестыковка: если конструкции текста Лигети «вневербальны», то каким же образом
они могут «пародировать
(6) был специально сочинён Д.Лигети и представлял собой вневербальные
языковые конструкции из фонем и звуковых аллитераций, что пародирует Sprechgesang ―
речевое пение
(7) Заодно любопытно: из чего же ещё, кроме фонем, могут «языковые конструкции » состоять?
(8) Первая нестыковка: если текст «Авантюр» представляет собой «языковые конструкции из
фонем и звуковых аллитераций», то каким образом эти же
(9) Все 43 года, что существует трест № 14, главным поставщиком
железобетонных конструкций для наших объектов является ЖБК № I. Надежность нашего
партнерства проверена
(10)сделал для внедрения передовых технологий и освоения новых прогрессивных
железобетонных конструкций и изделий.
(11)главе 5 СНиП приведена пожарно-техническая классификация строительных материалов
и конструкций , а также классификация зданий и пожарных отсеков по конструктивной
пожарной
(12)качества ИСО-9000, монолитно-каркасному домостроению, новых строительных материалов
и конструкций , внедрению прогрессивных технологий, в частности и сваевдавливающей
установки ЗАО «Дедал
(13)думаю, они не рады тому, что производство строительных материалов и конструкций не
нужно теперь лицензировать: лицензия ― хоть и не очень высокий
(14)обследования, нами подготовлен и проводится инженерный мониторинг технического
состояния ограждающих конструкций здания.
(15)Все фактические данные о состоянии конструкций здания получают любым нормативно
разрешенным для определения безопасности зданий и
(16)Неизмеримо возросли требования к долговечности
строительных конструкций , архитектурной выразительности и дизайну сооружений.
(17)ковра зданий и сооружений, гидроизоляции фундаментов, тоннелей и других
строительных конструкций с повышенными требованиями надежности во всех
климатических районах.
(18)Именно такой технической диагностикой состояния строительных конструкций , инженерных
систем зданий и сооружений с последующей разработкой комплекса мероприятий
Подсказка:
Признаки, по которым стоит классифицировать контексты:
языковой
текст
фонема
поэтический
произведение
если
прошлый
строительный
Ее / его
использовать
предусмотреть
железобетонный
Материал
Деревянный
Изготовление
Устанавливать
форма