Проекционные методы. Основные понятия и примеры Алексей Померанцев Институт химической физики РАН Российское хемометрическое общество 03.04.07 Лекция в Омском ГУ 1 Вопрос 1. Кто я? Студент/аспирант Кандидат/доцент Доктор/профессор 03.04.07 Лекция в Омском ГУ 2 Вопрос 2. Моя направленность Экспериментатор Теоретик Я ошибся комнатой 03.04.07 Лекция в Омском ГУ 3 Вопрос 3. Специальность Химик Физик Биолог Математик 03.04.07 Лекция в Омском ГУ 4 Вопрос 4. Матрица это окружение определяемого вещества 1 ко- и 1 контравариантный тензор прямоугольная таблица чисел фильм братьев Вачовски 03.04.07 Лекция в Омском ГУ 5 Вопрос 5. БИК это Ближняя ИнфраКрасная спектроскопия Банковский Идентификационный Код Блок Извлечения Корня Болезнь Иценко-Кушинга Бик – это Сьюзи! 03.04.07 Лекция в Омском ГУ 6 Вопрос 6. Я опубликовал ... < 2 peer-review статьи ~ 10 peer-review статей ~ 30 peer-review статей > 100 peer-review статьей 03.04.07 Лекция в Омском ГУ 7 Вопрос 7. Хемометрика это ... статистика в аналитической химии метрология применительно к АХ то, что делают хемометрики понятия не имею ?! 03.04.07 Лекция в Омском ГУ 8 Данные о нас Персона Кто Экс/Теор Специал Матрица БИК Статьи Хемом Иванов И. 1 1 1 1 1 10 1 Петров П. 1 1 1 1 1 30 1 Сидоров С. 1 1 1 1 2 образец/объект 100 2 ... 0 0 1 3 2 1 ... 1 1 1 1 1 2 1 ... 0 1 1 1 4 10 1 ... 0 1 1 1 5 30 3 ... 0 1 1 1 1 1 1 0 1 1 30 4 ... 0 1 2 1 1 1 ... 1 0 3 Матрица данных 1 ... 4 6 10 1 ... 0 1 1 1 2 1 1 ... 0 0 2 1 3 1 2 ... 1 1 1 1 1 1 2 Померанцев А. 3 0 переменная/свойство 1 3 1 6 30 3 Родионова О. 2 1 2 2 2 30 3 ... 1 1 1 1 1 100 3 ... 1 1 2 1 2 10 2 03.04.07 1 1 Лекция в Омском ГУ 9 Матрицы и векторы: учебник 03.04.07 Лекция в Омском ГУ 10 Графическое представление 2D-данных 03.04.07 Лекция в Омском ГУ 11 Графическое представление 3D-данных 03.04.07 Лекция в Омском ГУ 12 Почти наши данные 03.04.07 Лекция в Омском ГУ 13 Таблица данных Персона № 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 03.04.07 Пол M/F M M M M M M M M M M M M M M M M F F F F F F F F F F F F F F F F Регион S/N N N N N N N N N S S S S S S S S N N N N N N N N S S S S S S S S Рост см 198 184 183 182 180 183 180 180 185 187 177 180 181 176 175 178 166 170 172 169 168 157 164 162 168 166 158 163 162 165 161 160 Вес кг 92 84 83 80 80 81 82 81 82 84 65 72 75 68 67 75 47 60 64 51 52 47 50 49 50 49 46 50 50 51 48 48 Волосы S/L S S S S S S S S S S S S S S L S S L L L L L L L L L L L L L L L Обувь размер 48 44 44 42 43 42 44 44 45 46 41 43 43 42 42 42 36 38 39 36 37 36 38 37 37 36 34 36 36 36 35 35 Возраст лет 48 33 37 35 36 37 43 46 26 27 26 33 42 50 55 30 32 23 24 24 27 32 41 40 49 21 30 18 20 36 41 40 Лекция в Омском ГУ Доход K€/год 45 33 34 30 30 35 37 42 16 17 18 19 31 36 38 24 28 20 22 23 24 32 34 34 34 14 18 11 12 26 32 31 Пиво л/год 420 350 320 398 388 345 355 362 295 299 209 236 198 195 185 203 270 312 308 250 260 235 255 265 170 150 120 143 133 121 116 118 Вино л/год 115 102 98 65 63 45 82 90 180 178 160 175 161 177 187 208 78 99 91 89 86 92 134 124 162 245 120 136 146 129 196 198 Сила баллы 98 92 91 85 84 90 88 86 92 95 86 85 83 82 80 81 75 81 82 78 78 70 76 75 76 75 70 75 74 76 75 74 IQ баллы 100 130 127 140 129 105 109 113 109 119 120 115 105 96 105 118 112 110 102 98 100 127 101 108 135 123 119 102 132 126 120 129 14 Корреляции 1 Вес 100 a) MN 90 MN MN MN MN MN MN MN MS MS MS 80 70 FN 60 50 FN FS FS FS FS FS FN FS FS FN b) Вес MN 90 MS MS MS 80 MS MN MN MN MN MN MS MS FN 60 FN FS FS FS FS FS FS FS FS FN 50 FN Рост FS 40 MN MS MS 70 MS MS MS MN MS MS FN FN 100 FN FN FN FN FN FN Пиво 40 150 03.04.07 160 170 180 190 200 100 Лекция в Омском ГУ 200 300 400 15 Корреляции 2 250 Вино c) 45 MN Доход FS d) MN 40 FS 200 MS MS FS FS 150 FS FS MS MS 30 MS FN FN FN FN 50 FN FN FN FN MN MN MN MN MN MN 03.04.07 200 250 300 350 400 MS FN MS MS 450 FS MS FN MS 15 MS FS FS FN 20 0 150 MN FN MN MN Пиво 100 MN 25 MS FS FN FS 100 FNFN FN MS FS MN MN MN 35 MS MS MN MS FS FS FS Возраст FS 10 10 Лекция в Омском ГУ 20 30 40 50 60 16 Все возможные корреляции 250 Вино c) FS FS 200 MS FS MS MS FS 150 Вино FS 150 FN FN FN FN FN FN FN FN FS FN FN Пиво 0 250 150 200 250 300 350 400 450 Вино c) FS FS 200 MS MS FS 150 MS FS 150 FN FN FN FN MN MN MN MN MN MN MN 250 200 250 300 350 400 Вино c) FS FS 200 MS MS MS FS 150 200 MN MN MN MN MN 250 200 250 300 350 400 FN MN MN MN MN c) FS FS 200 MS MS FS 150 MS FS 150 FN FN FN FN MN MN MN MN 250 200 250 300 350 400 c) FS FS 200 FN MN MN MN MS MS MS FS 150 200 250 MN MN MN MN 250 150 200 250 300 350 400 c) FS FS 200 MS MS MS FS 150 FS FS FN MN MN MN 50 MN MN MN MN 400 FS FS 150 200 250 300 350 400 FN FN FN FN 03.04.07 MN MN MN 250 250 MN 350 400 MS FS FS 200 250 300 350 400 FN FN FN FN MN 300 MN MN MN 350 400 200 250 300 350 400 150 MN 250 300 MN MN MN 350 400 250 150 300 350 400 MN MN MN MN MN MN 250 150 200 250 300 350 400 c) FS MS 250 250 300 350 400 c) FS FN MN MN MN MS FS FS 250 200 MS MS MN FN MN MN MN MN 400 FS FS 200 250 300 350 400 200 FN FN FN FN 250 MN MN MN MN 350 400 FS FS 200 250 300 350 400 MN MN MN MN 400 FS FS FN FN FN FN 50 MN FN 200 Лекция в Омском ГУ 250 300 350 400 450 250 MN MN MN MN 350 400 FS FS 50 MN FN MN MN MN 200 250 300 350 400 450 MN MN MN MN MN 300 350 400 200 250 300 350 400 MS MS MS FN FN FN MN MN FN FN FN FN FN MN MN MN MN MN MN 100 250 150 200 MS MS FS 150 FN FN FN FN MN MN MN MN 450 MS MS MS FS FS MS FN FN FN MN FS 100 MN MN 400 MS FS MN MN FN FN FN FN 350 c) MS FS MS MS 300 FS FS MS 250 Вино 200 FS MN FN FN FN FN 50 FN MN MN MN MN MN MN Пиво Пиво 0 150 200 250 300 350 400 450 Вино c) FS FS FS 100 250 150 200 MS MS MS FS MS 150 FN FN FN FN FN FN FN MN FN MN MN MN FS FS MN 450 MS MS MS MS FN FN FN MN FS 100 MN MN 400 MS FS MN FS 350 c) MS FS MS MS 300 FS 200 MS FS 250 Вино FS MS FS 50 450 MS FS MS FS FS 100 250 450 Пиво 450 FN FN FN FN 50 MN FN MN MN MN MN MN MN Пиво 0 150 400 MS FS FS 50 MS Пиво 100 350 c) MS FS 100 MN MN 300 FS MN FN MS FS 100 MN MN 0 150 250 MS MS Пиво 100 FN c) FS FN FN FN FN 250 FS FS FS MN FS MN MN Вино MS MS FS 150 FN 200 MS MS Вино MS FN FN 250 150 150 200 MS MS MN MN MN 0 200 MS FS MN FN MN 100 200 MN 150 50 MS FN MN FN FN FN FN FS FN FN FS MS FS FN FN Пиво 450 FS 100 MN MN 300 MS MS MS Пиво 450 MS FN FN FN FN 100 MN MN c) MS MS 0 150 250 200 FS Пиво 100 MN MN MN Вино MN FS 400 0 150 150 FN 350 FS 100 250 450 MS FS FS FS 50 MS MS MS MN 400 MS FS MS FS FS MN FN 350 c) MS FS 100 MN MN Пиво MS FN FN 300 MS FS FN MN 100 MS MS 250 FS 150 FN FN FN FN FN FN 200 MS FS MN MN MN c) MS MS FS 50 450 MS MN FN 300 FS MN FS 200 MS FS MS FS 100 MN MN 350 FS MS MS MN FN 300 c) FS FN FN FN FN 250 Вино MN FS 50 450 250 200 FN Вино MS FS FS 250 Вино FS FS 450 MS FS 100 MN MN 400 0 150 150 FN 0 150 MN MN MN 200 FS MS MS MS MN 350 c) FS MN FN 250 150 50 FS FS FN 300 Пиво MS FN FN 250 Вино 150 FN FN MN 100 MS MS 250 200 MN MN 0 100 MN MN 200 MS MS 0 150 MS MS MS FN FN FN FN 200 MS FS MN MN MN MN 100 200 FS 50 MS FN MN MN MN Пиво MN MN FN FN FN FN 250 150 150 FN FN FS FN 100 200 MN 100 150 FN FN MN MN FN MN MS MS FN FN FN FN MS MS FN Пиво 450 MS MS MS MS FN FN FN FN FN FN MS FS FS 200 FS MS FS FS FS MS FS Пиво 100 MS 400 MS FS 450 MS MS MS MS FS MS FS MS FS FS FS MS FS 350 Пиво 450 c) FS 450 FS 100 MN MN 300 c) MS MS MN FN 400 FS 100 MN MN Вино FS FS 50 450 250 150 150 0 150 MN MN MN 350 300 FS FS MS 50 0 MN Пиво 100 MN 300 Вино MN FN 400 c) FS 100 MN MN Пиво 200 FN 250 MS MS FN MN 100 MS FN FN 250 200 FS FN FN FN FN MS MS MN MN MN 350 0 150 150 FN FN FS 50 MS MN 300 FS MN FN 250 c) 50 FS FS FN MN 100 MS MS 250 450 MS FS FS FS 50 FS 100 MN MN Вино 150 FN FN FN FN 200 MS 200 MS MS FS MS FS FS FS 450 MS FS 100 MN MN MS 250 150 MS MS FN FN FS MS FS MN MN MN Пиво 450 c) FS MS FS MN FS 350 c) FS FN 300 FS 150 FN FN FN FN 250 Вино MS FN FN 400 0 150 MS MS 350 Пиво 200 MS FS 300 MN FN 400 MS FS 100 MN MN 0 200 MS MN MN MN Вино MN MN 100 MS FS FS MN 350 c) MS FS MN FN 300 FS FS FN Пиво 450 MS 200 MS MS FN 250 Вино 150 FN FN FS FN FN FN FN FS MS 50 FS 100 MN MN MN 100 FS MS FS 250 MS MS MN FN FN FN FN 400 c) FS 100 MN MN Вино MN FS 50 450 Вино 250 200 FS FN 0 200 MN MN MN 350 250 150 150 FN FN MN MN 0 100 MS MS 200 MS MS MN 200 MS 250 150 MS MS MS FN FN FN FN MS FS FS FS MN MN MN Пиво 450 MS FS 50 0 150 FN FN Пиво 150 MN 300 Пиво 150 MS MS 250 FS MN FN 400 100 MS FS FS FS MS FS 100 MN MN FS FS FN MN 100 200 MS MN MN MN Вино 150 FN FN FN FN MS FS FS FS 200 MS MS FN FN FS MS FS MN 350 c) FS FN 300 FS MN MN 150 MS MS FS 50 450 Вино 250 200 MS 250 MN MN FN Пиво 450 200 FS 50 0 100 MS FS FS FS 100 MN MN MS 200 Вино 150 FN 400 MS FS 100 MN MN Пиво 450 0 100 MN MN MN 100 50 450 FS MN 400 250 150 MS MS FN FN FS MS FS MN FN 350 c) MS MS FN 300 MN MN MN 350 0 100 MS MS MS FN FN FN FN 50 FS 150 MS MS FN 250 Вино 200 MN 100 MN MN FN FN FN FN 250 200 MN FN MN FS MS FS MN FN 300 c) FS FN FN FN FN FN FN FN 50 FS 150 FN FN 250 MS MS MN MS FS FS FS 200 MS MS FN FN FN FN 200 FS 100 MN MN MS 150 Вино 200 MS FS MS MS MS 250 MS FS FS MS 0 100 Пиво 450 0 150 MS MS FN FN FS FN MN MN MN MN 100 FS FN FN FN FN 150 FN FN MN 400 c) FS MN FN 350 100 MN MN MS MS MS FS FS FS Пиво 450 MS FS 50 FS FS FN 300 Вино 150 FN FN 250 FN MS FS MN MN MN MN MN MN FS MS FS 100 MN MN Пиво 450 MS FS MS MS FS 100 MN MN 400 200 MS MS MS FN FN FN FN 50 MS FS 0 200 250 200 Пиво 450 MS MS MS MN MN MN 350 MN MN MN 400 0 100 MS FS FS FS MS FS FS MS FS FS MN MN 300 MS FS 200 Пиво 150 MS FS 100 MN MN c) 50 MS FS FS FN 250 FS 100 MN MN c) MS 150 FN MN MN MN FS MN FN FS MS FN FN MN FN MN 350 c) FS MN FN 300 FS FS FN MN FS MS FS 250 Пиво 450 c) FS Вино FS FN FS MS MS 250 200 MS MS Вино 50 MS MN 100 400 0 150 150 200 FS FS 50 450 250 450 0 150 350 200 Вино 150 FN FN FN FN FN FN 50 FS MN 0 200 Пиво 100 300 Вино 150 FN Пиво 100 MN MN MS FN FN FN FN 250 MS MS MN 100 200 MN 100 MN MN MS FS FS 200 Пиво 450 MS MS FN FN MS MS FN FN FS 100 MN MN 400 MS FS FS 150 MS MS FN FN FS FN FN FN FN 150 MS MS MN MN MN 350 FS MS MS 250 250 200 MS FN FN FN FN MS FS FS 200 FS MN MN FN 300 MS FS 450 c) FS FN FS 50 450 250 150 FN FN 0 150 400 Вино MS MS 250 MS FS FN FN 200 100 MN MN 150 MS MS MS 0 100 MS FS FS FS 50 0 150 MN MN MN 250 MS FS FS FN 0 100 MS MS FS FS 150 FN FN Пиво 450 200 Пиво 450 MS FS 100 MN MN Пиво MS Пиво 100 350 MN 200 MS FS MN MN MN c) 50 MS FS MS FS MN FN FS 100 MN MN MS FN FN FN FN 100 FN MN FS MS FS MN FS MS 50 450 FS 100 MN MN 300 c) MS MS MN MN MN 300 FS 100 MN MN Вино MN MN FN MN MN MN 0 200 FS FN MN Пиво 150 150 FN FN FS 50 450 FN MN 100 MS 0 100 MS MS FS FS 400 c) FS FN Вино MN FN MS FS MN MN FN FN FN FN MS MS FN c) FS FN 200 FS FS 150 FN FN 250 150 MS MS FS MS MS MS 350 0 200 Вино 200 FS 200 Пиво 0 MS 300 FS 150 FN FN 0 MS FS FS 50 MS 250 250 Вино MS MS MN 100 150 250 200 Пиво 450 MS MS FN FN 200 250 150 MS MS MS FN FN FN FN 50 MS FS MS FS 450 MS FS 100 MN MN 350 400 MN 150 MN FN FN FN FN 50 400 MS FS MN 0 100 MS FS FS FS 100 MN MN MS FN FN FN FN 100 100 MN MN FN Пиво 450 200 Пиво 450 c) FS MS FS MS MS MN FN 300 c) FS FN FN FN FN 250 FS MN FS 100 250 200 Вино 150 FN 400 0 MS FN FN 350 Пиво 150 MS MS 300 FS 100 MN MN 350 FS 50 FS MS MS MN 100 200 MS FS 250 400 MS FS MS FS FS MN MN MN MN FS MS FS MS FS 100 MN MN Вино MN MN FN FN FN FN FS MS FS 200 FS FN FS 50 450 Вино 250 150 FN FN MN MN MN 0 150 MS MS MS 0 100 MN MN MN MN 100 200 Пиво 0 MN FN 300 FS MN FS MS FS FS MN FN c) MS MS FN 350 c) FS MN FS FS FN FN FN FN 250 FN FS 150 FN FN 350 FS MS FS MS MS MS 300 c) MS MS 250 FS MS FS FS 200 Вино 12(12-1)/2=66 FN Вино 150 FN FN 300 FS MS MS Пиво 450 MS FS 100 MN MN 400 250 200 MN FN FN FN FN 50 0 150 MS MS 250 Вино 200 MN 100 200 MS 200 FS FN FN FN FN FN FN MS FS FS FS 250 150 Пиво 450 MS 100 MN MN 250 150 MS MS MS FN FN FN FN 50 c) FS FS MS MS MS FS 100 MN MN MN 0 100 200 FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 450 MS FS MN 0 100 150 MS FS MS FS MS MS MS MN 350 c) FS MN FN 400 c) 50 FS FS FN 300 Вино 150 FN FN FN FN FN FN 50 150 MS MS FS 100 250 200 MS 350 0 MS FS FS FS 300 FS 100 MN MN MN 100 FS MS FS 250 MN MN MN FN 400 FS MS FS FN FN 350 c) FS 150 MS 300 FS MS MS 250 Вино MS FS FS 200 MS MS Пиво 450 MS MS MS FS FS FS 50 FS MN MN FN FN FN FN 400 MS FS 100 MN MN Пиво 450 Вино MN MN MN Вино FS FN 0 150 200 MS MS Пиво 100 250 200 FS 50 0 MN FN MN FS MS FS MN FN 350 c) FS FN 300 FS 150 FN FN 250 Вино MS MS MN FN FN FN FN 50 0 150 150 FN FN 200 MS MS MN 100 MS MS 150 Пиво 450 MS 250 200 MS FN FN FN FN MS FS FS 100 MN MN 400 MS FS MN MN FN FN FN FN 350 100 MN MN 250 150 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN 0 100 200 FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 450 MS FS MN 0 100 MS FS FS FS MS FS MS MS MS 300 c) MS MS 250 MN MN MN FN 400 FS MS FS FN FN 350 c) FS 150 MS 300 FS MS MS 250 Вино MS FS FS 200 MS MS Пиво 450 MS FS 50 FS 200 FS 50 200 Вино MS FS FS FS 100 250 150 FS MS FS 400 0 100 FN MN FS MS FS 100 MN MN 350 c) FS MN MN FN FN FN FN MN FN FN FN FN 50 FS FS FN 300 Вино 150 FN FN 250 Пиво 450 Вино 200 MS MS MS 0 150 250 150 MS MS Пиво 100 100 MN MN 250 150 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN 0 100 200 FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 450 MS FS MN 0 100 MS FS FS 50 0 MN MN MN FN 400 FS MS FS FN FN 350 c) FS 150 MS 300 FS MS MS 250 Вино MS FS FS 200 MS MS Пиво 450 200 FS 100 MN MN 400 MS FS MN FN FN MN FS MS FS FN 350 c) FS 150 FN FN 300 FS MS MS 250 MS MS MS FN FN FN FN 50 150 Вино MS FS FS FS 100 250 200 FS MN FN FN FN FN 250 150 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN 0 100 200 FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 450 MS FS MN 0 100 FS MS FS FN 400 FS MS FS FN FN 350 c) FS 150 MS 300 FS MS MS 250 MS MS Пиво 450 200 Вино MS FS FS 50 0 150 250 150 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN 0 100 200 FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 450 MS FS 100 MN MN MN 400 FS MS FS MN FN 350 c) FS FN 300 FS 150 FN FN 250 Вино MS MS Пиво 100 200 MS MS MS FN FN FN FN 50 0 250 150 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN 0 100 MS FS FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 450 200 FS 100 MN MN MN 400 MS FS MN MN FN FN FN FN 350 FS MS FS MS MS MS 300 c) MS MS 250 FS 200 FS 50 200 Вино MS FS FS FS 100 250 150 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN 0 100 FS MS FS FN Вино 200 MS FS FS FS MN MN MN MN MN Пиво 0 100 FS FN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN Вино 200 MS FS FS FS MN MN MN MN MN MS FS 150 FN FN 250 FS MS MS MS FN FN FN FN 50 c) FS MS MS MS FS 100 MN MN MN Вино 200 MS FS FS FS MN MN MN MN MN MS FS MS MS 250 FS MS MS MS MS FS 50 c) FS 200 MS FS FS FS 100 250 FS MS Пиво 0 100 150 200 250 300 350 400 450 100 150 200 250 300 350 17 400 450 Главные направления и проекции Данные без структуры 0.6 0.6 X2 0.4 0.4 0.2 0.2 X1 0 -0.6 -0.4 Данные со скрытой структурой -0.2 0 0.2 0.4 0.6 X X 11 0 -0.6 -0.4 -0.2 0 -0.2 -0.2 -0.4 -0.4 -0.6 -0.6 0.2 0.4 0.4 0.6 0.6 min ∑E2 → a X2=aX1+E 03.04.07 ГК1 X2 Лекция в Омском ГУ 18 Проекция на подпространство Исходные данные Подпространство Центр данных Главные компоненты Проекции данных 03.04.07 Лекция в Омском ГУ 19 Представление данных в подпространстве 03.04.07 Лекция в Омском ГУ 20 Метод главных компонент (PCA) Исходные данные Матрица счетов Матрица нагрузок × A PT P J I X = I J T Матрица ошибок + I E A J A J Karl Pearson, 1901 X=TPT+E 03.04.07 Лекция в Омском ГУ 21 Матрица счетов T (scores) A X=TPT+E t11 ... tA1 Строка – координаты одного объекта в новой системе координат t21 ... tA1 I Столбец – проекция всех объектов на одну ось главных компонент 03.04.07 Лекция в Омском ГУ tI1 ... tIA 22 Матрица нагрузок P (loadings) Строка – проекция всех переменных на одну ось главных компонент A X=TPT+E p11 p 12 ... p1J ... ... ... ... pA1 pA2 ... pAJ J Столбец – проекция одной переменной на новую систему координат 03.04.07 Лекция в Омском ГУ 23 Матрица остатков E I X=TPT+E e11 e12 ... ... e1J e1 2 ... ... ... ... ... ... eI1 eI2 ... ... eIJ eI2 ei2 – квадрат расстояния от объекта до подпространства главных компонент J E (a) – объясненная вариация 03.04.07 V2 E(a) 2 Лекция в Омском ГУ V2– полная погрешность 24 Объясненная вариация данных E (a ) 100% 94% 80% 60% 40% 20% 0% PC0 a A PC1 PC2 PC3 PC4 PC5 PC6 PC7 Выбор числа главных компонент 03.04.07 Лекция в Омском ГУ 25 Люди: Графики счетов 4 4 ГК2 2 MS MS MS MS MS FS ГК4 35 2 49 MS MS MS FS FS FS FS 40 FS FS 0 MN FN FN FN -4 03.04.07 -2 FN FN FN MN FN 40 55 MN MN MN 50 20 30 26 30 32 21 33 37 43 MN MN -2 46 0 MN 37 36 33 36 41 FS FN 32 23 26 24 27 24 18 42 41 48 ГК1 ГК3 -2 0 2 4 6 27 -3 Лекция в Омском ГУ -2 -1 0 1 2 26 Люди: Графики нагрузок 0.6 Регион ГК2 a) Вино 1.0 ГК4 IQ b) 0.5 0.3 Рост Обувь IQ Вес Сила 0.0 Возраст Доход Вес Регион 0.0 Возраст Вино Волосы Пол -0.3 -0.4 03.04.07 Пиво Доход -0.2 0.0 0.2 Волосы Сила Пол Обувь Рост ГК1 0.4 Пиво ГК3 -0.5 -0.8 Лекция в Омском ГУ -0.6 -0.4 -0.2 0.0 0.2 27 Центрирование 0.8 0.8 X' 2 X2 x11 x12 ... ... x1J ... 0.6 0.6 ... 0.4 0.4 xI1 xI2 ... ... xIJ x–1 ... ... ... ... X' 1 0.2 -1 -0.8 -0.6 0.2 -0.4 -0.2 -0.8 -0.6 -0.2 03.04.07 0.2 X1 0 -1 0 0 -0.4 -0.2 0 0.2 -0.2 Лекция в Омском ГУ x–2 ... –x J 28 Шкалирование 44 XX2 2 x11 x12 ... ... x1J ... ... 33 22 11 -2 -0.2 -0.4 -2 ... ... xI1 xI2 ... ... xIJ s1 ... X X 11 00 -4 -0.6 ... 00 0.2 22 0.4 44 0.6 -1 -1 -2 -2 -3 -3 -4 -4 03.04.07 Лекция в Омском ГУ s2 ... sJ 29 Автошкалирование центрирование + шкалирование = автошкалирование 03.04.07 Лекция в Омском ГУ 30 Matlab 03.04.07 Лекция в Омском ГУ 31 Unscrambler® by CAMO ASA 03.04.07 Лекция в Омском ГУ 32 Упражнение 1. People 03.04.07 Лекция в Омском ГУ 33 Разделение пиков в ВЭЖХ-ДДМ 03.04.07 Лекция в Омском ГУ 34 Свойства чистых веществ A и B 1.2 A B C (t ) 1.0 S (l) A B 1.0 0.8 0.8 0.6 0.6 0.4 0.4 0.2 0.2 0.0 0.0 0 5 10 15 20 25 30 220 240 время удерживания 260 280 300 320 340 длина волны X=CST+E 03.04.07 Лекция в Омском ГУ 35 Хроматограмма смеси 03.04.07 Лекция в Омском ГУ 36 Данные в Unscrambler 03.04.07 Лекция в Омском ГУ 37 Упражнение 2. HPLC-DAD 03.04.07 Лекция в Омском ГУ 38 График счетов A t 2 (ГК2) 12 11 13 10 14 15 9 16 19 2120 22 23 24 25 26 29 28 27 30 18 17 8 t 1(ГК1) 1 2 7 1.2 A B C (t ) 1.0 3 0.8 0.6 6 0.4 0.2 4 5 0.0 0 5 10 15 20 25 30 время удерживания 03.04.07 Лекция в Омском ГУ B 39 Выводы из графика счетов 1. линейные участки = чистые компоненты 2. кривые участки = коэлюция 3. ближе к началу = меньше интенсивность 4. число поворотов = число чистых компонент 03.04.07 Лекция в Омском ГУ 40 Факторный анализ и анализ ГК J X 2 × J A × ST I C 03.04.07 X I = = I I J PT T + + E1 E2 Лекция в Омском ГУ J 41 Счета и нагрузки 3.2 A C, T B t1 t2 1.0 A S, P B p1 p2 0.8 2.2 0.6 0.4 1.2 0.2 0.0 0.2 220 0 5 10 15 20 -0.8 25 30 260 280 300 320 340 -0.2 -0.4 время удерживания 03.04.07 240 длина волны Лекция в Омском ГУ 42 Прокрустово преобразование X ≈ CST X ≈ TPT I = RRT = единичная X ≈ T(RRT)PT = (TR)(PR)T ^ ≈ TR ^ ≈ PR C S R = Rstratch ×Rrotation 03.04.07 Лекция в Омском ГУ 43 Преобразование счетов t2 t2 4 15 17 16 18 1 9 20 21 22 23 26 25 24 28 29 30 27 14 12 13 11 10 3 9 5 6 7 8 t1 СЖАТИЕ 2 8 27 30 29 28 26 1 25 24 23 22 21 20 19 18 9 17 16 15 14 13 10 1211 1 2 7 3 6 4 t1 5 t5 4 2 6 7 3 8 9 t1 10 11 2 12 17 16151413 30 29 28 27 26 25 24 23 121 22 20 19 18 03.04.07 Лекция в Омском ГУ 44 Результат Прокрустова преобразования 1.2 1.0 A C (t ) B Ahat Bhat 1.0 A B S (l) Ahat 0.8 Bhat 0.8 0.6 0.6 0.4 0.4 0.2 0.2 0.0 0.0 0 5 10 15 20 25 30 220 время удерживания 03.04.07 240 260 280 300 320 340 длина волны Лекция в Омском ГУ 45 Статистический контроль процессов Walter Shewhart, 1930 03.04.07 Лекция в Омском ГУ 46 Реализации процесса s1, s2, ... ,s54 Пример данных о процессе Ключевые переменные процесса (датчики) X1, X2, ... , X17 s1 s2 s3 s4 s5 s6 s7 s8 s9 s10 s11 s12 s13 s14 s15 s16 s17 s54 03.04.07 X1 -1.19E-01 -1.37E-01 2.51E-02 -1.14E-01 -7.93E-02 1.51E-02 7.44E-02 3.65E-02 1.36E-01 -2.74E-02 7.47E-02 -1.17E-01 1.06E-01 7.39E-02 -9.87E-03 -1.06E-01 -4.76E-02 X2 7.28E-01 7.28E-01 -9.15E-02 6.70E-01 4.14E-01 -6.38E-02 -5.24E-01 -2.66E-01 -7.06E-01 3.60E-01 -3.31E-01 7.02E-01 -2.82E-01 -5.28E-01 1.02E-01 7.68E-01 2.66E-01 X3 -2.15E-02 -2.89E-02 6.73E-03 -2.18E-02 -1.69E-02 3.74E-03 1.11E-02 5.12E-03 2.89E-02 1.82E-03 1.80E-02 -2.16E-02 3.23E-02 1.07E-02 -3.21E-04 -1.52E-02 -9.52E-03 X4 5.22E-01 6.08E-01 -1.13E-01 5.04E-01 3.51E-01 -6.75E-02 -3.24E-01 -1.59E-01 -6.01E-01 1.12E-01 -3.34E-01 5.13E-01 -4.82E-01 -3.21E-01 4.17E-02 4.62E-01 2.10E-01 X5 7.06E-04 7.09E-04 -9.07E-05 6.50E-04 4.04E-04 -6.28E-05 -5.06E-04 -2.56E-04 -6.88E-04 3.42E-04 -3.25E-04 6.81E-04 -2.85E-04 -5.09E-04 9.75E-05 7.41E-04 2.59E-04 X6 7.32E-01 7.02E-01 -7.58E-02 6.65E-01 3.98E-01 -5.67E-02 -5.45E-01 -2.78E-01 -6.77E-01 4.12E-01 -2.99E-01 7.03E-01 -1.87E-01 -5.50E-01 1.13E-01 8.03E-01 2.61E-01 … X7 3.10E-04 6.58E-04 -2.29E-04 3.83E-04 3.96E-04 -1.15E-04 -1.73E-05 1.43E-05 -6.83E-04 -4.31E-04 -5.30E-04 3.40E-04 -1.25E-03 2.49E-06 -8.29E-05 -2.54E-05 1.92E-04 X8 -6.13E-04 -1.22E-03 4.10E-04 -7.34E-04 -7.35E-04 2.07E-04 7.92E-05 -3.95E-07 1.26E-03 7.24E-04 9.62E-04 -6.63E-04 2.21E-03 4.48E-05 1.36E-04 -2.68E-05 -3.61E-04 X9 -5.92E-05 -1.49E-04 5.65E-05 -7.96E-05 -9.05E-05 2.78E-05 -1.07E-05 -1.14E-05 1.56E-04 1.22E-04 1.28E-04 -6.76E-05 3.14E-04 -1.59E-05 2.44E-05 2.88E-05 -4.19E-05 6.61E-02 -5.40E-01 7.19E-03 -2.85E-01 -5.19E-04 -5.78E-01 1.81E-04 -2.67E-04 -6.23E-05 Лекция в Омском ГУ … X17 9.74E-03 1.01E-02 -1.43E-03 9.07E-03 5.78E-03 -9.49E-04 -6.79E-03 -3.42E-03 -9.86E-03 4.18E-03 -4.84E-03 9.44E-03 -4.99E-03 -6.81E-03 1.23E-03 9.90E-03 3.65E-03 -6.78E-03 47 Карты Шухарта (1927) 1.2 0.5 1.5 X2 Control Control 0.4 0.8 1.0 0.3 X2 Normal X1 Control Sensors X1X2 X2 Sensor X1 All & Sensors Normal 0.2 0.4 0.5 0.1 X1 Normal X1 Control X1 Normal 0.0 X2 Normal -0.1 -0.5 -0.4 -0.2 X1 Control X2 Normal Normal -0.3 -1.0 -0.8 -0.4 X1 Control X2 Normal Control X2 Control s56 s54 s51 s49 s46 s43 s41 s39 s37 s35 s33 s31 s29 s27 s25 s23 s21 s19 s17 s15 s13 s11 s9 s7 s5 s3 s1 -1.5 -0.5 -1.2 Cycles (time) 03.04.07 Лекция в Омском ГУ 48 Контроль процесса (просто игра) 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 0.31 -0.4 0.26 -0.3 -0.3 -0.4 -0.1 0.13 0.08 -0.3 -0.3 #### -0.3 -0.3 #### -0.1 -0.4 3 2 0.31 0.26 0.01 -0.06 -0.09 -0.36 -0.31 -0.27 -0.35 -0.35 -0.37 1 -0.01 PC2 0.13 0.08 -0.28 0 -4 -0.35 -0.38 -3 -2 -1 0 -1 -2 -3 Off Time till the end of shift: 03.04.07 Exit On 7:59:10 Лекция в Омском ГУ 49 Контроль с помощью SPC X1 X2 Одномерная область контроля t t t t t t t X2 t t t t t X1 t t 03.04.07 Многомерная область контроля Лекция в Омском ГУ 50 Упражнение 3. MSPC 03.04.07 Лекция в Омском ГУ 51 Спасибо за внимание! 03.04.07 Лекция в Омском ГУ 52