11d

11.9 Случай неполного ранга (11.9.1-11.9.4), 11.10 Вычисление диагональных элементов матрицы-шляпы: 11.10.1 С использованием разложения Холецкого, 11.10.2 С использованием усечённого QR-разложения, 11.11 Вычисление тестовых статистик, 11.12 Вычисления для робастной регрессии: 11.12.1 Алгоритмы для L1-регрессии, 11.12.2 Алгоритмы для M- и GM-оценивания, 11.12.3 Элементарные регрессии, 11.12.4 Алгоритмы для методов с высокой устойчивостью к выбросам (high-breakdown)

[3/33%]
Показать
LaTeX
Задача 11d.1

Предположим, что мы подгоняем регрессию методом наименьших квадратов к подмножеству JJ из nn имеющихся наблюдений. Пусть XJ\mathbf{X}_{J} — подматрица матрицы X\mathbf{X}, соответствующая наблюдениям из JJ, пусть eie_{i} — ii-й остаток из этой подгонки, i=1,…,ni = 1, \ldots , n, и пусть hij=xiT(XJTXJ)−1xjh_{i j} = \mathbf{x}_{i}^{T}\left(\mathbf{X}_{J}^{T} \mathbf{X}_{J}\right)^{-1} \mathbf{x}_{j}. Покажите, что если мы удаляем наблюдение i∈Ji \in J и добавляем наблюдение j∉Jj \notin J, то изменение остаточной суммы квадратов равно

ej2(1−hii)−ei2(1+hjj)+2eiejhij(1−hii)(1+hjj)+hij2 \frac{e_{j}^{2}\left(1-h_{i i}\right)-e_{i}^{2}\left(1+h_{j j}\right)+2 e_{i} e_{j} h_{i j}}{\left(1-h_{i i}\right)\left(1+h_{j j}\right)+h_{i j}^{2}}
?
Задача 11d.2

Используя результат упражнения 1 выше, напишите функцию на R, реализующую метод Хокинса для вычисления приближения к оценке LTS.

?
Задача 11d.3

Напишите функцию на R, реализующую алгоритм Рупперта для вычисления приближения к оценке LTS. Вам потребуется обратиться к работе Ruppert [1992] за деталями алгоритма. Разработайте небольшую симуляцию для сравнения алгоритма Рупперта с алгоритмом Хокинса.

?