Использование ИТ в оценке параметров бинарной выборки БЕЛОРУССКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ ФАКУЛЬТЕТ ПРИКЛАДНОЙ МАТЕМАТИКИ И ИНФОРМАТИКИ Кафедра математического. - презентация

1 Использование ИТ в оценке параметров бинарной выборки БЕЛОРУССКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ ФАКУЛЬТЕТ ПРИКЛАДНОЙ МАТЕМАТИКИ И ИНФОРМАТИКИ Кафедра математического моделирования и анализа данных Журавский Вячеслав Сергеевич Научный руководитель Лобач Виктор Иванович

2 Введение На практике очень часто возникает потребность оценки каких-либо статистических параметров на основе полученных данных. На современном этапе существует ряд программных средств от языков программирования до готовых программных пакетов, которые позволяют получить такие статистические оценки.

3 Программное обеспечение Математические пакеты: Matlab Mathematica Mathcad Maple Статистические пакеты Statistica EViews

4 Пакет Mathematica Mathematica относится к системам компьютерной алгебры. Центральное место в системах класса Mathematica занимает машинно-независимое ядро математических операций Kernel. Для ориентации системы на конкретную машинную платформу служит программный интерфейсный процессор Front End. Kernel Front End

5 Возможности Mathemetica Аналитические преобразования Численные расчёты Теория чисел Линейная алгебра Графика и звук

6 Интерфейс Mathemetica

7 STATISTICA STATISTICA пакет для всестороннего статистического анализа, разработанный компанией StatSoft. В пакете STATISTICA реализованы процедуры для анализа данных(data analysis), управления данными (data management), добычи данных (data mining), визуализации данных (data visualization). Программа вычисляет практически все используемые описательные статистики общего характера. Практически все описательные статистики и графики могут быть построены для данных, категоризованных (сгруппированных) по значениям одной или нескольких группирующих переменных. Пакет STATISTICA имеет модульную структуру. Каждый модуль содержит уникальные процедуры и методы анализа данных.

8 Модули STATISTICA Base включает в себя обширный выбор основных статистик, широкий набор методов для разведочного анализа. Advanced Linear/Non-Linear Models предлагает широкий спектр линейных и нелинейных средств моделирования, регрессионный анализ, анализ компонент дисперсий, анализ временных рядов и т. д. Multivariate Exploratory Techniques многомерные разведочные технологии анализа STATISTICA предоставляет широкий выбор разведочных технологий QC Контроль качества предоставляет широкий спектр аналитических методов управления качеством, а также контрольные карты презентационного качества. Neural Networks (отдельный модуль) единственный в мире программный продукт для нейросетевых исследований, полностью переведенный на русский язык Data Miner интеллектуальный анализ данных

9 Интерфейс STATISTICA

10 ЕМ-алгоритм ЕМ-алгоритм очень общий итеративный алгоритм для МП-оценивания в задачах с неполными данными. В ЕМ-алгоритме формализована относительно старая идея обработки неполных данных: заполнение пропусков оценками пропущенных значений оценивание параметров повторное оценивание пропущенных значений и параметров и так далее до сходимости процесса.

11 ЕМ-алгоритм для смесей Первая выборка имеет стандартное нормальное распределение. Вторая имеет нормальное распределение с математическим ожиданием а и дисперсией σ.

12 Результаты моделирования Параметры: a = 2, σ = 0,5, λ = 0,5. Вероятность пропуска: p mis =0,4. Объем выборки N=1000. С использованием метода максимального правдоподобия и EM-алгоритма были получены следующие оценки. ММП ЕМ-алгоритм ММП ЕМ-алгоритм

13 Зависимось от количества пропусков Объем выборки N = 400. Вероятность p mis изменялась от 0 до 0,99 с шагом 0,01. а σ

14 Заключение Были изучены возможности различных математических пакетов. В качестве основного инструмента при выполнении поставленной задачи был выбран пакет Mathematica. ММП дает неплохие оценки, однако для оценки параметров выборок с пропусками следует использовать EM-алгоритм. с увеличением количества пропусков точность EM- алгоритма падает, однако не так сильно, как ожидалось.

15 Список использованных источников 1. 1.В. Дьяконов. Mathematica 5/6/7. Полное руководство. Минск, В. Дьяконов. Mathematica 5.1/5.2/6 в математических и научно- технических расчетах. Минск, А. Халафян. Statistica 6. Статистический анализ данных. Минск, В. Боровиков. STATISTICA. Искусство анализа данных на компьютере. Минск, 2003

16 Спасибо за внимание!