Основы работы с количественными данными: различия между версиями

Материал из MathINFO
Перейти к навигации Перейти к поиску
 
(не показано 11 промежуточных версий этого же участника)
Строка 51: Строка 51:
 
=== Неделя 5. Проверка статистических гипотез. Меры связи. ===
 
=== Неделя 5. Проверка статистических гипотез. Меры связи. ===
  
* [Видеозапись] занятия.
+
* [https://www.dropbox.com/sh/046t9wphzjg3247/AAC6P5DZDY_E5f9BvhD4c0c1a?dl=0 Видеозапись] занятия.
* Проверка статистических гипотез, концепция p-value ([слайды]).
+
* Проверка статистических гипотез, концепция p-value ([https://www.dropbox.com/s/6ndemkm05x1rgfq/07-%D0%9F%D1%80%D0%BE%D0%B2%D0%B5%D1%80%D0%BA%D0%B0%20%D0%B3%D0%B8%D0%BF%D0%BE%D1%82%D0%B5%D0%B7.pdf?dl=0 слайды]).
* Меры связи для данных в разных шкалах ([слайды]).
+
* Меры связи для данных в количественной/порядковой шкале ([https://www.dropbox.com/s/g56w6g6wd6v2ovk/08-%D0%9C%D0%B5%D1%80%D1%8B%20%D1%81%D0%B2%D1%8F%D0%B7%D0%B8.pdf?dl=0 слайды]).
* Практикум 5: [https://www.dropbox.com/s/0pit0cue9yzo2fs/%D0%9F%D1%80%D0%B0%D0%BA%D1%82%D0%B8%D0%BA%D1%83%D0%BC%2005.pdf?dl=0 задание], [https://docs.google.com/spreadsheets/d/1VeXCzlvzPkp2iXFPZTPlp3V6i83uoeavHlkPuYlzCec/edit?usp=sharing ROSSTAT], [https://docs.google.com/spreadsheets/d/10UQcTetw2bsOWk4H7btQ6gZ3OS57UYME88ekFwl3NC8/edit?usp=sharing WIKI].
+
* Практикум 5: [https://www.dropbox.com/s/0pit0cue9yzo2fs/%D0%9F%D1%80%D0%B0%D0%BA%D1%82%D0%B8%D0%BA%D1%83%D0%BC%2005.pdf?dl=0 задание], [https://docs.google.com/spreadsheets/d/1VeXCzlvzPkp2iXFPZTPlp3V6i83uoeavHlkPuYlzCec/edit?usp=sharing ROSSTAT], [https://docs.google.com/spreadsheets/d/10UQcTetw2bsOWk4H7btQ6gZ3OS57UYME88ekFwl3NC8/edit?usp=sharing WIKI], [https://docs.google.com/spreadsheets/d/1q4hu98BIhsuJdeZ9nBZD3f8h4IRli2Eo2Oph4xJ2cj8/edit?usp=sharing решения] ROSSTAT, [https://docs.google.com/spreadsheets/d/1WvI9y7DdhGuqMURyIn8xKM_HNEjIdMw39jwihcPW7zQ/edit?usp=sharing решения] WIKI.
 
* [https://www.socscistatistics.com/tests/ Онлайн-калькулятор] для статистических критериев.
 
* [https://www.socscistatistics.com/tests/ Онлайн-калькулятор] для статистических критериев.
 +
 +
=== Неделя 6. Меры связи. Критерий хи-квадрат. ===
 +
 +
* [https://www.dropbox.com/sh/ck64bvamgozem4l/AAB58Ns9l9N96LGh0eKtThPta?dl=0 Видеозапись] занятия.
 +
* Меры связи: проверка значимости коэффициентов корреляции и критерий хи-квадрат (слайды, [https://docs.google.com/spreadsheets/d/1a58fIflfF7mbqfxESvNWbsVbna3ja_bSDpndlteo55k/edit?usp=sharing вычисления] для критерия хи-квадрат).
 +
* Практикум 6: [https://www.dropbox.com/s/c2io1on1rz0zj20/%D0%9F%D1%80%D0%B0%D0%BA%D1%82%D0%B8%D0%BA%D1%83%D0%BC%2006.pdf?dl=0 задание], [https://docs.google.com/spreadsheets/d/1lYNGqGcvhs0VI6SHcVK8jmZPuJL-u8Wf5Twq6Olr1g8/edit?usp=sharing SALARIES], [https://docs.google.com/spreadsheets/d/10UQcTetw2bsOWk4H7btQ6gZ3OS57UYME88ekFwl3NC8/edit?usp=sharing WIKI], [https://docs.google.com/spreadsheets/d/1rQ1ISEKpmYo1pcsyzQwe4ccwWtsTaiMw77oB0ositSQ/edit?usp=sharing решения] для SALARIES, [https://docs.google.com/spreadsheets/d/1U4J3wwlfUAT7m6tMo6txXfIn-i9yAZvQuoFOySGASt4/edit?usp=sharing решения] для WIKI.
 +
 +
=== Неделя 7. Линейная регрессия. Иерархический кластерный анализ. ===
 +
 +
* Файлы для работы: [https://www.dropbox.com/s/4v0ynrrao5rnnpi/flats.csv?dl=0 flats.csv], [https://www.dropbox.com/s/l2cnsbfcnaheey3/Salaries-small.csv?dl=0 Salaries-small.csv].
 +
* Google Colab для R: [https://colab.research.google.com/notebook#create=true&language=r ссылка].
  
 
== Домашние задания ==
 
== Домашние задания ==
Строка 69: Строка 80:
 
| [https://www.dropbox.com/s/9ja9259mdl8r0s4/%D0%94%D0%97-03.pdf?dl=0 Домашнее задание 3] || 02.10.23:59
 
| [https://www.dropbox.com/s/9ja9259mdl8r0s4/%D0%94%D0%97-03.pdf?dl=0 Домашнее задание 3] || 02.10.23:59
 
|-
 
|-
| Домашнее задание 4 ||  
+
| [https://www.dropbox.com/s/qxs9t4ks3zsfxh5/%D0%94%D0%97-04.pdf?dl=0 Домашнее задание 4] || 13.10 23:59
 
|-
 
|-
| Домашнее задание 5 ||  
+
| [https://www.dropbox.com/s/jirtc7od7es63io/%D0%94%D0%97-05.pdf?dl=0 Домашнее задание 5] || 22.10 23:59
 
|}
 
|}
  

Текущая версия на 01:30, 16 октября 2022

Дорогие студенты!

Это страница обязательного курса «Основы работы с количественными данными», читаемого на программе «Коммуникации в государственных структурах и НКО» 1 курса магистратуры в 1 модуле 2022-2023 учебного года.

Семинары ведёт: Тамбовцева Алла Андреевна.

Правила игры

  • Формула оценки: Итог = 0.5 * Домашние задания + 0.2 * Самостоятельная работа + 0.3 * Экзамен.
  • Программа курса, пояснения по формам контроля.

Программное обеспечение

В рамках практической части курса используются Google Sheets, для работы достаточно иметь аккаунт Gmail.

Материалы занятий

Неделя 1. Введение в анализ данных. Описание данных.

  • Введение в анализ данных: шкалы данных, интегральные индексы (слайды).
  • Описание данных: введение в выборочные обследования, описательные статистики (слайды).
  • Практикум 1: задания, решения.

Что почитать по теме: Ч.Уилан «Голая статистика» (главы 1-3), А.Макаров и др. «Задачник по математической статистике для студентов социально-гуманитарных и управленческих специальностей» (главы 2.1-2.2), M.Sternstein "AP Statistics" (topic 2).

Неделя 2. Описание данных. Визуализация данных.

  • Описание данных: меры изменчивости, данные в неколичественных шкалах (слайды).
  • Визуализация данных: принципы визуализации, графики распределения количественных данных (слайды).
  • Практикум 2: таблица, задание, решение.

Что почитать по теме: А.Макаров и др. «Задачник по математической статистике для студентов социально-гуманитарных и управленческих специальностей» (глава 2.3), M.Sternstein "AP Statistics" (topic 3), Шипунов и др. Наглядная статистика. Используем R! (главы 1-3).

Неделя 3. Визуализация данных. Основные понятия теории вероятностей и статистики.

  • Визуализация данных: графики распределения качественных данных.
  • Практикум 3: таблица, задание, решение.
  • Введение в теорию вероятностей: события и вероятности, случайные величины (конспект).

Что почитать по теме: А.Макаров. А.Пашкевич. «Задачник по теории вероятностей для студентов социально-гуманитарных и управленческих специальностей» (разделы 2-3, 6), Шипунов и др. Наглядная статистика. Используем R! (главы 1-3).

Неделя 4. Введение в статистическое оценивание. Доверительные интервалы.

Что почитать по теме: А.Макаров и др. «Задачник по математической статистике для студентов социально-гуманитарных и управленческих специальностей» (главы 3.3-3.4), Ч.Уилан «Голая статистика» (главы 8, 10), M.Sternstein "AP Statistics" (topics 12-13).

Неделя 5. Проверка статистических гипотез. Меры связи.

Неделя 6. Меры связи. Критерий хи-квадрат.

Неделя 7. Линейная регрессия. Иерархический кластерный анализ.

Домашние задания

Домашнее задание Дедлайн
Домашнее задание 1 11.09 23:59
Домашнее задание 2 22.09 23:59
Домашнее задание 3 02.10.23:59
Домашнее задание 4 13.10 23:59
Домашнее задание 5 22.10 23:59

Дополнительные материалы

Работа с данными в Python

Ниже приведены примеры работы с данными в облачной версии Jupyter Notebook – среде Google Colab. При желании можно установить дистрибутив Anaconda и использовать Jupyter Notebook локально (инструкция по работе). Кроме вводных видео, здесь собраны материалы разных курсов по Python: 1, 2.

Блок 1: введение в работу с данными

  • Введение в Google Colab, загрузка файла с данными, базовое описание данных (видео).
  • Группировка и агрегирование данных, применение собственных функций (видео).
  • Выбор столбцов и фильтрация строк в таблице (видео).
  • Больше про работу с датафреймами pandas: часть 1 , часть 2, часть 3, файл с данными firtree.csv.

Блок 2: обработка, визуализация и анализ данных

Работа с данными в R

Для работы с R можно использовать облачный ресурс RStudio Cloud. Для работы на своем компьютере необходимо установить (именно в таком порядке): R и RStudio. Ссылки для скачивания:

Инструкция по работе с RStudio (файл). Язык разметки Markdown в RStudio (конспект). Кроме вводных видео, здесь собраны материалы курсов с использованием R: 1, 2, 3.

Блок 1: введение в работу с данными

Блок 2: визуализация и анализ данных

  • Визуализация данных и доверительные интервалы в R (код, конспект).
  • Проверка статистических гипотез в R (код, конспект).
  • Меры связи: коэффициенты корреляции Пирсона и Спирмена (код, конспект).
  • Коэффициент корреляции Пирсона и парная линейная регрессия (код, конспект, canada.csv).