Python (МИЭФ)
Факультатив по Python для МИЭФ.
Ведёт: Илья Щуров.
Содержание
Инструменты
Python
Мы используем Python версии 3 и оболочку Jupyter (ранее известную как IPython Notebook). Чтобы их установить, проще всего скачать пакет Anaconda. Обратите внимание: вам нужна версия с Python 3.x.
После установки Anaconda у вас появится:
- Под Windows: в меню «Пуск» пункт «Anaconda», в нём подпункт «IPython Notebook».
- Под Mac OS X: приложение Anaconda Launcher, в нём пункт ipython-notebook.
После запуска IPython Notebook у вас откроется окно браузера (и лучше пусть это будет не Internet Explorer, под ним IPython Notebook работает с некоторым скриптом, а иногда не работает) со списком файлов. В нём надо выбрать New → Python 3. Откроется новая вкладка браузера, в ней будет запущен пустой notebook, состоящий из отдельных ячеек (cells). В ячейку с кодом можно вписать код и нажать Shift+Enter — он выполнится и вам покажут тут же результат.
Для установки дополнительных пакетов вам необходимо открыть консоль (это может быть Anaconda Prompt под Windows или стандартный «Терминал» под Mac OS или Linux) и набрать команду conda install <название пакета>
или pip install <название пакета>
(например, conda install seaborn
).
Вы можете также запустить Jupyter онлайн здесь, но данные там не сохранятся и возможности будут ограничены.
Работа с ipynb-файлами
Мы выкладываем материалы курса в виде ipynb-файлов. По ссылкам ниже вы можете просмотреть эти файлы. Если вы хотите открыть этот файл у себя, то вам необходимо скачать его (нажав на иконку в правом верхнем углу страницы с лекцией) и положить в каталог, из которого Jupyter открывает ноутбуки: например, воспользовавшись кнопкой Upload в самом Jupyter (на экране со списком файлов). Также этот каталог можно найти по строчке Serving notebooks from local directory: /home/user/IPython
, появляющейся в чёрненьком окошке при запуске Jupyter; здесь /home/user/IPython
— искомый путь.
Материалы
Занятие 1
- Первое знакомство: конспект, видео.
- Дополнение: Шаблон:PT арифметические операции, целые и вещественные числа.
- Списки и цикл
for
: конспект, видео. - Ввод-вывод списков, проверка условий, цикл
while
: конспект, видео- Дополнение: Шаблон:PT split и join, if, while
Занятие 2
- Присвоение vs. копирование: конспект.
- Функции: конспект видео.
- Списковые включения (list comprehensions): конспект видео
- Дополнение: Шаблон:PT списковые включения[1], двумерные массивы
- Словари: конспект, видео
Занятие 3
- Сортировка: конспект, видео
- Дополнение: Sorting howto (англ.)
- Файлы: конспект
- Дополнение: официальная документация (англ.)
- pandas и датафреймы: конспект по базовым возможностям pandas, видео к конспекту, видео с занятия.
- Официальная документация
pandas
: 10-минутное введение (обзор возможностей), pandas cookbook, индексация и выбор данных (подробно).
- Официальная документация
Занятие 4
- Продвинутые возможности pandas: конспект, видео второй половины занятия.
- Официальная документация
pandas
: Мультииндексы
Занятие 5
- Ещё о pandas.
- Извлечение данных из веб-страниц с помощью BeautifulSoup и requests: конспект, видео
- Оригинальная документация (англ.): requests BeautifulSoup.
Занятие 6 (планируется)
- Продвинутые возможности веб-скреппинга, работа с API.
- Извлечение данных с помощью RoboBrowser: конспект, видео
- Оригинальная документация (англ.): RoboBrowser
- Работа с открытыми API с помощью XML: конспект, видео.
- JSON и API: конспекты ещё один пример.
- конспект
- неофициальная документация по Python-Selenium (её проще читать, чем официальную).