Web-scraping: сбор данных из баз данных и интернет-источников

Это страница практикума «Web-scraping: сбор данных из баз данных и интернет-источников», читаемого на программе «Психология» в 2023/2024 учебном году.

Практические занятия ведёт: Тамбовцева Алла Андреевна.

Правила игры

https://www.dropbox.com/scl/fi/gz5pz9dkp9jgshgk779hd/Web-scraping_.pdf?rlkey=suf1hr0ez8lwd56libxj8jenr&dl=0

Среда для работы

На данном курсе мы используем язык Python версии не ниже 3.5 и среду Jupyter Notebook. Скачать дистрибутив Anaconda, который установит интерпретатор Python, среду Jupyter Notebook и основные библиотеки для работы с данными, можно здесь. Если вы никогда не работали в Jupyter Notebook, предлагаем посмотреть небольшое видео и почитать инструкцию. В течение первой половины курса вместо Jupyter Notebook можно использовать онлайн-среду Google Colab, она бесплатна, но для работы нужен аккаунт Gmail.

Материалы курса

Неделя 0. Подготовка к работе. Напоминания про Python и Jupyter Notebook

Для подготовки к работе на курсе можно ознакомиться со следующими материалами онлайн-курса:

• Видео. Подготовка рабочего места, инструкция по открытию файлов в Jupyter Notebook.
• Видео. Первая программа, задачи для тренировки.

А также с материалами по работе в Jupyter Notebook и Google Colab:

• Запуск Jupyter без Anaconda Navigator (инструкция).
• Работа в Jupyter Notebook (видео), работа в Google Colab (видео).

Дополнительно:

• Набор текста в Jupyter (видео, ipynb).
• Markdown: больше про Markdown, знакомство с Jupyter Notebook и Markdown (читать, ipynb).
• LaTeX: Overleaf, документация, материалы других курсов по LaTeX.

Неделя 1. Язык HTML и его особенности. Знакомство с BeautifulSoup

• Язык HTML и его особенности: слайды, файл на codepen.
• Практикум 1.1 (читать, скачать).
• Практикум 1.2 (читать, скачать).

Дополнительно

• Тьюториал по HTML от w3schools, учебник от html5book.ru.
• Статья об ошибках запросов.