Обязанности и достижения:
1)
Разрабатывал приложения на языке Python для Веб-скреппинга данных различной природы из открытых источников.
При работе с сайтами, требующими авторизации пользователя и взаимодействия со сложной системой навигации по сайту использовал фреймворк Selenium. В ином случае использовал связку библиотек requests и BeautifulSoup.
Извлеченные данные сохранял в локальные базы данных, либо выгружал в Excel.
2)
Обрабатывал собранные данные в среде Jupyter Notebook, формировал отчеты для аудиторов.
Для проведения EDA применял pandas, geopandas, statmodels, matplotlib, seaborn, использовал scikit-learn для извлечения аномалий. Реализовал на основе Jupyter Notebook интерактивные веб-приложения для анализа выборок данных непрофильными специалистами.
Технологии: Jupyter notebook, SQL DB, Matplotlib, Seaborn, Scikit-learn, Numpy,
Scipy, Pandas, Geopandas, BeautifulSoup, Selenium.