Обязанности и достижения:
Как построить эффективную архитектуру данных, оптимизировать обработку данных и поддерживать крупномасштабные системы данных. В дополнение к работе с Python я также совершенствую свои языковые навыки, работая с Shell, SQL и Scala, чтобы создавать конвейеры обработки данных, автоматизировать общие задачи файловой системы и создавать высокопроизводительные базы данных.
С помощью практических упражнений я добавлял облачные инструменты и инструменты для работы с большими данными, такие как AWS Boto, PySpark, Spark SQL и MongoDB, в ваш набор инструментов для обработки данных, чтобы помочь мне создавать и запрашивать базы данных, обрабатывать данные и настраивать расписания для запуска моих конвейеров.. К концу этого трека я бы освоил критическую базу данных, навыки написания сценариев и процессов, необходимые мне для продвижения по карьерной лестнице.