Методология запуска Apache Spark в различных менеджерах контейнеров (Hadoop, Kubernetes)

Краубаев Амангельди Султанмуратович

Аннотация


Данная дипломная работа посвящена методологии запуска Apache Spark в кластерной среде Kubernetes. Проведена работа по запуску Spark в Kubernetes для предоставления возможности изолировать рабочие среды, гибко управлять ограничениями приложений и создать масштабируемую систему.
Было выполнены развертывание Spark в среде Hadoop и Kubernetes, а также запуск приложения в нативном режиме для Kubernetes, используя Docker-образ. Полученный теоретический материал будет полезен в таких областях информатики, как "Инженерия данных" и "DevOps инженер".
Результаты данной работы могут быть применены в практической
деятельности инженеров данных и DevOps инженеров.