Сегодня все и больше и больше специалистов по Data Science/Data Engineering применяют в своей каждодневной работе контейнеры. Такой подход дает возможность разделить рабочие среды, а также упрощает миграцию как из On-premise в облако, так и обратно. Пользуясь Kubernetes и контейнерами, вы, по сути, приближаетесь к Cloud Native. Что же, давайте посмотрим, какие конкретные плюсы можно получить, если запустить Spark внутри Kubernetes.

DevSecOps расшифровывается как development, security и operations. Это подход, автоматизирующий интеграцию задач информационной безопасности на всех этапах жизненного цикла разработки ПО, начиная от проектирования, заканчивая интеграцией, тестированием, развертыванием и доставкой ПО.

Концепция SRE включает в себя довольно много конкретных практик. Но в их основе все равно лежат базовые принципы. О них и поговорим.

DevOps представляет собой методологию, помогающую автоматизировать все этапы по созданию ПО: от разработки и тестирования до развертывания и доставки конечного продукта пользователям. В результате команда работает более эффективно, выпуская на рынок качественные цифровые продукты.

Как известно, нам требуется на сервере только один виртуальный хост. Но что делать, если мы желаем сменить хост, установленный по умолчанию, на что-либо более конкретное? Потребуется удалить текущий virtualhost, потом отправить нужный нам virtualhost и активировать его, а также перезапустить Apache. Приступим!

Чтобы создать команду DataOps, далеко не всегда следует нанимать новых специалистов. Дело в том, что во многих компаниях костяк DataOps-группы уже имеется — в этом качестве могут выступать специалисты из уже существующих DevOps-команд.

Организации, внедряющие методологию DevOps, нанимают соответствующего специалиста. DevOps-инженер отвечает за автоматизацию на всех этапах: начиная от разработки, сборки и тестирования, заканчивая развертыванием, выпуском и доставкой продукта конечным пользователям.

Как известно, новые технологии требуют от компаний перемен и способностей работать с Big Data, оперативно реагируя на события. В этом контексте способны помочь принципы DataOps.

О популярности DevOps не знает только ленивый. Однако уже не первый год набирает силу другая концепция — DataOps. Она отличается тем, что в разрабатываемые системы, как и в непосредственные процессы разработки, повсеместно внедряют элементы анализа данных.

Иногда можно услышать, что традиционные администраторы уходят в прошлое, тогда как на их замену приходят SRE-инженеры. Так ли это?