Система мониторинга и управления сбором данных | OTUS
⚡ Подписка на курсы OTUS!
Интенсивная прокачка навыков для IT-специалистов!
Подробнее

Курсы

Программирование
iOS Developer. Professional Kotlin Backend Developer Flutter Mobile Developer Symfony Framework C++ Developer. Basic Unity Game Developer. Basic Java Developer. Professional
-35%
Highload Architect Unity Game Developer. Professional React.js Developer Специализация Java-разработчик
-25%
Алгоритмы и структуры данных
-16%
Scala-разработчик C# Developer. Professional
-23%
Разработчик голосовых ассистентов и чат-ботов Team Lead Архитектура и шаблоны проектирования NoSQL Web-разработчик на Python Golang Developer. Professional PostgreSQL Vue.js разработчик Супер-практикум по использованию и настройке GIT Разработчик IoT Подготовка к сертификации Oracle Java Programmer (OCAJP) Программист С HTML/CSS
Инфраструктура
Инфраструктурная платформа на основе Kubernetes Microservice Architecture Базы данных Highload Architect Reverse-Engineering. Professional
-8%
Network engineer. Basic Administrator Linux.Basic MongoDB Infrastructure as a code MS SQL Server Developer Cloud Solution Architecture Мониторинг и логирование: Zabbix, Prometheus, ELK Супер-практикум по использованию и настройке GIT Разработчик IoT Экcпресс-курс «ELK» Супер-интенсив "Tarantool" Экспресс-курс «CI/CD или Непрерывная поставка с Docker и Kubernetes» Экспресс-курс «Введение в непрерывную поставку на базе Docker»
Корпоративные курсы
Безопасность веб-приложений Экосистема Hadoop, Spark, Hive Пентест. Практика тестирования на проникновение Node.js Developer Java QA Engineer. Basic
-18%
Reverse-Engineering. Professional
-8%
DevOps практики и инструменты NoSQL Reverse-Engineering. Basic Cloud Solution Architecture Внедрение и работа в DevSecOps Супер-практикум по работе с протоколом BGP Game QA Engineer Супер - интенсив по Kubernetes Дизайн сетей ЦОД Экспресс-курс «IaC Ansible» Экспресс-курс по управлению миграциями (DBVC) Экспресс-курс "Версионирование и командная работа с помощью Git" Основы Windows Server
Специализации Курсы в разработке Подготовительные курсы Подписка
+7 499 938-92-02

Система мониторинга и управления сбором данных

Spring_Deep_30.1_site-5020-43c7ad.png

Курс «Разработчик на Spring Framework» включает в себя не только широкий спектр теоретических и практических материалов, но и проектную работу. Выполнив её, студент закрепит полученные знания и расширит своё портфолио, что обязательно пригодится при трудоустройстве.

Предлагаем вашему вниманию один из последних проектов под названием «Система мониторинга и управления сбором данных», который был создан нашим выпускником Марком Герасимовым.

Поставленные цели

Существует много датчиков, с некоторой периодичностью отправляющих свои показания по протоколу ТСР на сервер. Целевая нагрузка в таких случаях составляет 2-5 тыс. сообщений в секунду. Потребовалось решение, способное предоставить доступ к данным, получаемым с датчиков, и обеспечивающее удалённое управление устройствами.

Речь идёт о системе, которая не только должна была поддерживать гибкую ролевую модель, но и предполагать наличие следующих ролей: — администрирование (регистрация, удаление датчиков и пользователей); — управление устройствами; — просмотр данных.

Архитектура и инструменты

Для решения поставленных задач студент предложил следующую архитектуру:

SpringProekt2-20219-5d0643.jpg При практической реализации проекта задействовался широкий спектр инструментов: — Spring Boot — как основа каждого из модулей; — Spring Integration — точка входа для получения данных по ТСР; — Apache Kafka — транспорт между ТСР-gateway и backend; — PostgreSQL — хранилище показаний, пользователей, устройств и прочего; — Spring Data JPA — работа с хранилищем; — Spring Security — задачи авторизации и ролевая модель; — Spring MVC — REST-сервис; — Swagger UI — описание API и базовый UI; — Spring Shell — основа тестового модуля-заглушки.

Что в итоге?

В результате студентом была создана система мониторинга и управления сбором данных, которая продемонстрировала следующие результаты: — достаточные показатели по скорости: около 10 000 сообщений в секунду; — гибкая ролевая модель (планируется ещё добавление АCL); — возможность разделение зон ответственности между независимыми модулями.

Например, можно без проблем переехать на другой хост без потери данных.

Проект был успешно защищён и одобрен преподавателем. Ознакомиться с исходным кодом работы вы можете по здесь.

Не пропустите новые полезные статьи!

Спасибо за подписку!

Мы отправили вам письмо для подтверждения вашего email.
С уважением, OTUS!

Автор
0 комментариев
Для комментирования необходимо авторизоваться