Дипломная работа по направлению 09.03.03 «Прикладная информатика», "Разработка автоматизированной системы интеграции сбора данных структурных подразделений фирмы (на примере сети филиалов АО «ТрансТелеком»)"
Цель работы
Целью работы является разработка автоматизированной системы интеграции и сбора данных из разрозненных источников структурных подразделений АО «ТрансТелеком» для формирования единого информационного пространства.
Задачи работы
- Провести инвентаризацию источников данных и форматов в филиалах компании.
- Разработать унифицированный формат обмена данными и протоколы интеграции.
- Спроектировать ETL-процессы (Extract, Transform, Load) для сбора и преобразования данных.
- Реализовать централизованное хранилище данных и механизмы обеспечения их целостности.
- Разработать инструменты для мониторинга процесса сбора данных и обработки ошибок.
Объект исследования
Объектом исследования является процесс сбора и консолидации отчетных данных из региональных филиалов АО «ТрансТелеком».
Предмет исследования
Предметом исследования являются методы и технологии интеграции данных и построения ETL-процессов.
Содержание (план работы)
Глава 1. Анализ источников данных и потребностей в консолидации
- 1.1. Исследование информационных систем и форматов данных в филиалах компании.
- 1.2. Обзор технологий и инструментов для интеграции данных (Apache NiFi, Kafka, ESB).
- 1.3. Разработка концепции и архитектуры системы интеграции.
Глава 2. Проектирование и реализация системы сбора данных
- 2.1. Проектирование ETL-процессов для каждого типа источника данных.
- 2.2. Разработка модулей извлечения и преобразования данных (парсеры, конвертеры).
- 2.3. Создание механизма загрузки данных в центральное хранилище и валидации.
Глава 3. Апробация и внедрение системы интеграции
- 3.1. Пilotное внедрение системы в нескольких филиалах и отладка процессов.
- 3.2. Мониторинг производительности и надежности системы.
- 3.3. Разработка регламентов технического обслуживания системы.