Процессный подход к разработке хранилищ данных повышает скорость создания аналитических продуктов
Сроки стандартной процедуры разработки витрины данных, модели или отчета можно сократить за счет использования инструментов управления метаданными, например, корпоративной базы знаний. Об этом рассказал Леонид Шумский, руководитель направления «Платформа данных» Т1 ИИ, Холдинг Т1, на IX ежегодном форуме «Управление данными», который состоялся 26 сентября 2024 года.
В ходе выступления спикер поделился опытом применения инструментов управления данными при реализации задач хранилищной разработки и обозначил стандартные ошибки, которых можно избежать в процессе внедрения.
Спикер выделил три основные проблемы корпоративных баз знаний: проблема доверия, полноты и исключения. Из-за сложности взаимодействия с ними их либо не наполняют, либо не используют вовсе. Решить эту задачу могут помочь интеграционные сервисы для встраивания инструментов в ландшафт: они упрощают работу за счет организации интеграционных потоков и выстраивания методологии DataOps. В частности, потоки управления передают данные о начале и завершении процесса и обеспечивают сквозную работу, а потоки результатов помогают в решении типовых задач разработки и аналитики, минимизируют количество рутинных процессов и дают специалистам возможность сконцентрироваться на нестандартных задачах. Технические потоки, в свою очередь, обеспечивают систему управления метаданными бизнес- и технической информацией для выполнения операций.
Леонид Шумский сделал отдельный акцент на обзоре видов сервисов в составе платформы по управлению данными, позволяющих реализовывать функциональность, необходимую конечным потребителям.
Эксперт также подчеркнул, что одним из важных этапов автоматизации является распределение пользователей по группам в зависимости от роли и полномочий в процессе разработки, а также в управлении данными. Это поможет предоставить каждой группе необходимый набор автоматизированных функций и сформировать сценарий действий, что значительно ускоряет работу пользователей.
«При проектировании и автоматизации процедуры создания отчета, витрины данных, модели или другого аналитического продукта в озере или хранилище необходимо оценивать основные объекты данных через понесенные трудозатраты, используемые ресурсы и ценность для компании. Реализация процессного подхода в задачах управления данными — это игра “вдолгую”, которая может изменить логику работы с информационными активами. При этом ценность таких решений будет только расти», — поделился Леонид Шумский, руководитель направления «Платформа данных» Т1 ИИ, Холдинг Т1.
О компаниях
Направление Т1 ИИ консолидирует экспертизу Холдинга Т1 в работе с большими данными, в разработке платформ хранения информации, а также в построении аналитических и рекомендательных систем для крупного бизнеса. В продуктовое портфолио входит более 15 решений, которые успешно используются в компаниях разного профиля и госструктурах, в том числе системы видеоаналитики и распознавания документов, модули BI-отчетности, цифровые ассистенты.
*
Т1 – многопрофильный холдинг, один из лидеров российского ИТ-рынка, является партнером ключевых производителей и разработчиков в сфере информационных технологий. В штате — 23 тысячи сотрудников. По версии аналитических агентств CNews Analytics и RAEX, Т1 является крупнейшей ИТ-компанией в России. Т1 предоставляет полный спектр ИТ-услуг для реализации высокотехнологичных проектов с учетом отраслевой специфики. В состав холдинга входят бизнес-направления «Иннотех» (Т1 Иннотех, Мультикарта), «Искусственный интеллект» (Т1 ИИ), «Сервионика» (Т1 Сервионика), «Интеграция» (Т1 Интеграция, Т1 Облако), «Радиоэлектроника» и вендор НОТА от Т1. Они обладают профессиональной экспертизой в области разработки ПО, системной интеграции, Big Data и машинного обучения, облачных сервисов, информационной безопасности, консалтинга, сервисной поддержки и аутсорсинга, процессинга, дистанционного зондирования Земли (ДЗЗ). Компетенции холдинга позволяют проектировать и реализовывать комплексные проекты в области цифровой трансформации для заказчиков любой отрасли, уровня развития инфраструктуры и масштаба. Также у холдинга есть собственный образовательный сервис для подготовки квалифицированных ИТ-кадров – Т1 Цифровая Академия. Среди клиентов Т1 – государственные структуры и крупнейшие компании ключевых отраслей экономики: операторы связи, финансовые организации, промышленные, топливно-энергетические, транспортные и торговые предприятия.