За 5 лет доля российских компаний, реализующих инициативы по управлению данными, выросла в 5 раз
Такие данные представлены в исследовании «Оценка зрелости управления данными», подготовленного DIS Group.
В нём приняли участие более 200 ведущих российских компаний, в том числе 24% представителей финансового сектора, 20% – производственного сектора, 11% – телеком-компании, 9% – нефтегазового сектора и ритейл, 7% – ИТ-компаний, образовательных учреждений, энергетический сектор, 4% – недвижимость и 2% – госсектор.
В документе говорится, что в период с 2018 по 2023 годы доля компаний, которые находятся в процессе реализации инициатив по управлению данными, выросла с 17% до 89%. В 2018 году более 60% компаний не использовали специальные инструменты управления данными, отдавая предпочтение ручным методам или собственным разработкам. К 2023 году доля компаний, использующих проприетарное ПО для управления данными, достигла 82%, из них 48% относятся к гибридным решениям с использованием как проприетарного ПО, так и open source.
Ожидается существенное развитие инструментов управления данными как следствие контекста и вызовов, стоящих перед бизнесом. Значительный скачок произойдет в таких областях, как управление мастер-данными (рост на 23%), качество данных (рост на 22%), бизнес-глоссарий (рост на 20%) и каталог данных (рост на 20%). Согласно исследованию, к 2028 году доля компаний, реализующих инициативы по управлению данными, приблизится к 98%. При этом доля компаний, использующих гибридную комбинацию проприетарного и открытого ПО, достигнет 90%.
«В ближайшие 5 лет ожидается значительный рост и совершенствование инструментов управления данными, использующих элементы ИИ и машинного обучения. Их внедрение ведет к снижению затрат на управление данными до 30%, увеличению производительности сотрудников до 25% и повышению качества данных до 90%», –отметил генеральный директор DIS Group Павел Лихницкий.
Информацию о значительном росте рынка управления данными подтверждают в Ассоциации Больших Данных: «Мы действительно отмечали, что в управлении данными 5 лет назад были в основном крупные компании и B2C-рынок. Со временем оно пришло в ключевые бизнес-процессы и кросс-индустриальные кейсы в другие отрасли. Так рост с 17% до 89% кажется органичным. Эти показатели в целом коррелируют с трендами развития рынка больших данных, который рос с учётом различных CAGR по сегментам и годовой инфляции на 12,4% в 2022 г., 6% в 2023 г. и вырастет, по нашим данным, на 4% в 2024 г».
Также в Ассоциации отмечают, что область Защиты Данных (Data Security) становится критичной для большого количества отраслей, и инвестиции в создание и внедрение инструментов здесь могут стать существенными, а итоговые показатели могут и превзойти указанные в исследовании.
«При замещении ушедших импортных продуктов компании выбирают более современные и прогрессивные инструменты, которые содержат функции ИИ или сочетаются с его инструментами, взамен наследуемым. Это интеллектуальный контроль и средства повышения качества данных в компании, инструменты разметки данных, data mining, где исторически была велика доля ручного труда специалистов», – подчеркнул исполнительный директор Ассоциации больших данных Алексей Нейман.
Так ли безоблачно будущее данных
«В эпоху цифровой трансформации данные являются важнейшим активом организаций и играют ключевую роль в принятии решений, разработке инновационных продуктов и создании конкурентного преимущества. Однако ценность данных имеет существенную зависимость от эффективности применяемых методов управления данными», – заявил Павел Лихницкий.
Если компании будут использовать недостаточно эффективные инструменты и будут мало инвестировать в управление данными, то бизнес-ценность в компаниях, реализующих соответствующие инициативы, может остаться на уровне 2023 года.
Кроме того, экономическая нестабильность может затормозить развитие инфраструктуры и использования инструментов для управления данными, а нехватка квалифицированных специалистов будет препятствовать развитию Data Governance и росту компетенций в области управления данными.
В числе возможных вызовов в исследовании приводятся приведенные ниже ситуации.
- Проблемы с инструментами: отсутствие достаточно развитых отечественных инструментов управления данными может подорвать доверие бизнеса к этому процессу.
- Экономическая нестабильность: неблагоприятные экономические условия могут ограничить инвестиции в развитие Data Governance, что отрицательно скажется на росте зрелости.
- Нехватка квалифицированных кадров: дефицит специалистов с необходимыми навыками в области управления данными может тормозить развитие Data Governance.
Глобальные тренды
Исследование DIS Group выявило ряд ключевых глобальных трендов в области управления данными.
Соблюдение нормативных требований: введение строгих правил защиты данных приводит к усилению внимания к безопасности и управлению данными.
Демократизация данных: компании стремятся предоставить доступ к данным большему количеству сотрудников, что требует разработки специфических стратегий управления данными.
Интеграция передовых технологий: искусственный интеллект, машинное обучение и блокчейн активно внедряются в процессы управления данными, автоматизируя задачи и повышая качество данных.
Качество и целостность данных: осознавая важность качественных и достоверных данных, компании активно вводят метрики и инструменты для их мониторинга.
Платформы управления данными: с увеличением объема и сложности данных растет спрос на специализированные инструменты и платформы для эффективного управления данными.
Как отмечают в Ассоциации Больших Данных, согласно Стратегии развития рынка больших данных 2024 г., в 2023 г. тренды роста рынка и оказываемого эффекта от внедрения технологий больших данных выше трендов 2019 и 2020 гг. В сравнении с прогнозом Стратегии 2022 г. прогнозируемые объемы рынка на 2024 г. со 176 млрд руб. выросли до ~ 319 млрд руб., а эффект на тот же год — в 1,5 раза — до 1,6 трлн руб.
Управление мастер-данными, качество данных, бизнес-глоссарий и каталог данных безусловно являются первыми приоритетами в компаниях для автоматизации и внедрения специализированных инструментов, поэтому рост, скорее, произойдет за счёт «догоняющих» отраслей и компаний.
«Исследование наглядно показывает, как цифровая трансформация изменяет компанию. Несколько лет назад многие начали с приобретения инструментария — это самый доступный способ начать изменения, купить что-то готовое с рынка. Постепенно приходит понимание, что без одновременной перестройки бизнес-модели, операционных процессов и культуры внутри, одни инструменты не дают достаточного результата. Сегодня эти составляющие стабилизируются по уровням», — сказал директор по цифровой трансформации и технологическим инновациям Школы управления Сколково Анатолий Стояновский,
Специалисты отмечают, что сейчас российские организации продолжают активно работать с большими данными. Они вкладывают значительные ресурсы в развитие цифровых инструментов, улучшение процессов управления данными и обучение специалистов. Этот процесс в любом случае не остановится, потому что большие данные представляют собой ключ к повышению эффективности, созданию новых продуктов и укреплению конкурентных позиций в современном мире.
Кроме того, в стране растет количество технологических и инновационных стартапов. В GenerationS отмечают, что с конца 2023 года наблюдается тенденция, согласно которой технологии ориентированы на развитие рынка, а не на сохранение прежних позиций и импортозамещение.
«При работе со стартап-сообществом также наблюдается тенденция по подготовке технологический решений: если раньше от общего числа решений технологические компании составляли не более 10%, то сегодня эта цифра приближается к 40%», – отметили в компании.
Эффективность инвестиций в цифровые инструменты подтверждена фактическими результатами. Компании все чаще используют данные для разработки инновационных продуктов и улучшения процессов принятия решений, что приводит к повышению прибыли. Ключевую роль в этом играют аналитические инструменты, позволяющие обрабатывать большие объемы данных, выявлять скрытые закономерности и прогнозировать развитие событий. Так, ЕВРАЗ, одна из крупнейших металлургических и горнодобывающих компаний мира, оценила годовой эффект от внедрения цифровых проектов в $100 млн.
«Необходимость обработки непрерывно растущих объемов информации, цифровизация отраслей экономики, стимулирование со стороны государства определяет рост популярности соответствующего программного обеспечения и является драйвером быстрого развития рынка СУБД и инструментов обработки данных. По нашим оценкам, по итогам 2023 года, рынком почти полностью нивелировано падение 2022 года, и его совокупный объем достиг 67 млрд рублей. Для сравнения, в 2021 году рынок оценивался в 72 млрд рублей, в 2022 — 56 млрд рублей. При этом, большую часть рынка занимают отечественные игроки, доля зарубежных вендоров стремительно падает. В 2023 году она составляла менее 20%, а уже к 2027 году снизится и вовсе до 1%. Среднегодовой темп роста объема рынка до 2030 года ожидается выше общемирового и, по оценкам, составит 20% с 2023 г. К 2030 году его объем достигнет более 234 млрд рублей, а это рост почти в 3,5 раза», – отметила заместитель генерального директора ЦСР Екатерина Кваша.
«В период с 2018 по 2023 год существенно усилились практики управления данными и были созданы CDO офисы как отдельные функциональные направления, поддерживающие развитие бизнеса, – говорит Павел Лихницкий. —
Это вызвало значительный прогресс в развитии инструментов управления данными и ускорило переход от начального этапа, где преобладали собственные разработки и фокус на базовом инструментарии, к значительно более зрелому и комплексному подходу. В частности, особое внимание компании уделяли развитию инструментов управления мастер-данными, моделирования, Data Lineage и улучшению качества данных. Это подчеркивает растущее осознание ценности данных для бизнеса и способствует увеличению спроса на аналитику данных».
