5 этапов управления жизненным циклом данных

Содержание данных и рекомендации по продуктам не зависят от редакции. Мы можем зарабатывать деньги, когда вы переходите по ссылкам наших партнеров. Узнать больше.

Управление жизненным циклом данных позволяет получить контроль над огромными объемами данных, которыми обладает большинство организаций, и извлечь из них выгоду. Предприятия, которые могут разрушить свою организационную разрозненность и разумно унифицировать и проанализировать свои данные, более конкурентоспособны и более успешны, чем их коллеги. Достижение этих целей требует тщательной организации пяти различных этапов жизненного цикла данных: создание, хранение, использование, архивирование и уничтожение. В этой статье подробно описаны эти этапы и приведены рекомендации по каждому из них.

В широком смысле, управление жизненным циклом данных — это дисциплина, обеспечивающая доступность и возможность использования данных теми, кто в них нуждается, от начала до конца. Жизненный цикл данных сам по себе охватывает все этапы, которые организация должна пройти при взаимодействии с данными, будь то финансовые, клиентоориентированные или иные. В зависимости от того, кого вы спрашиваете, жизненный цикл данных состоит из пяти или восьми этапов. Пятиэтапный цикл является более простым и распространенным:

Создание > Хранение > Использование > Архивирование > Уничтожение

Восьмиэтапный цикл представляет собой расширение двух стадий пятистадийного цикла. В этой модели «сбор» и «обработка» являются частью этапа хранения, а «управление», «анализ», «визуализация» и «интерпретация» — частью этапов использования и архивирования.

Генерация > Сбор > Обработка > Хранение > Управление > Анализ > Визуализация > Интерпретация

Для успешного прохождения каждого этапа необходимо учитывать внутренние процессы и пользователей, инфраструктуру и технологии, внешние регулирующие и юридические органы, конфиденциальность потребителей и многое другое, что делает управление жизненным циклом данных сложной темой, затрагивающей многие области работы предприятия. Давайте рассмотрим каждый этап более подробно.

Поскольку предприятия обрабатывают много данных, этот этап легко принять как нечто само собой разумеющееся. Но учтите следующее: данные организации создаются на широком спектре устройств во многих регионах. Чтобы сделать все правильно, на этом этапе необходимо убедиться, что у пользователей есть правильные инструменты для создания данных и правильные процессы, гарантирующие, что данные могут храниться в соответствующих форматах и ​​типах.

По сути, на этапе создания берутся исходные данные, обеспечивается возможность их захвата и их доступность на соответствующем носителе данных. Чтобы перейти к следующему этапу — этапу хранения — данные должны быть правильно обработаны. Метаданные должны быть добавлены, чтобы сделать их доступными для поиска, например, а также быть определены и учтены требования к доступу и конфиденциальности. Этот этап лучше всего выполнять автоматически на уровне метаданных, когда данные передаются на носитель данных.

«При правильном внедрении метаданные служат дорожной картой, предоставляющей организациям информацию, необходимую для контроля всех своих данных и ресурсов хранения», — сказал Тони Кэхилл, старший архитектор решений в StrongBox Data Solutions. «В гибридных и облачных средах метаданные можно использовать для повышения устойчивости данных и снижения платы за исходящий трафик за счет ориентации на определенные файлы».

Этап хранения сложен и имеет множество последствий для оставшейся части жизненного цикла. Например, если данные небрежно сбрасываются в облако или на дисковые массивы, они могут легко потеряться, ими будет сложно управлять, или их хранение станет дорогостоящим. Существует много вариантов носителей данных — например, облако, флэш-память, диск, лента или оптический носитель — но необходимо подумать о том, чтобы найти правильное место для его хранения, принимая во внимание такие факторы, как стоимость, доступность и уровень производительности, необходимый для приложений, которые он обслуживает.

Безопасность также является проблемой в современном хранилище, а это означает, что на этом этапе также необходимо учитывать неизменность данных, безопасность, конфиденциальность и место хранения, а также избыточность - для защиты от катастроф или утечки данных необходимо использовать несколько резервных копий данных. быть сделано. Кроме того, внешние правила и положения могут определять способ хранения данных. Европейские страны, например, не хотят, чтобы данные экспортировались за пределы их границ, и вводят суровые наказания для нарушителей. Предприятия, работающие в жестко регулируемых отраслях, должны гарантировать, что их данные соответствуют всем соответствующим нормам, включая HIPAA, Индустрию платежных карт (PCI), Сарбейнса-Оксли и любые применимые правила Комиссии по ценным бумагам и биржам (SEC).