Глядя на мир, данные, как новый фактор производства, играют жизненно важную роль в глобальной экономической и торговой деятельности, стимулируя бурный рост цифровой экономики. Согласно прогнозам, к 2025 году вклад глобальных потоков данных в общий экономический рост достигнет ошеломляющих 11 триллионов долларов США.
В последние годы внимание страны к элементам данных возросло. 31 декабря 2023 года 17 ведомств, включая Национальное управление данных, совместно опубликовали Трехлетний план действий «Элементы данных ×» (2024–2026 годы), в котором построение цифровой экономики с использованием данных в качестве ключевого элемента является неизбежным требованием для продвижения высоких технологий. -качественное развитие.
Ожидается, что в 2024 году наступит новая эра «данных ×», высвобождающая эффект мультипликатора данных и катализирующая развитие новой производительности. Ключевой путь к достижению этой цели — продвижение процесса капитализации данных , использование элементов данных для стимулирования бизнес-изменений и реализации ценности данных.
В этой статье мы углубимся в определение и важность элементов данных и капитализации данных, а также проясним их ключевые роли в контексте больших данных. В то же время мы определим путь реализации активизации данных и способы реализации прикладной ценности данных, чтобы обеспечить инновационное развитие предприятий в новую эпоху и добиться модернизации бизнеса и изменения ценностей.
Элементы данных и капитализация данных
Что такое элементы данных?
Согласно «Белой книге элементов данных (2022 г.)», элементы данных относятся к ресурсам данных, которые участвуют в общественном производстве и деловой деятельности и приносят экономические выгоды владельцам или пользователям. Таким образом, термин «элементы данных» ориентирован на цифровую экономику. Упоминание «данных» в контексте обсуждения производительности и производственных отношений подчеркивает ценность данных в содействии производству. в зависимости от конкретных производственных потребностей, компьютерные данные, собранные, отсортированные и обработанные, а также их производные формы, исходные наборы данных, стандартизированные наборы данных , различные информационные продукты, вложенные в производство, а также системы, информация и знания, созданные на основе данных, - все это может быть включено в обсуждение элементов данных.
Основные свойства элементов данных включают уникальность, атомарность и ясность определения, которые позволяют системе точно идентифицировать, обрабатывать и анализировать их. Например, номера наших мобильных телефонов, адреса электронной почты, записи посещений веб-страниц и т. д. — все это элементы данных, которые можно собирать, хранить, анализировать и использовать, чтобы помочь нам принимать более эффективные решения.
Необходимость капитализации данных
В цифровой экономике обеспечение эффективного и безопасного использования данных имеет решающее значение. Реализация активизации данных является основой построения системы обеспечения качества и безопасности данных. Капитализация данных включает правила и стандарты сбора, хранения, использования и обмена данными. Кроме того, капитализация данных также включает в себя требования по защите конфиденциальности данных и соблюдению требований, гарантирующих, что использование данных не ущемляет личные права и не нарушает законы и правила.
Таким образом, можно сказать, что капитализация данных является основой для реализации « элемента данных x ». Только посредством стандартизированного управления активами данных можно создать условия для реализации экономической ценности данных. Благодаря капитализации данных можно лучше управлять сбором, хранением, обработкой, обменом и использованием информационных активов, а также повысить надежность, точность и безопасность данных.
Как реализовать капитализацию данных?
С помощью « платформы управления активами данных » Kangaroo Cloud, посредством полного звена сбора метаданных, управления метаданными и анализа метаданных, собирается и поддерживается стандартизированная информация метаданных, а также открывается сеть взаимосвязи данных, чтобы предприятия могли реализовать капитализация данных. Стандартизация и стандартизированное управление.
Кроме того, предприятия могут понять общие активы данных посредством инвентаризации активов в сочетании с функциями управления безопасностью данных и контроля, чтобы обеспечить «полную, унифицированную и связанную» основу метаданных для анализа ценности данных, полностью раскрыть потенциал элементов данных. и стимулировать бизнес-инновации и обновления.
Сбор метаданных
Сбор метаданных является основой для реализации активизации данных. Чтобы собрать информацию о метаданных, необходимо сначала провести внутреннее исследование, чтобы отсортировать бизнес-данные, данные озерного хранилища или данные приложений, которые необходимы предприятию для унифицированного управления метаданными. После сбора информации о подключении к источнику данных различных типов данных подайте заявку на получение разрешений на доступ к метаданным только для чтения у каждого лица, ответственного за сбор метаданных.
После успешного подключения к источнику данных задачи периодической синхронизации и задачи временной синхронизации для конкретных источников данных или баз данных можно создавать через « Платформу управления ресурсами данных » Kangaroo Cloud. Если есть информация таблицы базы данных, которую не нужно собирать и поддерживать, вы можете установить условия фильтрации базы данных и условия фильтрации таблицы данных, чтобы предотвратить синхронизацию неважных баз данных/таблиц с платформой активов и поддержать настройку временной синхронизации содержимого метаданных. и цикл планирования задач синхронизации.
После завершения синхронизации платформа автоматически соберет информацию метаданных таблиц данных для каждого типа источника данных, например, базу данных, к которой она принадлежит, время создания таблицы данных, время последнего изменения DDL, хранилище. местоположение, размер хранилища, формат хранения, количество строк таблицы и тип таблицы, а также другую информацию о технических атрибутах, а также выполнить предварительные работы по обслуживанию активизации данных.
Управление метаданными
После завершения сбора метаданных можно осуществлять стандартизированное управление метаданными в соответствии с конкретными потребностями бизнеса для повышения качества активизации данных. Во-первых, вы можете в автономном режиме связаться с лицом, ответственным за каждый источник данных, по поводу отсутствия метаданных, обсудить спецификации проектирования модели метаданных, составить список элементов метаданных, которые необходимо поддерживать для каждого типа источника данных, и ввести их на платформу. .
Во-вторых, методы обслуживания метаданных могут использоваться для назначения лица, ответственного за каждую часть метаданных, чтобы гарантировать, что работа по обслуживанию метаданных может быть назначена ответственному лицу. Ответственному лицу необходимо полностью поддерживать недостающую информацию метаданных в соответствии с договоренностью, а весь обслуживающий персонал может добавлять пользовательские теги к активам данных, чтобы облегчить быстрый запрос информации об активах данных в соответствии с классификацией тегов. Менеджеры могут регулярно подсчитывать целостность метаданных и отслеживать ход обслуживания метаданных. Они могут вести регулярную статистику на основе различных параметров, таких как источники данных и ответственные лица, своевременно выявлять проблемы и призывать ответственных лиц улучшать информацию метаданных.
В то же время, благодаря возможностям управления стандартами данных , предоставляемым платформой , стандартная информация на уровне полей может быть стандартизирована. Посредством корневого управления и стандартного управления определяется стандартная информация полей в таблице данных, такая как имя поля, китайское имя поля, тип поля, длина поля и другая информация.
Анализ метаданных
После завершения сбора метаданных и управления метаданными можно провести анализ на основе информации метаданных. Платформа обеспечивает анализ полноты, анализ качества и анализ происхождения метаданных , а также всесторонне анализирует и интегрирует информацию об активах внутри предприятия для эффективного содействия предприятиям. управлять активами данных.
Анализ полноты: процент статистической полноты, поддерживающий статистический анализ по нескольким измерениям, включая уровень платформы, уровень типа источника данных , уровень источника данных, уровень базы данных, уровень ответственного лица и уровень конкретного атрибута. Например, при проведении статистического анализа в соответствии с размером ответственного лица статистические результаты могут быть полностью использованы для продвижения и контроля разработчиков данных для своевременного и полного поддержания информации метаданных.
Анализ качества. Платформа предоставляет возможности проверки качества и может предоставлять различные сценарии мониторинга качества . Она имеет встроенные богатые функции проверки для проверки одной таблицы и сравнения нескольких таблиц для удовлетворения потребностей предприятий в своевременности, полноте, согласованности и т.д. и Требования к многомерной проверке достоверности и точности. Посредством процесса настройки правил перед событием, проверки правил во время события и отчета об анализе после события выполняется многомерная оценка данных для обеспечения качества корпоративных данных.
Анализ кровного родства: благодаря возможности анализа кровного родства предприятия могут быстро обнаружить некоторые таблицы, которые определенно имеют кровное родство, но кровное родство отсутствует, например таблицы на нижних уровнях хранилищ данных, отчеты BI и т. д. Предприятия могут создавать в базе данных информацию, необходимую для мониторинга кровного родства. Платформа будет использовать результаты SQL-анализа кровного родства и статистику изолированных таблиц кровного родства в базе данных , чтобы помочь предприятиям контролировать качество активов данных и оптимизировать пространство для хранения активов. .
Инвентаризация и отображение активов
Платформа предоставляет функцию карты данных , которая обобщает все данные об активах предприятия, включая таблицы базы данных, задачи разработки, индикаторы, теги, API и другие типы активов данных, предоставляя пользователям унифицированный, полный и удобный портал запросов метаданных . Он поддерживает различные режимы поиска и условия фильтрации для быстрого поиска метаданных. Он также может постоянно обнаруживать недостающие метаданные на основе результатов запросов и поддерживать обслуживание метаданных.
В то же время платформа также предоставляет панель управления активами , с помощью которой предприятия могут анализировать меняющиеся тенденции, распределение, ранжирование стоимости, пропорции хранения и другую информацию об общих активах, чтобы полностью понять общую ситуацию с активами данных. Предоставьте руководству доступ к визуализации активов , чтобы помочь руководству в принятии решений по направлениям строительства.
Контроль безопасности данных
Управление активизацией данных неотделимо от контроля безопасности данных . « Платформа управления активами данных » Kangaroo Cloud поддерживает управление правилами десенсибилизации данных , управление разрешениями на данные и классификацию данных. Для некоторых конфиденциальных данных, таких как номера мобильных телефонов, идентификационные номера и другая личная информация, вы можете настроить правила снижения чувствительности для пониженного отображения. Платформа поддерживает настройку разрешений на уровне строк и может контролировать объем разрешений пользователей на основе классификации данных и связи с уровнями пользователей для достижения детального управления разрешениями на данные.
Подведем итог
Капитализация данных может значительно повысить эффективность управления данными предприятий, а также полностью изучить и реализовать прикладную ценность данных. Благодаря этому процессу предприятия могут систематически классифицировать, хранить и извлекать данные, чтобы добиться унифицированного сбора данных, а не разбрасывать их по различным системам и файлам.
В то же время унифицированная модель управления, созданная за счет капитализации данных, играет ключевую роль в усилении безопасности данных. Предприятия могут снижать чувствительность и шифровать данные, а также контролировать уровни конфиденциальности, чтобы гарантировать, что только авторизованный персонал может получить доступ к данным и изменять их, тем самым обеспечивая максимальную безопасность и конфиденциальность данных и позволяя предприятиям полностью использовать активы данных при условии соблюдения требований. основа.
Данные являются отправной точкой всего. Предприятия должны придавать большое значение содействию активизации данных, укреплять возможности управления данными и в полной мере использовать активы данных для содействия устойчивому развитию предприятий.
Пользователи, которым необходимы активы данных, могут нажать на ссылку ниже, чтобы опробовать [Платформу активов данных].
Платформа активов данных: https://www.dtstack.com/dtinsight/dataassets?src=szsm.
Адрес загрузки «Белой книги по системе отраслевых индикаторов»: https://www.dtstack.com/resources/1057?src=szsm
Адрес загрузки «Информационного документа о продукте Dutstack»: https://www.dtstack.com/resources/1004?src=szsm
Адрес для скачивания «Белой книги по отраслевой практике управления данными»: https://www.dtstack.com/resources/1001?src=szsm
Для тех, кто хочет узнать или получить дополнительную информацию о продуктах больших данных, отраслевых решениях и историях клиентов, посетите официальный сайт Kangaroo Cloud: https://www.dtstack.com/?src=szkyzg .
Линус взял на себя задачу не допустить, чтобы разработчики ядра заменяли табуляции пробелами. Его отец — один из немногих руководителей, умеющих писать код, его второй сын — директор отдела технологий с открытым исходным кодом, а младший сын — ядро с открытым исходным кодом. участник Робин Ли: Естественный язык станет новым универсальным языком программирования. Модель с открытым исходным кодом будет все больше и больше отставать от Huawei: потребуется 1 год, чтобы полностью перенести 5000 часто используемых мобильных приложений на язык Hongmeng, наиболее подверженный этому . сторонние уязвимости. Расширенный текстовый редактор Quill 2.0 был выпущен с функциями, надежностью и разработчиками. Опыт был значительно улучшен. Ма Хуатэн и Чжоу Хунъи пожали друг другу руки, чтобы «устранить обиды». Meta Llama 3 официально выпущен. источник Laoxiangji не является кодом, причины этого очень трогательны. Google объявил о масштабной реструктуризации.