Metadata Explorer — SAP Data Intelligence
Conheça as principais funcionalidades do Metadata Explorer no SAP Data Intelligence.
Introdução
O SAP Data Intelligence é uma plataforma poderosa para gerenciamento e análise de dados que oferece diversas ferramentas para explorar, catalogar, perfilar e preparar dados. Entre as funcionalidades disponíveis, destaca-se o Metadata Explorer, que permite explorar os metadados dos conjuntos de dados registrados na plataforma.
Neste artigo, vamos explorar as principais características do SAP Data Intelligence Metadata Explorer, incluindo recursos como a pesquisa por tags, a catalogação de conjuntos de dados, a criação de perfis de dados e a aplicação de regras de qualidade.
Além disso, vamos discutir como o Metadata Explorer pode ser utilizado para melhorar a eficiência e a precisão da análise de dados em projetos de ciência de dados e business intelligence.
Recursos do SAP Data Intelligence Metadata Explorer
1- Search: Pesquise os conjuntos de dados que estão cadastrados com base nas tags.
2- Catálogo: catalogar os conjuntos de dados, publicar, perfilar e realizar a preparação dos dados.
3- Regras: As regras de qualidade de dados são uma forma especial de regras de negócios, para realizar validação de dados e verificação de qualidade.
4- Glossário de Negócios: é um local central para definir os termos e relacionamentos de negócios.
Browse connections
É possível visualizar todas as conexões criadas no bloco Gerenciamento de conexões, onde é viável acessar informações de origem de dados, metadados do conjunto de dados, relatórios de perfil de criação, análises de linhagem nas conexões suportadas e ainda realizar tarefas de preparação.
Fact sheet( ficha informativa)
Este recurso oferece informações detalhadas sobre os metadados do conjunto de dados, incluindo uma planilha com colunas, tipos de dados, tags, chaves exclusivas e descrições. Além disso, ele disponibiliza informações detalhadas sobre o conjunto de dados, tais como ID da conexão, tipo de conjunto de dados, tamanho, última modificação, última publicação e outras informações relevantes.
O recurso também apresenta tendências na contagem e tamanho das linhas, além de gráficos que proporcionam uma melhor visão geral da distribuição dos dados e metadados.
Por meio da guia de visualização de dados, é possível obter uma amostra dos dados da fonte, que por padrão é limitada a 100 registros, mas pode ser estendida para até 1000 linhas.
Publicando os dados
Após o registro do conjunto de dados, é possível publicá-lo para permitir fácil acessibilidade pela equipe, bem como possibilitar a pesquisa do conjunto de dados na barra de pesquisa, adição de comentários e marcação. A marcação do conjunto de dados permite uma pesquisa mais sofisticada em conjunto de dados.
Todos os conjuntos de dados publicados podem ser visualizados na tela “Browse the Catalog” e seu progresso pode ser monitorado no Monitoring tile (bloco Monitoramento).
Data Profiling (A criação de perfis de dados)
A criação de perfil de dados é o processo de análise e geração de relatórios estatísticos detalhados dos dados, que permitem que diferentes usuários tomem ações adequadas com base nessas informações. Essa análise ajuda os usuários a obter uma melhor compreensão dos dados, a realizar ações de limpeza, como diagnósticos, e a examinar minuciosamente os dados disponíveis.
O SAP Data Intelligence oferece um recurso integrado de criação de perfil de dados que fornece metadados adicionais do conjunto de dados, incluindo atributos como mínimo-máximo, comprimento médio, valores nulos, valores em branco, valores distintos e muito mais, que são adicionados à ficha técnica do conjunto de dados.
Todos os conjuntos de dados com perfil podem ser visualizados no bloco “View Profiled Datasets” e o progresso da análise pode ser acompanhado na guia de monitoramento.
Data Preparation (Preparação de Dados)
A preparação de dados é uma etapa crucial no processo de manipulação de dados brutos antes de serem processados e analisados. Ela auxilia na coleta, limpeza, enriquecimento, padronização, imputação e consolidação dos dados, tornando-os mais precisos e prontos para análise.
O SAP Data Intelligence oferece uma plataforma de preparação de dados que fornece a base para executar transformações em dados brutos antes da análise. As funcionalidades incluem transformação de coluna, lógica personalizada em colunas existentes, enriquecimento de dados, duplicação de dados, edição de receitas e execução de tarefas de preparação.
Todas as execuções de preparação podem ser visualizadas no bloco “View Preparation” e monitoradas no Monitoring tile (bloco de monitoramento).
Ao executar uma tarefa de preparação, o usuário pode armazenar o arquivo de preparação em um dos contêineres de destino suportados. SAP Data Intelligence também oferece forte integração com a preparação ágil de dados e operadores nativamente disponíveis para automatizar o processo de forma mais sofisticada.
Recipe
A receita da preparação de dados registra todas as transformações e manipulações realizadas nos dados. É possível reverter as alterações feitas na preparação de dados, excluindo itens da receita.
Data Quality and Validation rules (As regras de qualidade e validação de dados)
As regras de qualidade de dados são uma forma especial de regras de negócio definidas para os dados. Elas permitem verificar a qualidade dos dados, se estes atendem aos padrões exigidos, se são sensíveis e se sua integridade está preservada.
No SAP Data Intelligence, é possível importar as regras de qualidade de dados já definidas e consumidas no SAP Information Steward. É um processo simples de apenas uma etapa para importar todas as regras aprovadas do Information Steward para o SAP Data Intelligence.
Antes de vincular o conjunto de dados, é possível definir e testar as regras.
Rule book (livro de regras)
É possível importar regras já definidas e vinculá-las a conjuntos de dados específicos por meio do recurso de Livro de Regras do SAP Data Intelligence. As regras podem ser testadas e executadas, fornecendo a porcentagem de registros aprovados e uma amostra de registros que não atendem à regra.
As execuções do Livro de Regras podem ser monitoradas no bloco de Monitoramento para verificar o progresso do livro de regras.
O Painel de Regras permite criar painéis interativos para categorias de regras, livros de regras e conjuntos de dados. Ele permite criar dashboard para um único data set/rule category/rule-book, comparar vários datasets/rule categories/rule-books e capturar tendências de data set/rule category/rule-book.
Business Glossary (O Glossário de Negócios)
O SAP Data Intelligence Business Glossary é uma biblioteca de metadados de negócios que fornece contexto semântico aos dados, permitindo que as organizações definam termos e relacionamentos entre objetos. Com ele, é possível criar relações entre termos, conjuntos de dados e colunas para fornecer uma compreensão mais significativa dos dados no contexto organizacional.
Por exemplo, o que significa “cliente” para uma organização? Isso pode variar dependendo do tipo de organização e do setor em que ela atua. O glossário de negócios permite que cada organização crie seus próprios termos, definições e relacionamentos alinhados com seus objetivos.
As categorias no Glossário Comercial permitem que os termos lógicos sejam agrupados em uma única unidade, e você também pode adicionar palavras-chave e sinônimos para ajudar a definir os metadados do termo. O monitoramento do glossário pode ser feito no bloco de monitoramento do SAP Data Intelligence.
Conclusão
o SAP Data Intelligence Metadata Explorer oferece uma série de recursos para governança de dados, incluindo busca, catalogação, criação de perfis, preparação e validação de dados.
Com esses recursos, os usuários podem acessar informações detalhadas sobre conjuntos de dados, monitorar seu progresso, realizar ações de limpeza e melhorar a qualidade dos dados.
A plataforma também oferece forte integração com outros recursos da SAP, como a preparação ágil de dados e as regras de qualidade de dados do SAP Information Steward.
Curta e compartilhe
Se você gostou do artigo e gostaria de me apoiar, certifique-se de:
👏 Palmas para a artigo (50 palmas) para ajudar este artigo a ser apresentado para mais pessoas.
🔔 Siga-me: LinkedIn
📧e-mail
