SAP Data Intelligence — Overview
Tome decisões mais inteligentes com o SAP DI — SAP Data Intelligence. Este artigo procurei trazer um Overview do SAP DI.
Desafios do Gerenciamento de Dados Empresariais Contemporâneos
As empresas contemporâneas enfrentam ambientes de dados complexos e diversos que não podem ser totalmente explorados por ferramentas tradicionais e ortodoxas.
Como resultado, a maioria das organizações não consegue extrair o valor máximo de sua riqueza de dados, obter uma visão de 360 graus e aproveitar ao máximo os benefícios que os dados podem oferecer.
De acordo com a McKinsey, 47% das organizações relatam que dados e análises mudaram significativamente ou fundamentalmente a natureza da concorrência em seu setor nos últimos três anos.
Ativos de dados fragmentados e desconectados dificultam a extração de insights úteis no contexto certo e no momento certo. Falta de visibilidade, interface centralizada, acesso sem atrito, mecanismos rápidos de recuperação de dados e outras barreiras impedem que as organizações obtenham o máximo de seus dados.
De acordo com a Globalscape, essas empresas também enfrentam falta de recursos para operar dados estrategicamente, o que pode levar a gastos significativos em questões de não conformidade, em média US$ 14,5 milhões. Atualmente, as organizações buscam soluções de gerenciamento de dados mais abrangentes que permitam conectar, acessar, enriquecer e organizar os ativos de dados, transformando-os em insights de negócios que podem ser usados para a tomada de decisões.
What is SAP Data Intelligence?
SAP Data Intelligence é a nova plataforma de ciência de dados da SAP projetada para lidar com cenários de dados cada vez mais complexos.
Ele permite que você crie pipelines de dados escalonáveis e gerencie todo o processo de ciência de dados, desde o desenvolvimento da prova de conceito até a operacionalização, otimização contínua e adaptação.
Essa solução elástica combina ambientes de código aberto, como JupyterLab, com tecnologias SAP comprovadas, como SAP HANA e SAP Leonardo Machine Learning, para trabalhar em conjunto de forma integrada.
Além disso, o SAP Data Intelligence é uma solução abrangente de gerenciamento de dados que transforma dados díspares em insights críticos e permite a inovação em escala.
Faz parte da camada de orquestração de dados da SAP BTP Business Technology Platform, fornecendo integração, gerenciamento e processamento de dados em uma solução completa.
Lançado em 2019, o SAP Data Intelligence é conhecido como uma combinação de dois produtos: “SAP Data Hub” e “SAP Leonardo Machine Learning Foundation”, com alguns recursos adicionais de conectividade. O back-end adota a tecnologia SAP HANA, a camada de aplicativo é AAS (ABAP) e o front-end é uma combinação do SAP Fiori.
Destaques do produto
- O SAP Data Intelligence é uma solução abrangente de gerenciamento de dados.
- Fornece integração de dados, gerenciamento de dados e processamento de dados — uma solução completa.
- Lançado em 2019 e conhecido por ser uma combinação de dois produtos “SAP Data Hub” e “SAP Leonardo Machine Learning.
- Foundation” com alguns recursos adicionais de conectividade.
- O SAP Data Intelligence está disponível como um modelo BYOL (traga sua própria licença), onde pode ser implantado no local em seu próprio data center, em qualquer hyperscaler público (AWS, Google, Microsoft) ou nuvem privada.
- Suponha que, se estiver hospedado na AWS, tenha uma instância do EC2 em execução — escalável de acordo com o requisito.
- No back-end de DI, temos o SAP HANA, a camada de aplicativo é AAS (ABAP), o front-end é uma combinação de SAP Fiori.
Connectivity of SAP Data Intelligence
- Cloud Connector
Visão geral da solução de gerenciamento de dados SAP DI
Quando nos referimos a uma “solução de gerenciamento de dados”, nossa primeira ideia é quais tipos de suporte ela fornece. A seleção da ferramenta depende em grande parte de nossos requisitos.
Get Jonys Arcanjo’s stories in your inbox
Join Medium for free to get updates from this writer.
A imagem a seguir fornece uma visão geral de todos os tipos de conectividade, seja com produtos SAP ou produtos de terceiros. A caixa central da imagem exibe todas as capacidades relacionadas a dados que o SAP DI pode oferecer.
Integração e Processamento de dados — End to End
Abaixo estão os termos relacionados a dados — comuns em várias plataformas (Esses termos se relacionam às funcionalidades do SAP Data Intelligence, conforme mencionado na imagem acima):
- Data Discovery — É um termo usado para descrever o processo de coleta de dados de várias fontes por meio da detecção de padrões.
- Data Profiling — É uma análise detalhada dos dados de origem. Tenta entender a estrutura, qualidade e conteúdo dos dados de origem e suas relações com outros dados.
- Metadata Cataloging — É a coleta de todos os dados sobre seus dados. Os metadados podem incluir a fonte de dados, origem, proprietário e outros atributos de um conjunto de dados.
- Data Ingestion — É o processo pelo qual os dados são movidos de uma ou mais fontes para um destino onde podem ser armazenados e posteriormente analisados.
- Data Processing— O processamento de dados ocorre quando os dados são coletados e traduzidos em informações utilizáveis.
- Data Enrichment— É um termo geral que se aplica ao processo de aprimoramento, refinamento e melhoria de dados brutos.
Pilares do SAP DI
Diversos recursos reunidos em um único lugar
- Data Discovery: Com o SAP DI, é possível identificar dados de diferentes fontes ao detectar padrões inerentes. As organizações podem se conectar a diversos sistemas e aplicativos para recuperar dados semelhantes.
- Data Orchestration: A capacidade de orquestração de dados do SAP DI ajuda a orquestrar e executar facilmente pipelines de dados complexos em uma ordem definida dentro de uma organização. Ele também define e executa tarefas, como operações de arquivos e fluxos de dados, permitindo o movimento contínuo e fácil de todos os conjuntos de dados em toda a organização.
- Connect, Orchestrate, and Monitor Processes Across Systems: As organizações podem construir fluxos de trabalho de dados e agendar sua execução em horários específicos sempre que novos dados precisarem ser processados e movidos para o destino. Com o SAP DI, uma organização pode acionar a execução de cadeias de processos no SAP BW, transferir dados do SAP BW e do SAP HANA.
- Além disso, o SAP DI permite um monitoramento abrangente para visualizar, controlar e auditar as operações de dados no cenário de dados. O recurso de monitoramento fornece uma visão geral das atividades no nível do pipeline de dados, exibe onde os recursos são consumidos e detecta falhas, permitindo que os usuários realizem depuração para detectar falhas no pipeline de dados.
- Data Profiling: uma compreensão detalhada dos conjuntos de dados em toda a paisagem de dados. A solução captura metadados, combina informações adicionais e interpreta a qualidade e estrutura dos dados com outros dados para fornecer uma visão holística dos dados disponíveis.
- Data Quality: Ajuda organizações a entender a qualidade de seus dados e identificar onde melhorias são necessárias. As regras podem ser personalizadas para garantir que os dados finais sejam confiáveis para tomadas de decisão. Também é possível criar dashboards com tiles personalizados para exibir os resultados dos conjuntos de dados.
- Data Preparation and Ingestion: As organizações podem adquirir dados de diferentes fontes e armazená-los em uma interface de planilha fácil de usar. A solução torna fácil a aquisição, armazenamento e aprimoramento de dados de forma amigável ao usuário. Além disso, os dados podem ser movidos de várias fontes para um único destino, armazenados e posteriormente analisados.
- Data Pipelines: permite que as organizações criem pipelines escaláveis e flexíveis baseados em fluxo para processar, refinar e enriquecer dados na origem. Os usuários podem transferir o processamento para onde os dados são armazenados (ou seja, sistemas de origem) sem mover muitos dados pela rede, com mais de 250 operadores pré-definidos de arrastar e soltar que permitem a injeção, processamento ou integração de dados.
- Os usuários podem criar aplicativos baseados em fluxo, lidar com trabalhos em lote, transmitir dados da Internet das Coisas (IoT), criar operadores personalizados para fins específicos e lidar com filas de mensagens com facilidade. Como resultado, os pipelines de dados podem aumentar a eficiência.
- Metadata Management: Metadados são informações sobre os dados de uma organização, como fonte, proprietário, tipo e outros atributos. Com o uso do SAP DI, é possível gerenciar metadados em um cenário de dados diversificado e distribuído, permitindo que os usuários criem um repositório dos metadados extraídos. Possibilita também a criação de relacionamentos semânticos, a visualização dos dados de origem, por fim, a criação de um catálogo de informações.
- Machine Learning: Também permite que os usuários automatizem tarefas de baixo valor para que os cientistas de dados possam se concentrar em tarefas de maior valor agregado. Todas as tarefas podem ser gerenciadas em uma única interface para orquestrar fluxos de dados em toda a organização e configurar o pipeline de dados subjacente.
Resumo
Esta é uma nova plataforma de gerenciamento de dados projetada para lidar com cenários de dados cada vez mais complexos. Ele permite a construção de pipelines de dados escaláveis e oferece suporte a todo o processo de ciência de dados, desde o desenvolvimento de uma prova de conceito até a implantação, otimização e adaptação contínuas.
Com esta plataforma, você pode trabalhar com dados de forma mais eficiente em um ambiente em constante evolução. Com recursos abrangentes de gerenciamento de metadados, o SAP Data Intelligence ajuda você a entender seus dados de negócios, incluindo regras de negócios, linhagem de dados, glossários de negócios e painéis de regras para garantir que todos estejam na mesma página.
Com acesso centralizado a várias fontes de dados, o SAP Data Intelligence permite que equipes diferentes colaborem facilmente, incluindo engenheiros e arquitetos de dados, aprendizado de máquina, desenvolvedores de dados e equipes de TI.
Curta e compartilhe
Se você gostou do artigo e gostaria de me apoiar, certifique-se de:
👏 Palmas para a artigo (50 palmas) para ajudar este artigo a ser apresentado para mais pessoas.
🔔 Siga-me: LinkedIn
📧e-mail: contato.jonys.arcanjo@gmail.com
Referências
- https://blogs.sap.com/2021/06/08/introduction-to-sap-data-intelligence/
- https://www.sap.com/india/documents/2021/02/32714c9c-cd7d-0010-87a3-c30de2ffd8ff.html
- https://www.sap.com/india/products/data-intelligence/features.html?pdf-asset=a26cebe0-5b7d-0010-87a3-c30de2ffd8ff&page=9
- https://medium.com/@applexus/sap-data-intelligence-cloud-d94f1d6d1a5a
