<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0" xmlns:cc="http://cyber.law.harvard.edu/rss/creativeCommonsRssModule.html">
    <channel>
        <title><![CDATA[Stories by João Pedro Caneca on Medium]]></title>
        <description><![CDATA[Stories by João Pedro Caneca on Medium]]></description>
        <link>https://medium.com/@jopeca.jopc?source=rss-3947290f97a4------2</link>
        <image>
            <url>https://cdn-images-1.medium.com/fit/c/150/150/0*PQauXL3nCw2HwzSJ</url>
            <title>Stories by João Pedro Caneca on Medium</title>
            <link>https://medium.com/@jopeca.jopc?source=rss-3947290f97a4------2</link>
        </image>
        <generator>Medium</generator>
        <lastBuildDate>Sat, 21 Nov 2026 19:25:57 GMT</lastBuildDate>
        <atom:link href="https://medium.com/@jopeca.jopc/feed" rel="self" type="application/rss+xml"/>
        <webMaster><![CDATA[yourfriends@medium.com]]></webMaster>
        <atom:link href="http://medium.superfeedr.com/" rel="hub"/>
        <item>
            <title><![CDATA[BI + SQL SERVER 
(DO ZERO AO DATAWAREHOUSE, CASO DE ESTUDO EMPRESA JOPECA COMERCIAL)]]></title>
            <link>https://medium.com/@jopeca.jopc/bi-sql-server-do-zero-ao-datawarehouse-caso-de-estudo-empresa-jopeca-comercial-c16a0dbdb212?source=rss-3947290f97a4------2</link>
            <guid isPermaLink="false">https://medium.com/p/c16a0dbdb212</guid>
            <category><![CDATA[integration-services]]></category>
            <category><![CDATA[data-warehouse]]></category>
            <category><![CDATA[modelagem-de-dados]]></category>
            <category><![CDATA[sql-server]]></category>
            <category><![CDATA[data-science]]></category>
            <dc:creator><![CDATA[João Pedro Caneca]]></dc:creator>
            <pubDate>Thu, 15 Sep 2022 22:35:38 GMT</pubDate>
            <atom:updated>2022-09-15T22:35:38.756Z</atom:updated>
            <content:encoded><![CDATA[<h4>BI + SQL SERVER <br>(DO ZERO AO DATAWAREHOUSE, CASO DE ESTUDO EMPRESA JOPECA COMERCIAL)</h4><figure><img alt="" src="https://cdn-images-1.medium.com/max/1022/1*s4R6HSsZZb9AB5o0i1uk6A.png" /></figure><blockquote>Estamos de acordo que quando acordamos o volume de dados já não é mesmo do dia anterior [crescem que nem feijão mágico]… Das muitas dificuldasdes com que se debatem as empresas, destacamos exatamente o armazenamento e o tratamento de dados para gerar insights que permitam que elas se situem quanto a seu estado de entrega dos serviços e soluções…</blockquote><p>Hoje trago como caso de estudos a empresa Jopeca Comercial, que tal como tantas outras, está também engolida com esse problema…</p><p>A empresa Jopeca Comercial, Líder no mercado de distribuição de bens alimentares em todas as regiões de Luanda, encontra-se num impasse, pois precisa abrir mais representações em zonas de maior transação comercial e fechar outras em zonas de menor rendimento. Para tal contratou uma serie de indivíduos que por sua vez andou por cada bairro de Luanda em todos os Municípios fazendo recolha de dados dos principais serviços a que população acorre todos os dias e ver quais a zonas e os serviços de maior procura por parte dos utentes, em que se destacam como principais serviços: Bancos, outros estabelecimentos financeiros, mercados informais, mini-super-mega-hipermercados, lojas diversas, etc.</p><p>Constou-me que após a recolha os entrevistadores exportam os dados em um arquivo csv, e a empresa Jopeca pretende primeiramnete armazenar esses dados e depois, através desses dados obter informação útil para então cumprir com o seu desiderato que de abrir ou fechar estabelecimentos de acordo com o nível de procura dos seus serviços e de outros conexos.</p><p>Por formas a contribuir disponibilizei-me a ajudar para que possam ter chegar a uma solução.</p><h3><strong>1. Para a solução do Problema:</strong></h3><p>1 — <strong>Excel </strong>para primeiro tratamento de dados e posterior usar para fazer carga para o Ambiente OLTP;</p><p>2 —<strong> Star UML</strong> — Para a modelagem lógica</p><p>3 — <strong>SQL SERVER </strong>— Para Gerenciamento da Base de Dados desde o ambiente <strong>OLTP</strong>, ao <strong>OLAP </strong>(<strong>Stage e Datawarehouse</strong>);</p><p>4 — <strong>Microsoft Integration Services</strong> — Para ETL, carga da STAGE com dados vindos do OLTP e carga do DW com dados da STAGE.</p><p>5 — <strong>Microsoft Analysis Services</strong> — Para criação do cubo para possibilitar e análises, para possibilitar criar os relatórios que poderá ser com o Reporting Services ou mesmo Microsoft Power BI.</p><p>6 — <strong>Reporting Services ou Power BI (noutro artigo )</strong>…</p><h3><strong>2. Em necessidades macro, o projeto foi dividido em 04 grandes fases:</strong></h3><p><em>Fase 01: Construção do ambiente OLTP, desde a modelagem fisica a lógica.</em></p><p><em>Fase 02: Construção da área de Stage.</em></p><p><em>Fase 03: Construção do Datawarehouse.</em></p><p><em>Fase 04: Uso das Ferramentas de análise de dados…</em></p><p><strong>2.1 — <em>Construção do ambiente OLTP</em></strong></p><p>Após exportar os dados em csv, faz-se um tratameto prévio em que os dados ficam dispostos com um cabeçalho da seguinte forma:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*m9MEf4JwogVDE8eMT8wc8g.png" /><figcaption>Uma única tabela dos dados recolhidos pela empresa, que depois de normalizada vai gerar outras tabelas</figcaption></figure><p>Para tal foi necesário fazer a modelagm seguindo as boas regras de normalização:</p><p><strong>Modelagem Lógica usando o STAR UML</strong></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*b9HbWYKoo85CtFzPyG_srw.png" /><figcaption>Diagrama de Entidade e Relacionamento (Modelagem Lógica)</figcaption></figure><p><strong>Modelagem Física no SQL SERVER</strong></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/705/1*lmEKan3Fft0Y4sGrSJDEsg.png" /><figcaption>Criação do Banco do Banco de Dados e do Schema para as tabelas (modelagem física)</figcaption></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/770/1*oChPiECPggDrs39C18QxKA.png" /><figcaption>Criação de Tabelas(modelagem física)</figcaption></figure><p>Depois de todas as tabelas criadas dentro do respectivo <strong><em>Schema, </em></strong><em>cria-se o dicinário de dados:</em></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/646/1*meVCdMBr4I_qM1VhCn6I4g.png" /><figcaption>Dicionário de Dados</figcaption></figure><p>Tendo a certeza que os dados estão todos normalizados e bem representados, criam-se as constraints:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*rg9iTsKY49hfBqAaKz5LbQ.png" /><figcaption>Mapeamento das constraints</figcaption></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*KQB4rWey0zGsZdiyO6MdgA.png" /><figcaption>Criação de das contraints</figcaption></figure><p>E para ter a certeza que está tudo funcional, geramos então diagrama que deve sere parecido ao diagrama ER feito anterirmente no STAR UML:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*dVz8xCazdHtyoKaoatmJwA.png" /><figcaption>Diagrama de constraints</figcaption></figure><p>Visto que os dados a serem armazenados e analisados estão em arquivos excel, por conta das regras de normalização, foi possivel criar 8 tabelas e para fazer a carga desses dados nas tabelas, é necessário fazer a conexão do SQL Server ao Excel para importar os dados:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/636/1*xz2UuYajZwHq3CST278tTw.png" /><figcaption>Tabelas geradas por conta da normalização</figcaption></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/589/1*C6NRrIgnrD2X2oyfdsgf_Q.png" /><figcaption>Criando a conexão para importar os dados</figcaption></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*UfNjQxzVoqbaI29pAJw42A.png" /><figcaption>Indicação da source da informação para carrgar na tabelas do OLTP</figcaption></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*c0kVLZEYyVwqgvm5QWY8SQ.png" /><figcaption>Indicação do destino dos dados e da base dados onde serão carregados</figcaption></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*gskOGUJSe6uLNx4xBXvHDA.png" /><figcaption>Seleção da planilha source e da tabela destino</figcaption></figure><p>Após todos os passos anteriores, chega-se então a fase final em que podemos ver os dados carregados com sucesso para a tabela…</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/886/1*QIclATlQkxkPAB4VMiwObQ.png" /></figure><p>Depois que todas as planilhas forem devidamente carregadas, é hora de criar a STAGE AREA para depois então modelar e CRIAR O DW, que traremos em outro artigo.</p><p>Até ao meomento temos os dados da JOPECA já bem normalizados e armazenados em um banco de dados, já temos até aqui 1/3 do problema resolvido, nos vemos no próximo artigo… Obrigadooooo</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=c16a0dbdb212" width="1" height="1" alt="">]]></content:encoded>
        </item>
    </channel>
</rss>