<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0" xmlns:cc="http://cyber.law.harvard.edu/rss/creativeCommonsRssModule.html">
    <channel>
        <title><![CDATA[Stories by Cobli Brasil on Medium]]></title>
        <description><![CDATA[Stories by Cobli Brasil on Medium]]></description>
        <link>https://medium.com/@cobli?source=rss-5d59de451d6e------2</link>
        <image>
            <url>https://cdn-images-1.medium.com/fit/c/150/150/1*75otAyPl30SEzHUcDBNzfQ.png</url>
            <title>Stories by Cobli Brasil on Medium</title>
            <link>https://medium.com/@cobli?source=rss-5d59de451d6e------2</link>
        </image>
        <generator>Medium</generator>
        <lastBuildDate>Wed, 18 Nov 2026 04:03:53 GMT</lastBuildDate>
        <atom:link href="https://medium.com/@cobli/feed" rel="self" type="application/rss+xml"/>
        <webMaster><![CDATA[yourfriends@medium.com]]></webMaster>
        <atom:link href="http://medium.superfeedr.com/" rel="hub"/>
        <item>
            <title><![CDATA[Experiência trabalhando em uma startup de alto crescimento]]></title>
            <link>https://medium.com/cobli/experi%C3%AAncia-trabalhando-em-uma-startup-de-alto-crescimento-fcdbe2911173?source=rss-5d59de451d6e------2</link>
            <guid isPermaLink="false">https://medium.com/p/fcdbe2911173</guid>
            <category><![CDATA[startup]]></category>
            <category><![CDATA[scala]]></category>
            <category><![CDATA[site-reliability-engineer]]></category>
            <category><![CDATA[big-data]]></category>
            <category><![CDATA[internship-experience]]></category>
            <dc:creator><![CDATA[Cobli Brasil]]></dc:creator>
            <pubDate>Wed, 18 Dec 2019 20:32:30 GMT</pubDate>
            <atom:updated>2021-10-05T20:11:46.309Z</atom:updated>
            <content:encoded><![CDATA[<p><em>por </em><a href="https://www.linkedin.com/in/arturmrsantos/"><em>Artur Magalhães</em></a></p><p>Me chamo Artur, sou aluno de Ciência da Computação no IME (Instituto de Matemática e Estatística) da Universidade de São Paulo. Neste semestre, <strong>tive a oportunidade de trabalhar em uma startup</strong><em>, </em>e quis compartilhar essa experiência com vocês!</p><p>Ao longo de 2019, estive em contato com uma dinâmica diferente do que já havia experimentado, e pude aprender muito sobre o funcionamento de uma startup de alto crescimento.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*Mh6yh0M2xKx19vS6rZN6YQ.jpeg" /></figure><p>A <a href="https://www.cobli.co/">Cobli</a> é uma startup tecnologia para logística e gestão de frota. Tem a grande missão de conectar carros de empresas à internet, dado a vasta frota existente no Brasil. Nela, oferecemos um arsenal de ferramentas para que o gestor de frota — desde o dono da mercearia à ambulâncias e grandes empresas — possa ter visibilidade e controle total sobre sua operação. Cada <em>feature</em> é pensada para realmente auxiliar o gestor, e fazer com que seu dia a dia seja otimizado, provendo um sistema de alta tecnologia e fácil de usar.</p><h3>Crescimento acelerado</h3><p>Estive por um período de seis meses, e nesse curto intervalo, participei de uma troca de escritório, <a href="https://link.estadao.com.br/noticias/inovacao,startup-de-rastreamento-de-frotas-cobli-levanta-us-10-milhoes,70003052545">US$10 milhões na Series A</a>, crescimento no número de funcionários, além de outros acontecimentos que demonstram a rapidez na qual as coisas acontecem. <strong>O dia a dia de trabalhar em uma startup envolve você se deparar constantemente com mudanças e ver de fato o progresso acontecer.</strong></p><h3>Cultura</h3><p>Algo que sempre ouvi falarem que era muito importante em uma empresa é a Cultura.<strong> A Cultura é a alma de uma startup, é praticar, todos os dias, os pontos necessários para que tudo flua bem. </strong>Ela define as interações entre os <em>Coblers</em>, principalmente no relacionamento pessoal. A Cultura na Cobli é um fator de excelência.</p><p>Desde o processo de <em>onboarding</em>, é ressaltado a importância da Cultura. <strong>Ser transparente é primordial.</strong> Para que seu colega tome decisões boas, é necessário que você seja claro, relatando problemas, complicações e incômodos, e assim melhorar continuamente os processos e decisões. Além disso, <strong>pensar no cliente, com visão a longo prazo</strong>, é profundamente enfatizado, afinal, o cliente é a prova final do produto. Os pontos que marcam a Cultura da Cobli são permeados em todos. A seriedade em efetivamente praticar atitudes que beneficiem a produtividade é visível nas interações intra e inter times.</p><h3>Minha experiência como estagiário</h3><p>Na Cobli, <strong>o estagiário tem o objetivo de aprender, complementando a formação</strong>, além de ter apoio quanto a graduação, sendo possível ter horários flexíveis e pedir um tempo para estudos durante semana de provas. Esse ponto é um grande diferencial, já que em certos momentos a graduação pode pesar no cansaço.</p><p>Participei quase todo o estágio no time de Big Data (A.K.A. Prrruu). Como experiência profissional, essa foi minha primeira de maior duração. E mesmo com pouca experiência, desde o início já recebi atividades instigantes que demonstravam o quanto o time (e a Cobli) acreditavam no meu trabalho. <strong>Trabalhar em produção, com dados reais, impactando milhares de usuários foi uma constante. </strong>Você na prática implementa código e vê aquilo funcionar, tomando decisões que podem ser críticas, o que é um grande aprendizado. É gratificante receber responsabilidades mesmo quando se está iniciando.</p><p>E claro, sempre que necessário, pedi e recebi diversos conselhos e dicas que me auxiliaram muito, e com certeza me fizeram aprender certas coisas que dificilmente veria durante a graduação — por exemplo, conceitos relacionados a processamento de dados em tempo real de forma distribuída (<em>streaming), </em>ferramentas modernas de automação, serviços em cloud, etc. Estar próximo de pessoas brilhantes no que fazem ajuda demais, e o time de Big Data — assim como os demais — é excepcional.</p><p>Todas as <em>frameworks</em> que usei são interessantes, tanto do ponto de vista de serem novas, quanto de performance. <strong>O cerne do meu trabalho junto ao time foi o </strong><a href="https://ci.apache.org/projects/flink/flink-docs-release-1.9/"><strong>Apache Flink,</strong></a><strong> utilizando Scala</strong>. Nosso objetivo do semestre foi migrar os <em>jobs</em>, passando de uma antiga arquitetura baseada em Akka para o Flink.</p><p>O principal motivo foi a performance e todas as vantagens que o Flink oferece. Uma <em>framework </em>para processamento de dados distribuídos, super robusta e própria para lidar com dispositivos enviando dados 24/7, o Flink é robusto para um alto volume de dados, além de lidar com <em>backpressure</em>, realizar <em>checkpoints</em> dos estados constantemente, operar com diversos níveis de paralelismo, etc. Em suma, abre caminho para escalar a quantidade de dispositivos nas frotas. Para quem se interessar sobre, o Flink é baseado em um modelo descrito neste <a href="https://www.vldb.org/pvldb/vol8/p1792-Akidau.pdf"><em>paper</em></a><em> ou </em><a href="https://www.youtube.com/watch?v=3UfZN59Nsk8"><em>vídeo</em></a><em>.</em></p><p>Uma das principais linguagens de programação da Cobli é <a href="https://www.scala-lang.org/">Scala</a>. Scala é uma linguagem fantástica, e sua mescla entre programação funcional e programação orientada a objetos oferece uma flexibilidade que combina com o processamento do Flink, que possui também uma interface para Java.</p><p>Como nunca havia lidado com os problemas do contexto de <em>streaming</em>, foi desafiante. A forma como o processamento é realizado, se a ordem dos dados importa, o que fazer caso a aplicação caia no meio do caminho, como lidar com estados anteriores, e se o volume de dados aumentar subitamente, foram alguns questionamentos que tive ao longo desse caminho, e pela prática que tive na Cobli, atrelado ao encorajamento do time para que me aprofundasse na teoria de processamento de dados, hoje já tenho experiência para lidar com esses problemas — claro, não todos rs.</p><p><strong>Os aprendizados que conquistei com certeza foram muito devido aos meus ótimos colegas de trabalho, e fico feliz de poder ter aprendido tanto com eles.</strong></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*d7BPPaJ7Z9Hlw-UcnMJysg.png" /></figure><h3>Últimas semanas</h3><p>Nas minhas duas últimas semanas na Cobli, tive a oportunidade de conhecer um pouco mais sobre <a href="https://pt.wikipedia.org/wiki/Site_Reliability_Engineering">SRE (Site Reliability Engineering)</a>. O time de SRE (A.K.A. #nohammer) é responsável pela sustentação dos sistemas, produtividade dos desenvolvedores — desenvolvendo ferramentas -, assim como garante a confiabilidade (<em>reliability),</em> o bom funcionamento e saúde da plataforma.</p><p>Tive a oportunidade de me aprofundar no uso da AWS — que já havia adquirido quando estava no Prrruu — , em especial <a href="https://aws.amazon.com/pt/cloudformation/">AWS Cloudformation</a>, criando <em>stacks </em>para criação de infraestrutura em nuvem — <a href="https://pt.wikipedia.org/wiki/Infraestrutura_como_C%C3%B3digo"><em>infra as code</em></a>. Em poucas palavras, para não ser tão técnico, o que o Cloudformation te permite é que sua <em>stack</em>, sua infra, esteja descrita em código, e possa ser criada, atualizada e destruída com um comando no terminal, fazendo com que o desenvolvimento e melhoramento seja mais simples, veloz e organizado.</p><p>Novamente, o time sempre disposto a auxiliar e incentivar com certeza engrandeceu toda minha experiência na Cobli.</p><h3>Fim de uma etapa</h3><p>Nesse semestre estagiando na Cobli, pude aprender muito, desde ferramentas, linguagens, técnicas, formas de implementação, boas práticas e muitas outras coisas. <strong>Mas acredito que um dos grandes aprendizados que vou levar é que uma empresa se faz de pessoas, se faz de como essas pessoas interagem e desenvolvem seu dia a dia</strong>. Ter pessoas boas que de fato têm uma visão de longo prazo, engajadas e preocupadas em colaborar e apoiar, é o que faz da Cobli um lugar especial.</p><p><strong>Gostou da gente e está procurando uma oportunidade de emprego em tecnologia? Confira nossa </strong><a href="https://www.cobli.co/carreiras/?utm_source=medium&amp;utm_medium=referral&amp;utm_campaign=mediumcobli"><strong>página de carreiras</strong></a><strong> e inscreva-se nas nossas vagas!</strong></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=fcdbe2911173" width="1" height="1" alt=""><hr><p><a href="https://medium.com/cobli/experi%C3%AAncia-trabalhando-em-uma-startup-de-alto-crescimento-fcdbe2911173">Experiência trabalhando em uma startup de alto crescimento</a> was originally published in <a href="https://medium.com/cobli">Cobli</a> on Medium, where people are continuing the conversation by highlighting and responding to this story.</p>]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Cobli de cara nova: nosso Rebranding]]></title>
            <link>https://medium.com/cobli/cobli-de-cara-nova-nosso-rebranding-dc0188c2ef1f?source=rss-5d59de451d6e------2</link>
            <guid isPermaLink="false">https://medium.com/p/dc0188c2ef1f</guid>
            <dc:creator><![CDATA[Cobli Brasil]]></dc:creator>
            <pubDate>Thu, 18 Jul 2019 00:55:45 GMT</pubDate>
            <atom:updated>2019-07-18T00:55:45.280Z</atom:updated>
            <content:encoded><![CDATA[<p><strong><em>Existimos para libertar a logística através da tecnologia, resolvendo questões humanas e reais</em></strong></p><p>Sexta-feira, 10 de novembro de 2017. Era chegada a hora de desenvolver os brindes de final de ano na empresa. O clima de empolgação era grande, o time havia dobrado de tamanho e pensamos em presentear todos com camisetas e mochilas personalizadas. Na primeira ligação para a gráfica, veio a surpresa: “Olha, esse logo que vocês querem estampar possui 11 cores. Para fazer o silk screen vai ficar mais de 100 reais por camiseta”. Algo parecia estar muito errado.</p><p>Percebemos que estávamos utilizando um logo pouco escalável — com dificuldades em redução de tamanho e perdas de leitura além de não representar a cultura das pessoas que formam a empresa. Começamos a investigar e percebemos que não só a questão visual estava comprometida, mas também a nossa comunicação — a linguagem era inconsistente sem um guia de tom e voz que pudesse fornecer validação consistente.</p><p>Com a realidade da expansão internacional à frente, pareceu claro o que precisávamos fazer: definir uma identidade de marca que iria não só unificar nossa imagem e comunicação externa, mas que também iria fortalecer a identificação cultural entre nós. Nesse post iremos contar como foi o processo de redesign da marca, quais passos seguimos e, principalmente, o que aprendemos com esse projeto.</p><h3>Certo, mas como nós fizemos isso?</h3><p>Com o desafio definido, reunimos nosso time para traçar nosso plano de ação. Estávamos decididos que era possível desenvolver este projeto internamente e queríamos que fosse o mais colaborativo e presente na vida da empresa possível. Concordamos que só alcançaríamos o sucesso de fôssemos capaz de desenvolver um manual de marca gráfica e de comunicação que fosse escalável, fácil de aplicar, e que principalmente, envolvesse todos da empresa. Em cerca de quatro meses (sim, foi um processo longo) correndo em paralelo ao desenvolvimento de novas features e lançamentos confirmamos que isso era possível.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/300/0*tEIiwlViYSKKj020.png" /></figure><h3>Entrevistas internas</h3><p>Nossa primeira fase de projeto foi conduzir entrevistas internas com os profissionais da Cobli. Convidamos todos os <em>Coblers</em> a participarem com suas opniões sobre: a imagem que a Cobli possui atualmente, a imagem que deveria transparecer, quais são os elementos que deveriam ser mantidos e quais deveriam ser removidos. Muitos aspectos em relação à cultura surgiram, como a conexão e parceria existente dentro da empresa “Eu não me lembro de nenhuma vez que eu precisei de ajuda de alguém e não tenham parado o que estavam fazendo para me explicar algo. Todo mundo está sempre disposto a aprender e ensinar” conta Gustavo Ferreira, da área de Vendas e Parcerias da Cobli.</p><p><strong>Word Clouds: </strong>Para nos ajudar a identificar padrões culturais da empresa, conseguimos gerar <em>word clouds</em> com as palavras mais utilizadas dentro da empresa, através de mensagens públicas compartilhadas entre nós.</p><h3>Pesquisa externa</h3><p>Além de coletar dados sobre a concorrência e benchmarks da indústria(queríamos nos diferenciar do que já estava sendo feito) realizamos o mesmo processo de entrevistas com nossos clientes.</p><p>Os clientes da Cobli são nossa maior prioridade. Conversamos com gestores de diversas áreas que identificamos como nossos promotores através da nossa plataforma de <a href="https://pt.wikipedia.org/wiki/Net_Promoter_Score">NPS</a>. Depois de coletar os insumos dessas entrevistas e agrupá-los, identificamos padrões e, para a nossa surpresa, similares ao que havíamos coletado internamente.</p><h3>Padrões e Pilares da Marca</h3><p>Reunindo todos os materiais das entrevistas internas, externas, e pesquisas de mercado (benchmarks da indústria) alinhamos em grupo os padrões culturais que identificamos. Através de mind-maps conseguimos calibrar esses elementos que dariam origem aos pilares da nossa marca.</p><p>Os Pilares são os conceitos fundamentais levantados através do estudo de campo e do alinhamento com a empresa, somadas às pessoas envolvidas no projeto. Tais levantamentos nos nortearam por toda a fase de criação da marca e criaram a base para o manual de comunicação e linguagem.</p><p>Reunindo todos os materiais das entrevistas internas, externas, e pesquisas de mercado (benchmarks da indústria) alinhamos em grupo os padrões culturais que identificamos. Através de mind-maps conseguimos calibrar esses elementos que dariam origem aos pilares da nossa marca.</p><p>Os Pilares são os conceitos fundamentais levantados através do estudo de campo e do alinhamento com a empresa, somadas às pessoas envolvidas no projeto. Tais levantamentos nos nortearam por toda a fase de criação da marca e criaram a base para o manual de comunicação e linguagem.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*3tf0Z_MHVyWznnKe.png" /></figure><h3>Identidade visual</h3><p>Com os novos pilares, precisávamos traduzir nossa personalidade parceira, acessível e enérgica, ao mesmo tempo que mostramos nossa expertise e tecnologia. Também consideramos alguns outros pontos que vieram como resultado das pesquisas: manter o monograma como símbolo e ter o azul como cor principal. Nas conversas com nosso time, quase todos comentaram do “azul Cobli”, cor que estava muito presente no nosso site e sistema. Nossa atenção a esses pontos foi importante por termos um time e uma grande base de clientes que já estavam envolvidos com a marca. Tínhamos que mostrar através da nova identidade que <strong>não estávamos nos tornando algo completamente diferente, e sim evoluindo para algo melhor, reforçando nossos valores e conexões.</strong></p><p>Com essas premissas, começamos os primeiros rascunhos à mão, explorando de forma mais livre. Entre as opções que surgiram, três conceitos eram mais consistentes com os valores que gostaríamos de transmitir. Evoluímos esses três pensando em grafismos e aplicações básicas.</p><p>Para validar um dos conceitos de identidade visual e o tom de voz, o time de design se reuniu com os sócios e líderes dos times de vendas, marketing e customer success. Juntos escolhemos um conceito vencedor:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/300/0*yNQuVntSHFSA8hzw.png" /></figure><p>Nesse conceito, conseguimos mostrar uma das principais características da Cobli que é transformar dados complexos em algo simples, acessível para o usuário. O resultado é um monograma com formas arredondadas, que reforça também a tranquilidade e parceria. A tipografia foi desenhada para acompanhar a forma do símbolo.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*VBwRXvaQPL7lLJ78.png" /></figure><p>Partindo do conceito e símbolo escolhidos, pudemos ir mais a fundo nas explorações visuais. Para a paleta, nos focamos em ter o azul como cor primária, em dois tons, e escolhemos outras duas cores vibrantes como secundárias, que reforçam nossa essência tecnológica. Os grafismos partiram das formas do símbolo e, com eles, podemos criar peças mais “clean” ou mais coloridas, dependendo da finalidade.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*WoEitZbCaSkDeJg1.jpg" /></figure><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/0*UT4qgttI1oo65vvy.png" /></figure><h3>Manual de Tom e Voz</h3><p>Em paralelo ao desenvolvimento da linha visual, utilizamos nossos pilares de marca para cascatear esses valores para a comunicação da Cobli. Desenvolvemos um documento-guia composto de exemplos nos quais cada um desses pilares reflete uma forma de utilizar a linguagem e o tom de escrita, como o uso da voz ativa, direcionamento para o uso de emojis, como lidar com temas delicados, entre outros. Esse manual será utilizado para todos os materiais desenvolvidos pela Cobli, seja em mídias sociais, criação de conteúdos internos e externos, textos de novas funcionalidades e vendas.</p><h3>Considerações finais</h3><p><strong><em>Divergir em grupo, convergir com foco.</em></strong></p><p>Ao longo de todo esse processo, percebemos o quanto foi fundamental o envolvimento de toda a equipe e a participação do máximo de pessoas possíveis em fases específicas do projeto, inclusive clientes. Seria impossível conseguir definir os pilares de marca com todas as pessoas da empresa, porém, foi <strong>fundamental a validação e coleta de insumo de todos</strong> na fase anterior. Brainstorms silenciosos e entrevistas individuais foram muito efetivas na fase inicial. Para validação, questionários nos ajudaram a calibrar se estávamos no caminho certo e se havíamos captado corretamente as informações de todos.</p><p>Além disso, conseguimos comprovar que é factível realizar um processo de branding internamente, porém, temos que estar dispostos a lidar com as limitações envolvidas: <strong>os prazos serão muito mais flexíveis</strong> e amplos que um projeto terceirizado, pois em paralelo ao branding, temos todas as nossas atividades do dia-a-dia da empresa para lidar. O time de design continuou desenvolvendo novas funcionalidades para o nosso produto e conduzir testes de usabilidade ao longo dos quatro meses de projeto.</p><p>É ideal também contar com um <strong>time que seja multidisciplinar e complementar, </strong>pessoas que tenham habilidade de composição visual distintas, escrita e validação serão fundamentais.</p><p>Esperamos que esse post forneça as informações básicas sobre como é possível estruturar um projeto de identidade de marca internamente em Startups. Em cada uma das fases de desenvolvimento, aplicamos metodologias do Design Council e do livro <a href="https://www.thesprintbook.com/">Sprint Book</a> de Jake Knapp. O principal movimento é não ter medo de começar, juntar sua equipe, e abraçar o processo! 🙂</p><p><strong>Time do projeto: </strong><a href="https://dribbble.com/biamilhomem"><strong>Bia Milhomem</strong></a><strong>, </strong><a href="https://dribbble.com/nathaliaalbar"><strong>Nathalia Albar</strong></a><strong> e </strong><a href="https://dribbble.com/vanessayumi"><strong>Vanessa Yumi</strong></a></p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=dc0188c2ef1f" width="1" height="1" alt=""><hr><p><a href="https://medium.com/cobli/cobli-de-cara-nova-nosso-rebranding-dc0188c2ef1f">Cobli de cara nova: nosso Rebranding</a> was originally published in <a href="https://medium.com/cobli">Cobli</a> on Medium, where people are continuing the conversation by highlighting and responding to this story.</p>]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[How we quantify traffic in our Routing Platform]]></title>
            <link>https://medium.com/cobli/how-we-quantify-traffic-in-our-routing-system-1123d7b00e00?source=rss-5d59de451d6e------2</link>
            <guid isPermaLink="false">https://medium.com/p/1123d7b00e00</guid>
            <category><![CDATA[machine-learning]]></category>
            <category><![CDATA[optimization]]></category>
            <category><![CDATA[traffic-optimization]]></category>
            <category><![CDATA[iot]]></category>
            <category><![CDATA[routing]]></category>
            <dc:creator><![CDATA[Cobli Brasil]]></dc:creator>
            <pubDate>Wed, 04 Oct 2017 20:12:27 GMT</pubDate>
            <atom:updated>2018-10-04T19:43:07.541Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*Be4_RMbbp8FQpnOBP5oNMA.png" /></figure><p><em>by </em><a href="https://www.linkedin.com/in/victor-andreas-sprengel-49a97713b/"><em>Victor Sprengel</em></a><em>, </em><a href="https://www.linkedin.com/in/lucasbrunialti/"><em>Lucas Brunialti</em></a><em>, </em><a href="https://www.linkedin.com/in/tobinfulton/"><em>Tobin Fulton</em></a><em>, </em><a href="https://www.linkedin.com/in/daniel-miranda-651599b7/"><em>Daniel Miranda</em></a></p><p><a href="https://cobli.co/">Cobli</a> (link in Portuguese) is a company dedicated to making fleet management simple. We do this by providing an easy-to-use platform for managers to better control and optimize their vehicle fleets. One of the tools in our platform is <a href="https://cobli.co/roteirizador/">multi-vehicle routing</a> (link in Portuguese), which helps our clients get the most out of their available vehicles, such as minimizing gas and maintenance costs as well as maximizing the number of deliveries done per day.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/800/1*t9Yjlz3vsRGL5hWI1X83AQ.png" /><figcaption>Cobli’s Multi-Vehicle Routing Platform</figcaption></figure><p>In our system, we let the user input the number of available vehicles, addresses representing deliveries or services as well as other relevant information such as time windows and lunch breaks. We then suggest optimal routes and assign addresses to each vehicle that should be visited in a specific order.</p><p>Distance and time are the most important factors in generating these optimal routes. In this post we will take a further look into this service and the search for optimality.</p><p>The algorithm used to find the optimal solution needs cost matrices, which represent the relation of distance or time required to travel between each pair of addresses. Initially, we used GoogleMaps’ services and APIs to run these queries. However, we found that our larger clients needed support for more vehicles and addresses per route, and unfortunately, the API costs at this scale are prohibitive.</p><p>We thus needed a new source of cost matrices, and we discovered that we could reach enough accuracy for our needs using a different approach: building our own matrices from other datasets we also had access to.</p><p>The origin of the new dataset is the API to which we delegate running the algorithm mentioned before. Their service accepts the cost matrices as part of the request, which in our case comes from Google. However, this API has its own data and doesn’t <strong>need</strong> the matrices from outside. That being said, traffic is not taken into account in this API’s dataset, which reduces the quality of the routes that we generate in our system. Given this reality, we decided to create a solution in-house to quantify traffic into these matrices.</p><p>The solution we came up was to multiply the API’s cost matrices by a parameter, named speed-factor <strong>⍺</strong>, which exists to simulate the existence of traffic. And so we reduced our initial problem to finding an optimal <strong>⍺</strong>.</p><p>To find <strong>⍺</strong>, we used our dataset of historic routing requests, which is composed of all routes ever generated in our routing system. For each routing request to our system, we acquired both a “raw” cost matrix and an adjusted matrix with traffic taken into account. With all these matrices in hand, we created two large matrices, <strong>G</strong> and <strong>H</strong>, following this procedure:</p><ol><li>Determine the maximum dimension of a matrix (all of them are square).</li><li>Fill the cost matrix of each request with zeros in its rows and columns until it has the dimension found at step <strong>1.</strong></li><li>Flatten each of these matrices into vectors.</li><li>The matrices from Google are inserted as rows in <strong>G</strong> and the ones from the API in <strong>H</strong>. Of course the indexes must match (i.e., request <strong>i</strong> must be row <strong>i</strong> for both matrices).</li></ol><p>Then we can find <strong>⍺</strong> by solving the following optimization problem:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/200/1*9Cw0VtyeOOTIXmLkNTvFSw.png" /></figure><p>The method used to compare the two matrices is the Frobenius norm, which is a natural norm that is also easy to compute. Using derivates we find that the answer is:</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/200/1*65HaJ8onZ98n7oeCRNSb1w.png" /></figure><p>Notice how the amount of zeros added during the second step has absolutely no effect on <strong>⍺</strong>, since we are only multiplying artificial zeros by other artificial zeros when using trace.</p><p>In fact, we are not calculating an optimal <strong>⍺</strong> in the strict sense that it will always be the best solution. But it is indeed the best solution considering all past usages of our routing system. That means it is biased by the locations used for routing in our system.</p><p>Importantly, tests using the calculated speed-factor have been successful with little to no practical difference. Hooray!</p><p>But that doesn’t mean we are finished. In fact, we will continue to use our clients’ data to improve our routing service such as using a different <strong>⍺</strong> for different times of the day or week.</p><p>By the way, if you’re interested in solving these kinds of real-world problems as well as building an awesome end-to-end product that’s helping to make Brazil more efficient, we’re <a href="https://www.linkedin.com/jobs/search/?locationId=OTHERS%2Eworldwide&amp;f_C=3346755">hiring</a>!</p><p>Also, follow us on <a href="https://www.facebook.com/CobliBrasil/">Facebook</a>, <a href="https://www.linkedin.com/company/3346755/">LinkedIn</a>, <a href="https://twitter.com/cobli_brasil">Twitter</a>, and <a href="https://www.instagram.com/cobli_brasil/">Instagram</a> as well as our <a href="https://cobli.co/blog/">Cobli Blog</a> (links in Portuguese)!</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=1123d7b00e00" width="1" height="1" alt=""><hr><p><a href="https://medium.com/cobli/how-we-quantify-traffic-in-our-routing-system-1123d7b00e00">How we quantify traffic in our Routing Platform</a> was originally published in <a href="https://medium.com/cobli">Cobli</a> on Medium, where people are continuing the conversation by highlighting and responding to this story.</p>]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[The best way to manage schema migrations in Cassandra]]></title>
            <link>https://medium.com/cobli/the-best-way-to-manage-schema-migrations-in-cassandra-92a34c834824?source=rss-5d59de451d6e------2</link>
            <guid isPermaLink="false">https://medium.com/p/92a34c834824</guid>
            <category><![CDATA[cassandra]]></category>
            <category><![CDATA[startup]]></category>
            <category><![CDATA[iot]]></category>
            <category><![CDATA[devops]]></category>
            <category><![CDATA[programming]]></category>
            <dc:creator><![CDATA[Cobli Brasil]]></dc:creator>
            <pubDate>Mon, 29 May 2017 20:54:58 GMT</pubDate>
            <atom:updated>2018-10-04T17:38:12.816Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*Y6jsVSMYPsH2WmNgvR64XQ.png" /></figure><p><em>by </em><a href="https://www.linkedin.com/in/daniel-miranda-651599b7/"><em>Daniel Miranda</em></a><em>, </em><a href="https://www.linkedin.com/in/lucasbrunialti/"><em>Lucas Brunialti</em></a><em>, </em><a href="https://www.linkedin.com/in/tobinfulton/"><em>Tobin Fulton</em></a></p><p>Applying <a href="https://en.wikipedia.org/wiki/Schema_migration">schema migrations</a> in relational databases (SQL) is common practice. Schema migration tools help replicate environments (local, dev and prod) and facilitate continuous integration. Moreover, these tools allow for easy documentation, including versioning database changes.</p><p>Nevertheless, in NoSQL systems this practice is not that common. So we decided to open source a tool, <a href="https://github.com/Cobliteam/cassandra-migrate"><strong>cassandra-migrate</strong></a>, to better manage cassandra schema migrations.</p><p><a href="https://cobli.co/">Cobli</a> is a B2B startup in the Internet of Things (IoT) space based in São Paulo, Brazil. We specialize in building state of the art software solutions for companies to better manage their vehicle fleets.</p><p>We use OBDII devices to connect these vehicles to the internet, collecting telematics data such as geolocation, speed, and acceleration as well as engine data such as rpm, pedal angle, and voltage. We then show companies how they can optimize their commercial fleet operations based on the insights we generate.</p><p>In order to do this, we have to deal with a lot of data.</p><p>We adopted Cassandra (C*) as a database to handle these large data streams coming from OBDII devices. We also use Scala and Spark to analyze and run machine learning models on the data, saving all results in Cassandra.</p><p>We now receive over ~1.5M events per day, growing exponentially every month as more and more companies throughout Brazil and the world buy Cobli’s software solutions. :)</p><p>Since we add new features every month, we’ve found it quite difficult to manage C* schema migrations, especially within running Cassandra production clusters. We’ve historically had difficulties replicating schema across environments, documenting and versioning schema migrations as well as syncing schema migrations with the product codebase.</p><p>The <a href="https://github.com/Cobliteam/cassandra-migrate"><strong>cassandra-migrate</strong></a> has helped us manage all of these complexities by supporting setting a baseline version of the schema. :)</p><p>Also, although Cassandra does not have ddl schema transactions, it was possible to use <a href="http://docs.datastax.com/en/cassandra/2.1/cassandra/dml/dml_ltwt_transaction_c.html"><em>lightweight transactions</em></a> (CAS) to avoid multiple changes at the same time. This is especially useful in automating deployments.</p><p>Summarizing, the <a href="https://github.com/Cobliteam/cassandra-migrate"><strong>cassandra-migrate</strong></a> tool has the following features:</p><ul><li>Written in Python for easy installation</li><li>Does not require cqlsh, just the Python driver</li><li>Supports baselining an existing database into versions</li><li>Supports unique environments for multiple profiles</li><li>Supports partial advancement</li><li>Supports locking for concurrent instances using <a href="http://docs.datastax.com/en/cassandra/2.1/cassandra/dml/dml_ltwt_transaction_c.html">Lightweight Transactions</a></li><li>Verifies stored migrations against configured migrations</li><li>Stores content, checksum, date and state of every migration</li><li>Supports deploying with different keyspace configurations for different environments</li></ul><p>Here is an example of one of our deploys:</p><pre>$ cassandra-migrate -H &lt;host&gt; -u &lt;user&gt; -P &lt;pwd&gt; status</pre><pre>INFO:Migrator:Database is already up-to-date<br>Keyspace:            &lt;ksp&gt;<br>Migrations table:    database_migrations<br>Current DB version:  14<br>Latest DB version:   14</pre><pre>## Applied migrations<br>#  Name                 State      Date applied         Checksum<br>-- -------------------- ---------  -------------------  ------------<br>1  v001_initial.cql     SKIPPED    2017-05-19 17:13:09  430f7620381f<br>2  v002_event.cql       SKIPPED    2017-05-19 17:13:09  cd7784863a09<br>3  v003_geof.cql        SKIPPED    2017-05-19 17:13:10  62175ca4e94c<br>4  v004_routing.cql     SKIPPED    2017-05-19 17:13:10  ae14c51a0d78<br>5  v005_ds.cql          SKIPPED    2017-05-19 17:13:11  b9ef6a787adf<br>6  v006_fgp.cql         SKIPPED    2017-05-19 17:13:11  a3f7d24794fc<br>7  v007_routing.cql     SKIPPED    2017-05-19 17:13:11  c04e48715769<br>8  v008_usr_l_log.cql   SKIPPED    2017-05-19 17:13:12  8b9ddb31f469<br>9  v009_user_lang.cql   SKIPPED    2017-05-19 17:13:12  81f9bba8fa91<br>10 v010_dev_st.cql      SKIPPED    2017-05-19 17:13:12  d425beae9684<br>11 v011_user_subs.cql   SKIPPED    2017-05-19 17:13:13  6d1bf7a0e5c2<br>12 v012_device_acc.cql  SKIPPED    2017-05-19 17:13:13  0ab035a35f14<br>13 v013_fix_cache.cql   SKIPPED    2017-05-19 17:13:13  391d876b24ab<br>14 v014_vehicle.cql     SUCCEEDED  2017-05-19 17:24:26  770fb320764d</pre><p>By open sourcing the <a href="https://github.com/Cobliteam/cassandra-migrate"><strong>cassandra-migrate</strong></a> tool, we hope to help others with similar problems as well learn from other users in different environments. So if you decide to use <a href="https://github.com/Cobliteam/cassandra-migrate"><strong>cassandra-migrate</strong></a>, please get in touch! :)</p><p>And by the way, we’re <a href="https://www.linkedin.com/jobs/search/?locationId=OTHERS%2Eworldwide&amp;f_C=3346755">hiring</a>!</p><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=92a34c834824" width="1" height="1" alt=""><hr><p><a href="https://medium.com/cobli/the-best-way-to-manage-schema-migrations-in-cassandra-92a34c834824">The best way to manage schema migrations in Cassandra</a> was originally published in <a href="https://medium.com/cobli">Cobli</a> on Medium, where people are continuing the conversation by highlighting and responding to this story.</p>]]></content:encoded>
        </item>
    </channel>
</rss>