<?xml version="1.0" encoding="UTF-8"?><rss xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:atom="http://www.w3.org/2005/Atom" version="2.0" xmlns:cc="http://cyber.law.harvard.edu/rss/creativeCommonsRssModule.html">
    <channel>
        <title><![CDATA[Stories by Jhonathan Davi on Medium]]></title>
        <description><![CDATA[Stories by Jhonathan Davi on Medium]]></description>
        <link>https://medium.com/@jhoonbr?source=rss-c6bcc6f59be4------2</link>
        <image>
            <url>https://cdn-images-1.medium.com/fit/c/150/150/1*pfKpyCfBUQ4_0IqxiMDpfw.jpeg</url>
            <title>Stories by Jhonathan Davi on Medium</title>
            <link>https://medium.com/@jhoonbr?source=rss-c6bcc6f59be4------2</link>
        </image>
        <generator>Medium</generator>
        <lastBuildDate>Wed, 18 Nov 2026 19:20:22 GMT</lastBuildDate>
        <atom:link href="https://medium.com/@jhoonbr/feed" rel="self" type="application/rss+xml"/>
        <webMaster><![CDATA[yourfriends@medium.com]]></webMaster>
        <atom:link href="http://medium.superfeedr.com/" rel="hub"/>
        <item>
            <title><![CDATA[Como eu “bypassei” um captcha sem quebra-ló — Balanços de Dados Históricos —  Fundamentus]]></title>
            <link>https://medium.com/@jhoonbr/como-eu-bypassei-um-captcha-sem-quebra-l%C3%B3-balan%C3%A7os-de-dados-hist%C3%B3ricos-fundamentus-c988d4cdcf0f?source=rss-c6bcc6f59be4------2</link>
            <guid isPermaLink="false">https://medium.com/p/c988d4cdcf0f</guid>
            <category><![CDATA[bypass]]></category>
            <category><![CDATA[fundamentus]]></category>
            <category><![CDATA[bovespa]]></category>
            <category><![CDATA[python]]></category>
            <category><![CDATA[ações]]></category>
            <dc:creator><![CDATA[Jhonathan Davi]]></dc:creator>
            <pubDate>Sun, 20 Jan 2019 13:52:02 GMT</pubDate>
            <atom:updated>2019-01-21T13:36:33.349Z</atom:updated>
            <content:encoded><![CDATA[<h3>Como eu “bypassei” um captcha sem quebra-ló — Balanços de Dados Históricos — Fundamentus</h3><figure><img alt="" src="https://cdn-images-1.medium.com/max/450/1*LVVmawILn2CzFnnmrXwMrw.gif" /></figure><h3><strong>Introdução</strong></h3><p>Realmente muitas das vezes captchas são coisas chatas de se lidar e frustrantes na vida de um desenvolvedor/cientista de dados quando está se desenvolvendo crawlers para mineração de dados em paginas publicas, habitualmente eles sempre estão lá para atrapalhar seu trabalho, mas fazer o que né? De qualquer forma precisamos saber lidar com eles. Basicamente captchas são imagens distorcidas de uma sequencia alfanumérica utilizados por aplicações que verifica se o usuário é realmente humano e não um robô.</p><p>Recentemente eu trabalhei em um projeto com investidores no qual eu precisei desenvolver um robô que baixava vários arquivos ZIPs com informações de balanços de dados históricos de ações listadas na Bovespa no site Fundamentus, as informações são utilizadas para o investidor encontrar as melhores opções de investimento. Mas como já diz o ditado popular “Nem tudo são rosas”. No meio do caminho eu me deparei com um captcha que para cada requisição de download de arquivo eu precisava digitar o código solicitado para validação da requisição, E como meu objetivo era realizar toda esta tarefa de forma automática inicialmente imaginei que isto seria um empecilho, mas realizando alguns testes manuais eu encontrei uma forma de “bypassear” esta verificação sem precisar necessariamente quebrar o captcha.</p><h3>Funcionamento do captcha</h3><p>Para cada nova visita no site era setado no navegador um cookie com o nome PHPSESSID como valor uma hash md5 de alguma informação provavelmente referente aquela requisição HTTP. O cookie definido no início da navegação era exclusivamente utilizado para cada ação da Bovespa no site, isto é que para cada solicitação de download de um dado histórico sempre é utilizado um único cookie. No meu caso eu precisava baixar 303 arquivos ZIPs de dados históricos de ações, tendo em mente que a cada nova visita é gerado um novo cookie, inicialmente gerei 303 cookies exclusivos.</p><figure><img alt="" src="https://cdn-images-1.medium.com/max/723/1*xRLMJDjSkJ63LScO2XJZwg.png" /></figure><p>Por padrão a aplicação me amarrava somente à uma ação me limitando acessar informações das outras ações de uma vez só, Então para cada ação que eu precisava baixar as informações eu precisei definir um cookie exclusivo gerado anteriormente, fazendo isto eu tinha todos os cookies atrelados a todas as ações. O próximo passo era simplesmente acessar a página de download das informações da ação desejada utilizando no cabeçalho Cookie PHPSESSID=[Cookie gerado]. ok, mas e o captcha? O captcha estava neste mesma página fazendo seu trabalho de validação, mas facilmente eu poderia “bypassear” esta validação solicitando o download do arquivo diretamente ao end-point responsável pelos downloads apenas passando no parâmetro GET o cookie de uma ação (?SID=[Cookie]) como anteriormente eu definir cookies exclusivos para cada ação o end-point já sabia qual arquivo eu estava solicitando. Fantasticamente que por erro do desenvolvedor o end-point não validava se realmente eu tinha digitado o código do captcha, ele apenas levava em consideração o acesso à pagina de download onde tinha o captcha.</p><p>Eu decidir disponibilizar o código que foi utilizado para fazer toda a operação, é indispensável frisar que o uso do mesmo deve ser com moderação e sempre mantendo os créditos do desenvolvedor.</p><p>Script:</p><p><a href="https://github.com/jh00nbr/Fundamentus_download_balances">jh00nbr/Fundamentus_download_balances</a></p><figure><img alt="" src="https://cdn-images-1.medium.com/max/1024/1*tT5qmj7lVoaLcVjDLL1pYw.png" /></figure><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=c988d4cdcf0f" width="1" height="1" alt="">]]></content:encoded>
        </item>
        <item>
            <title><![CDATA[Download de intraday de ações da Bovespa no ADVFN]]></title>
            <link>https://medium.com/@jhoonbr/download-de-intraday-de-a%C3%A7%C3%B5es-da-bovespa-no-advfn-88c654e169cb?source=rss-c6bcc6f59be4------2</link>
            <guid isPermaLink="false">https://medium.com/p/88c654e169cb</guid>
            <category><![CDATA[financial-data]]></category>
            <category><![CDATA[finance]]></category>
            <category><![CDATA[bovespa]]></category>
            <category><![CDATA[python]]></category>
            <category><![CDATA[stocks]]></category>
            <dc:creator><![CDATA[Jhonathan Davi]]></dc:creator>
            <pubDate>Sun, 21 Jan 2018 17:24:33 GMT</pubDate>
            <atom:updated>2018-01-21T17:37:30.530Z</atom:updated>
            <content:encoded><![CDATA[<figure><img alt="" src="https://cdn-images-1.medium.com/max/600/1*YHicbu9neNcoN4Uic5m2dw.jpeg" /></figure><h3><strong>Introdução</strong></h3><p>Um gráfico diário permite a visualização de barras ou candles únicos para dias específicos. A abertura, fechamento, máxima e mínima de determinado dia. Gráficos intraday também são chamados de intradia. Em gráficos intraday o intervalo utilizado corresponde, geralmente a alguns minutos. As técnicas de análises utilizadas são válidas em qualquer tempo. As teorias são sempre válidas quando a formação do preço é livre (oferta x demanda), algumas vezes certas técnicas se adaptam melhor a determinados períodos que outras.</p><h3><strong>Funcionamento</strong></h3><figure><img alt="" src="https://cdn-images-1.medium.com/max/584/1*tub8W0_iacOIiqGnwkZvPg.png" /></figure><p>O código possui listado em sua base todas as ações da Bovespa. Com base nisso é feito o download de suas respectivas intraday para uma determinada pasta, todos os arquivos são salvos no formato CSV (Comma-separated values) sendo possível a exportação posteriormente para softwares de backtest’s.</p><h3>Projeto</h3><p><a href="https://github.com/jh00nbr/Intradays_advfn_br_download">jh00nbr/Intradays_advfn_br_download</a></p><h3>Demo</h3><iframe src="https://cdn.embedly.com/widgets/media.html?src=https%3A%2F%2Fwww.youtube.com%2Fembed%2Fa5eYXZeVucE%3Fstart%3D1%26feature%3Doembed%26start%3D1&amp;url=http%3A%2F%2Fwww.youtube.com%2Fwatch%3Fv%3Da5eYXZeVucE&amp;image=https%3A%2F%2Fi.ytimg.com%2Fvi%2Fa5eYXZeVucE%2Fhqdefault.jpg&amp;key=a19fcc184b9711e1b4764040d3dc5c07&amp;type=text%2Fhtml&amp;schema=youtube" width="854" height="480" frameborder="0" scrolling="no"><a href="https://medium.com/media/d868d5ab9164a5f46d262e5ca352bfc8/href">https://medium.com/media/d868d5ab9164a5f46d262e5ca352bfc8/href</a></iframe><img src="https://medium.com/_/stat?event=post.clientViewed&referrerSource=full_rss&postId=88c654e169cb" width="1" height="1" alt="">]]></content:encoded>
        </item>
    </channel>
</rss>