Monitorar e analisar comentários de vídeos de jogos no YouTube e reviews na Steam
Agrupamento de comentários por assunto, canal e vídeo
Proposta um modelo de machine leaning de previsão de preços
Neste projeto, desenvolvi um sistema de monitoramento em tempo real das posições de ônibus , usando a API da sptrans.
Proposta de uma nova esturutura de coleta de webscraping
Amrmazenamento de dados climáticos para a regão de Ribeirão Preto
Explorando rabbitmq e padrão Padrão Publish/Subscribe
Demonstração de uma arquitetura distribuida de coleta de vários sites RSS
Criação de um pipeline de dados fácil de realizar manutenção — estruturado, modular e escalável
O projeto visa propor uma estrutura de um datalake e organizar uma coleta dos dados da api do youtube e estruturar um datalake para futuras analises em um dashboard.
A ideia surgiu de um short do canal Asimov Academy (https://www.youtube.com/shorts/V1PNrhV9qjA), com alguns extras adicionados comforme irá ser descrito no tópico 2.
Este projeto tem como objetivo a construção de um web scraping utilizando o Scrapy para extrair informações do site rss G1 e salvar os dados em um arquivo XLSX."
A ideia do projeto é fazer a extração dos dados dos produtos dos sites Leroy Merling e Telha norte e gravar dados no e-mail.
A proposta deste projeto é demonstrar o conhecimento nas bibliotecas utilizadas para a extração de dados de sites e a criação de um feed dinâmico para exibição em uma aplicação Streamlit.
O objetivo deste projeto é extrair uma tabela de um arquivo PDF e gravar os dados em uma planilha no formato XLSX. Para a extração, utilizamos a API Llama Parse.
O objetivo deste projeto é propor um código para edição de imagem, preenchendo um certificado de conclusão de curso.
Este projeto tem como objetivo construir um web scraping usando selenium para extrair informações do site Viva Real (https://www.vivareal.com.br/) e salvá-las em um arquivo `.xlsx`.
A ideia do projeto é propor uma arquitetura de organização de um processo de web scraping para obteter dados de empresas e realizar envio por e-mail.
Este projeto propõe gerar uma transcrição personalizada com IA, com base na transcrição bruta dos vídeos do YouTube e gravar as transcrições em um banco de dados SQLite.
Este projeto tem como objetivo propor um sistema de monitoramento climático para a região de Ribeirão Preto
O projeto propõe uma arquitetura em tempo real para a região de Ribeirão Preto, utilizando uma API e exibindo os dados em um dashboard.
Este projeto visa a construção de um web scraping usando Selenium para buscar produtos no site Vonder, salvar os dados em um arquivo XLSX e baixar as imagens dos produtos.
Este projeto tem como proposta elaborar uma arquitetura para a extração de dados da API do YouTube, desde a coleta até a criação de um dashboard para visualização e análise.
Este projeto tem como objetivo propor uma estrutura de ETL usando Python e Apache Airflow.
Os dados foram extraídos do site vivareal (https://www.vivareal.com.br/), atráves de um processo de web scraping (Mostrar o projeto anterior), gerando uma base de 8395 linhas e 9 colunas.
Este projeto tem como a proposta de elaborar uma arquitetura de extração da API do youtube até a elaboração do dashboard.
Entre em contato comigo por e-mail ou redes profissionais.