learning-crawlers Goto Github PK

base-compras-licitacoes-sao-paulo

Extração de dados com Requests para listar Compras e Licitações da Cidade de São Paulo

bolsafamilia

Extração de dados com Requests para listar brasileiros do Bolsa Família

c01

Coleta de Dados Públicos

catalogos-dados-brasil

Mapeamento de iniciativas (e catálogos) de dados abertos governamentais no Brasil.

cetsp-pagamentos

Extração de dados com Requests para listar pagamentos da CETSP

cnep

Extração de dados com Requests para listar empresas do CNEP - Cadastro Nacional de Empresas Punidas

cnpj-full

Utilitário em Python para ler os dados públicos do CNPJ disponibilizados pela Receita Federal e carregá-los em arquivos csv ou sqlite para fácil consumo. Também permite consultas com visualização interativa ou exportação para formatos diversos.

consultacep

Simples ferramenta JS para facilitar a busca pela informação de um CEP.

covid19-br

Dados diários mais recentes do coronavírus por município brasileiro

crawlerg1

CrawlerG1

dados-publicos

Mapeamento de Dados Públicos

data-science--cheat-sheet

Cheat Sheets

diario-oficial

📰 Brazilian government gazettes, accessible to everyone.

doufinder

DouFinder: Script para pesquisa/alerta de termos no Diário Oficial da União (DOU).

facebook-sdk-for-python-and-python-firebase

Raspagem Facebook e Database Firebase

fipe-crawler

FIPE Crawler - Script que realiza download dos dados da Tabela FIPE Preço Médio de Veículos.

fundatec-pagamentos

Extração de dados com Requests para listar pagamentos da FUNDATEC

honeymustard

Crawler Manager API

instabotai

Instagram AI bot with face detection. It works without instagram api, need only login and password.

letras_mus

Raspagem de letras de música

locatefamily-brazil

Extração de dados com Requests para listar brasileiros do Locate Family

olx-empregos

Extração de dados com Beautiful Soup + Selenium para encontrar empregos no OLX

playwright-python

Python version of the Playwright testing and automation library.

prefeitura-rio-de-janeiro-remuneracao

Extração de dados com Selenium + BeautifulSoup para listar pagamentos da Prefeitura do Rio de Janeiro

pynubank

Acesse seus extratos do Nubank pelo Python (Baseado na versão JS: https://github.com/Astrocoders/nubank-api)

raspagem-de-dados-para-iniciantes

Raspagem de dados para iniciante usando Scrapy e outras libs básicas

raspagem-ordens-camara

raspagemmega

Script para raspagem e organização dos dados da Mega-Sena divulgados pela Caixa Econômica Federal.

riovagas

Extração de dados com Selenium para encontrar empregos no RioVagas

scrapstagram

An Instagram Scrapper