Como raspar perfis do Github em um minuto

STRINGS BOOLEANAS1º DE AGOSTO DE 2019BOLEANO7 COMENTÁRIOS

Aqui está uma maneira deliciosamente fácil de obter uma planilha do Excel a partir de uma pesquisa por usuários do Github.

(Veja uma oferta exclusiva para assinantes Brainfood abaixo).

1. Instale a extensão Chome AutoPagerize . Ele permitirá anexar a 2ª, 3ª, etc. páginas de resultados de pesquisa ao final da página atual, criando uma página longa que contém todos os resultados (ou quantos você desejar). Funciona nos resultados de pesquisa do Google, bem como nos resultados de pesquisa do Github.
2. Pesquise os idiomas e locais no Github – por exemplo, language:java location:amsterdam:
3. Role para baixo, permitindo que o AutoPagerize crie uma página longa contendo quantos resultados você desejar.
4. Instale e execute o Chome Extension Instant Data Scraper em webrobots.io.

Voila – agora você pode exportar resultados raspados e analisados ​​para o Excel:

(Observe que neste caso não há necessidade de localizar o botão “Próximo”, pois todos os resultados estão dentro da página.)

Aproveitar!

Você perdeu nosso webinar “Web Scraping For Recruiters” ? A apresentação desta semana esgotou e vamos repeti-la na terça-feira, 6 de agosto , seguida de um workshop prático opcional no dia 7 de agosto . Abordaremos a seleção de ferramentas de raspagem e várias ferramentas, como Data Miner, Phantombuster, ZapInfo, Outwith Hub e muito mais. Assentos são limitados.