Como raspar dados do LinkedIn: um guia detalhado

O que é a raspagem de dados no LinkedIn

Em suma, a raspagem é um método de coleta rápida de dados online usando scripts. Ela desempenha um papel importante ao trabalhar com o LinkedIn, porque ajuda a:

• procurar vagas de emprego;

• buscar candidatos;

• analisar concorrentes;

• gerar leads.

O LinkedIn só permite a raspagem de contas públicas. Ele também estabelece limites de solicitações de API e pode bloquear contas que acessam o servidor com muita frequência ou exibem outras atividades suspeitas. Por isso, é fundamental tomar cuidado ao realizar a raspagem nessa plataforma: não colete dados confidenciais e não sobrecarregue os servidores do site.

Como automatizar a raspagem de dados no LinkedIn

Para agilizar a raspagem de dados do LinkedIn, você pode usar o seguinte:

• Serviços sem código pagos, ideais para quem não sabe programar. Listamos abaixo ferramentas populares de raspagem de dados do LinkedIn sem código.

• Frameworks. Ferramentas como o Scrapy, o Selenium e o Apify SDK permitem que você colete, processe e salve dados no formato desejado.

• Bots. Eles podem raspar o LinkedIn e estruturar as informações coletadas. É possível encontrar soluções de raspagem prontas em JavaScript, Python, Go e PHP, ou você pode criar a sua.

• Bibliotecas e frameworks de automação de navegador. Bibliotecas como Beautiful Soup, Requests, lxml, Cheerio, Puppeteer, entre outras, podem automatizar etapas específicas da raspagem de dados do LinkedIn, incluindo com a ajuda de um navegador antidetecção para a funcionalidade multiconta.

5 melhores serviços de raspagem de dados no LinkedIn

Estas são as principais ferramentas sem código para coletar dados do LinkedIn:

Evaboot

O Evaboot é uma extensão do Chrome para a raspagem de dados na Web pelo LinkedIn Sales Navigator. Ele reúne os seguintes dados em um arquivo CSV:

• nomes;

• cargos e tempo que foram ocupados;

• URLs de páginas pessoais e corporativas;

• e-mails;

• nomes de empresas;

• sites;

• locais de escritórios;

• indústrias;

• número de funcionários.

O Evaboot também confirma se os e-mails são válidos, limpa os dados (por exemplo, remove emojis) e verifica se os perfis do LinkedIn encontrados correspondem aos filtros de pesquisa definidos.

O Evaboot custa a partir de US$ 9/mês. Por esse preço, você recebe 100 créditos e pode exportar 50 e-mails por mês. A limpeza de dados e a filtragem de contas do LinkedIn estão disponíveis a 1.500 créditos por US$ 49.

Phantombuster

O Phantombuster é um serviço baseado em IA que raspa dados de plataformas como o LinkedIn, o X (Twitter), o Instagram, o Slack e o Facebook para a geração de leads. Ele pode:

• raspar perfis pessoais e corporativos;

• filtrar contas e anúncios de empregos encontrados;

• sincronizar dados com o CRM usando a integração do HubSpot;

• exportar resultados de pesquisas do LinkedIn;

• monitorar atualizações de leads em potencial, como mudanças de emprego e interações com outras contas;

• enviar mensagens personalizadas automaticamente.

O Phantombuster oferece um teste gratuito por 2 horas e 1.000 solicitações de IA. A assinatura básica custa € 69/mês para 10 horas de uso e 10.000 créditos. As assinaturas pagas incluem acesso à comunidade, exportação ilimitada de dados do LinkedIn e suporte prioritário.

Waalaxy

O Waalaxy é um serviço baseado em IA para a raspagem de dados e a geração de leads automática no LinkedIn. Ele pode:

• coletar dados sobre possíveis leads, incluindo e-mails de trabalho;

• exportar dados para CRM;

• ser integrado ao Recruiter e Sales Navigator;

• enviar pedidos de conexão no LinkedIn automaticamente;

• enviar mensagens no LinkedIn e por e-mail;

• gerenciar uma equipe.

O teste gratuito do Waalaxy fornece 25 créditos para a pesquisa de e-mails e 80 créditos para convites no LinkedIn. O trabalho em equipe e a sincronização com o CRM estão disponíveis nas assinaturas pagas, a partir de € 19/mês.

Apollo

O Apollo é uma extensão do navegador Chrome para a raspagem de dados do LinkedIn. Ele usa redes neurais para automatizar e otimizar a geração de leads. O Apollo.io pode:

• coletar e enriquecer dados do LinkedIn, Gmail, Google Agenda e de sites corporativos;

• filtrar as informações coletadas;

• exportar os dados para CRM;

• enviar e responder a mensagens;

• otimizar horários de reuniões, se preparar para elas e criar acompanhamentos;

• dar dicas de performance em vendas.

A versão de teste do Apollo.io fornece 100 créditos por mês. Os usuários de nível básico e superior podem enriquecer dados, aplicar filtros avançados do LinkedIn e receber suporte prioritário. As assinaturas custam a partir de US$ 59 para 5.000 solicitações.

La Growth Machine

La Growth Machine é uma plataforma para automatizar as vendas no LinkedIn, no X (Twitter) e por e-mail. Seus principais recursos incluem:

• busca de contas, números de telefone e e-mails;

• exportação de leads do LinkedIn Sales Navigator para CSV;

• envio de mensagens no LinkedIn e no X (Twitter);

• avaliação do interesse de leads;

• integração com o HubSpot e outros CRMs;

• análise do desempenho de campanhas;

• trabalho em equipe.

La Growth Machine é gratuita nas duas primeiras semanas. Depois disso, as assinaturas custam a partir de € 60/mês. Para coletar e-mails e fazer solicitações de API no LinkedIn, você precisará pagar € 120. A integração com o CRM também requer a assinatura de € 120.

Como ignorar a proteção contra raspagem de dados no LinkedIn

Para proteger seus usuários contra spam e fraudes, o LinkedIn define limites para o número de convites e mensagens enviados por uma única conta. Além disso, o sistema antifraude bloqueia contas que acessam o servidor com muita frequência. Porém, você pode contornar as medidas de proteção do LinkedIn ao seguir estas recomendações de especialistas:

Crie vários perfis virtuais

Para reduzir o risco de bloqueio, você pode raspar os dados do LinkedIn em várias contas, em vez de uma. Assim, é possível distribuir a carga, e cada conta levantará menos suspeitas. Mesmo se uma delas for banida pela rede, você ainda terá acesso às outras.

De acordo com as regras do LinkedIn, uma pessoa só pode ter uma única conta. Por isso, as contas precisam ser registradas com diferentes identidades. Para evitar que o LinkedIn vincule as páginas, use um navegador antidetecção para a funcionalidade multiconta, como o Octo. Com o Octo Browser, você pode criar vários perfis com impressões digitais diferentes. Cada um aparecerá para o LinkedIn como um dispositivo separado, já que o navegador antidetecção faz o spoofing das impressões digitais no nível do kernel. Isso reduz consideravelmente o risco de banimentos devido à funcionalidade multiconta.

Conecte proxies

Embora os navegadores antidetecção façam o spoofing do local, do fuso horário e dos idiomas, o LinkedIn ainda pode vincular as contas usando os endereços IP. Portanto, cada perfil precisa estar conectado a um proxy com um endereço IP exclusivo. Você pode comprar proxies residenciais de provedores verificados e conectá-los aos perfis diretamente no Octo Browser.

Prepare seus perfis

Para evitar que os perfis recém-criados pelo navegador antidetecção causem alerta nos sistemas antifraude do LinkedIn, você precisa prepará-los corretamente. Para isso, colete cookies de sites conhecidos na região selecionada. O Octo Browser oferece seu próprio Cookie Robot integrado para automatizar esse processo. Basta fornecer uma lista com links de recursos online populares para que ele acesse e colete os cookies sem realizar outras ações.

Registre várias contas do LinkedIn

Depois de preparar os perfis, você pode registrar as contas do LinkedIn. Para isso, você precisará de endereços de e-mail exclusivos e documentos de verificação de identidade. Leia nosso artigo para saber como criar várias contas do Gmail.

Complete as contas

Quanto mais informações uma conta do LinkedIn tiver, mais confiável ela parecerá. O ideal é preencher todos os campos:

• Avatar. Envie um retrato profissional com um fundo neutro.

• Título. Descreva brevemente de quem é a conta e o que a pessoa faz.

• Currículo. Crie um arquivo PDF com uma descrição detalhada da experiência e das principais habilidades.

• Experiência e formação. Preencha esses campos usando os dados do currículo.

• Recomendações. Consiga o endosso de conhecidos. Você pode escrever um modelo e anexar ao pedido de recomendação do LinkedIn, para não dar muito trabalho à pessoa.

Envie solicitações em um ritmo razoável

Solicitações de servidor muito frequentes podem acionar o sistema antifraude do LinkedIn. Para se proteger contra robôs, ataques DDoS e scrapers, é provável que a plataforma bloqueie automaticamente a conta e o endereço IP associado. Para evitar isso, é melhor enviar solicitações na velocidade de um usuário comum.

Assine o LinkedIn Premium

Especialistas em vendas do LinkedIn dizem que a plataforma confia mais nos usuários com uma assinatura paga. As assinaturas premium permitem que você envie mais convites e mensagens, além de fornecer recursos adicionais, como integração ao CRM e filtros avançados. As contas pagas são menos propensas ao banimento do que as normais. Saiba mais sobre como obter o LinkedIn Premium em nosso artigo.

Como raspar contas públicas do LinkedIn

Como mencionamos anteriormente, você pode usar diversas ferramentas para raspar dados do LinkedIn. Por isso, compilamos diretrizes gerais para a coleta de dados de páginas públicas.

Etapa 1: Defina seus objetivos. Acesse qualquer conta pública do LinkedIn e analise as informações disponíveis. Faça uma lista das categorias de dados que você quer extrair. Por exemplo, pode ser o nome, o nome da empresa e o cargo.

Etapa 2: Faça pesquisas manuais preliminares. Vá até uma conta pública do LinkedIn, clique com o botão direito do mouse e selecione Inspect (Inspecionar) ou Inspect Element (Inspecionar elemento) para abrir as ferramentas do desenvolvedor. Na guia Elements (Elementos), encontre os blocos de informações desejados e analise seus caminhos (XPath), bem como atributos, tags e seletores. Observe que, em muitos sites populares, alguns seletores (como nomes de classes de elementos) podem mudar dinamicamente. Portanto, não recomendamos o uso desses seletores ao escrever scripts de automação.

Etapa 3: Escreva o código. Use bibliotecas de automação do navegador, como Selenium, Puppeteer ou Playwright. Siga este algoritmo:

1. Inicie um perfil do navegador antidetecção via API com a debug_port aberta.

2. Conecte o perfil em execução usando os métodos da biblioteca de automação.

3. Abra o perfil público de que você quer coletar dados usando os métodos da biblioteca de automação.

4. Acesse os seletores de elementos e extraia as informações necessárias. Faça uma análise.

5. Estruture as informações e escolha um formato de armazenamento (planilhas, bancos de dados, arquivos JSON).

Etapa 4: Teste e execute o script. Verifique a frequência das solicitações e o registro de erros. Se estiver tudo certo, execute totalmente o script.

Como raspar páginas de empresas do LinkedIn

Todas as páginas de empresas no LinkedIn são públicas. Portanto, coletar informações delas não representa um risco de violação da confidencialidade dos dados sensíveis.

Etapa 1: Analise a estrutura da página. Os perfis de empresas no LinkedIn incluem seções como Sobre, Publicações, Vagas, Dia a Dia, Pessoas. Na primeira guia, é possível encontrar informações sobre a indústria, o tamanho da empresa, o endereço da sede, etc.

Etapa 2: Descubra onde os dados são armazenados. Acesse a página da empresa no LinkedIn, clique com o botão direito do mouse no elemento com os dados necessários e selecione Inspect (Inspecionar) ou Inspect Element (Inspecionar elemento) no menu suspenso. Se não aparecer todos os dados de que você precisa, explore a estrutura HTML de cada seção. Procure tags e atributos com os dados necessários.

Etapa 3: Escreva um script. A lógica do algoritmo será a mesma da raspagem de contas públicas:

1. Inicie um perfil do navegador antidetecção via API com a debug_port aberta.

2. Conecte o perfil usando os métodos do framework ou da biblioteca de automação.

3. Abra a página da empresa cujos dados você quer extrair usando a biblioteca usando os métodos do framework ou da biblioteca de automação.

4. Acesse os seletores dos elementos que contêm os dados necessários e extraia-os. Analise os dados obtidos.

5. Estruture as informações e escolha um formato de armazenamento (planilhas, bancos de dados, arquivos JSON).

Etapa 4: Verifique o desempenho do script e inicialize-o. Confira a frequência de solicitações e o registro de erros. Se o script funcionar corretamente, você poderá executá-lo em plena capacidade.

Conclusão

A raspagem do LinkedIn é a coleta automatizada de dados da plataforma. Ela é geralmente realizada com scripts, junto a ferramentas adicionais para evitar bloqueios: proxies para mudar endereços IP, um navegador antidetecção para fazer o spoofing das impressões digitais e robôs para ignorar CAPTCHAs. Como resultado, você obtém dados estruturados sobre pessoas, vagas e empresas, além de conseguir pesquisar empregos, candidatos e leads de vendas com mais rapidez e eficiência.

Perguntas frequentes

O que é um scraper de LinkedIn?

Um scraper do LinkedIn é um software para coletar dados da plataforma de rede social, o que acelera o processo e estrutura as informações recebidas. Pode ser um robô, um script ou um serviço pronto, adaptado para iniciantes que não sabem programar.

É legal raspar dados do LinkedIn?

Sim, você pode raspar dados de páginas públicas do LinkedIn, como contas pessoais abertas, perfis de empresas e anúncios de empregos. No entanto, para que a extração seja ética, é essencial manter a confidencialidade dos dados pessoais e evitar sobrecarregar os servidores do LinkedIn com solicitações muito frequentes.