Skip to content

MarceloGomesProjetos/Bot_web_scraping

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

3 Commits
 
 
 
 

Repository files navigation

📌 Principais Mudanças e Motivações:

  1. Padrão Orientado a Objetos

    • Melhora a reutilização e encapsulamento
    • Facilita manutenção
  2. Sistema Anti-Detecção

    • Rotação automática de headers
    • Delay randômico entre requisições
    • Verificação automática de CAPTCHA
  3. Resiliência Aprimorada

    • Timeout configurável
    • Tratamento de erros refinado
    • Suporte a proxies rotativos
  4. Extração de Dados Flexível

    • Opção de pegar atributos específicos
    • Limpeza inteligente de texto

⚠️ Considerações Importantes:

  1. Legalidade - Verifique a política de dados do portal.
  2. APIs Oficiais - Prefira usar a API oficial quando disponível
  3. Carga Excessiva - Respeite robots.txt e limite de requisições
  4. Dados Pessoais - Não colete informações sensíveis sem autorização

Este código é um template genérico - adapte conforme as especificidades do alvo real. O uso indevido pode violar termos de serviço e leis de proteção de dados.

About

web scraping e vou sugerir melhorias importantes com foco em eficiência e prevenção de bloqueios.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages