patrocinado
Proxy para Selenium
Navegador de verdade traz limitações de verdade. Duas delas surpreendem quase todo mundo.
Autenticação
Usuário e senha dentro do endereço não são aceitos; o navegador abre uma janela.
Ou você usa uma extensão que entrega as credenciais, ou prende a autenticação ao seu próprio endereço no lado do fornecedor.
O endereço fica fixo
Dentro do navegador em execução o endereço não muda. Girar significa reiniciar, e isso custa segundos.
Corte o que baixa
Carregar a página inteira traz imagens, fontes e scripts de terceiros. Desligar isso remove até dois terços do tráfego.
Uma sessão, uma identidade
Se o trabalho envolve login, mantenha o cenário inteiro num endereço só.
options.add_argument(f"--proxy-server={PROXY}")
prefs = {"profile.managed_default_content_settings.images": 2}