#webscrapping
Se você fosse fazer um webscrapping hoje, qual estratégia utilizaria?

Tentei com proxy e o cloudflare manda um 520, sem o proxy rapidinho vem o 429 (to fazendo <30 req por minuto)…
September 15, 2024 at 6:44 PM
What do they mean by indie 😭 who do they think gets hurt the most by webscrapping and model training?
November 5, 2024 at 12:05 AM
live fazendo webscrapping twitch.tv/geckones
September 10, 2024 at 4:20 PM
Quem realmente está preocupado em não dar dados para IA não deveria ter conta aqui, qualquer bugtech pode fazer webscrapping e roubar tudo que você posta aqui para treinar LLM
Isso aqui tá completamente errado.

1. O login do bsky38 é feito com oauth. Isso significa que as permissões que o aplicativo pede são exibidas claramente na tela pra que você veja cada uma e saiba exatamente com o que está consentindo. É só ler lá.

2 e mais importante.

90 % do bsky é público.
September 7, 2026 at 5:21 PM
September 3, 2025 at 8:12 PM
September 6, 2024 at 1:03 AM
Sur un #R de graphe #dataviz, pr essayer d'aider mes élèves en cpge: orientat° & concours

Une "ébauche" d'appli R #shiny pr visualiser les écoles par banque de notes & débouchés qd on sélectionne école/domaine.

Ms il reste bcp de webscrapping (CCINP, polytech, etc) de scei & erreurs à corriger ^_^
August 3, 2025 at 7:41 PM
« exit les listes de postes disponibles « publiquement » en ligne, sans compte… »

Ca sent fort le webscrapping.

social.sciences.re/@RGrunblatt/...
Rémy Grünblatt 🍃 (@RGrunblatt@sciences.re)
Attaché : 1 image Une nouvelle version du moteur de recherche de postes pour l'#ESR est disponible sur https://sciences.re/postes/, je prends vos retours ! Avec la mise en place d'Odyssée, j'en ai p...
social.sciences.re
March 3, 2025 at 3:54 PM
🚀 We're thrilled to launch Airtop on Product Hunt today!

We've solved browser automation's biggest challenge: authentication.

No more broken scrapers or stuck automations, just seamless web control.

www.producthunt.com/posts/airtop...

#buildinpublic #webscrapping #DeveloperTools
Airtop Auth - Automate web tasks on authenticated sites | Product Hunt
Airtop is revolutionizing web automation with AI-powered cloud browsers that seamlessly handle authentication. Whether you're building AI agents, automation tools, or web scrapers, Airtop lets you con...
www.producthunt.com
February 5, 2025 at 8:28 AM
opa!

sempre que faço webscrapping, a depender do site eu uso fetch normal e parseio o html

scrappings com interação maior uso selenium python

já em scrappings que você gostaria de subir pra cloud e usar como cron-job uso playwright (node)
September 16, 2024 at 3:39 AM
El lado del mal - Tu WebSite con Smart Honeypots contra el WebScrapping usando AI Labyrinth de Cloudflare www.elladodelmal.com/2025/03/tu-w... #cloudflare #WebScrapping #AI #IA #GenAI #Hardening #honeypots
Tu WebSite con Smart Honeypots contra el WebScrapping usando AI Labyrinth de Cloudflare
Blog personal de Chema Alonso (CDO Telefónica, 0xWord, MyPublicInbox, Singularity Hackers) sobre seguridad, hacking, hackers y Cálico Electrónico.
www.elladodelmal.com
March 28, 2025 at 5:48 AM
El webscrapping lo pueden bloquear los desarrolladores fácilmente. Solo es añadir un robots.txt a la interfaz.
January 27, 2025 at 5:42 PM
usando meu instagram pessoal pra fazer webscrapping se eu perder a conta é isso a vida é feita de momentos
August 3, 2026 at 6:40 PM
já me inscrevi no canal!!

e já tô vendo de estudar python justamente com um projeto de webscrapping e um de pandas! valeu por reforçar
September 10, 2024 at 11:49 PM
webscrapping é tão lindo, algum dia vou dominar isso aí
September 14, 2024 at 5:43 PM
Webscrapping + ruční vyhledávání jistých frází a slovních spojení, emotikon (srp a kladivo u komančů, červený trojuhelník u hamásistů). A někdy na ně prostě narazíš v jistých diskuzích. No a když máš jednoho, většinou má celý seznam kamarádů. Hned jich je pár tisíc ani se nenaděješ.
July 4, 2024 at 2:25 PM
Start your journey in Web scrapping with Java. Yes you read it right. You can easily build a data empire that scrapes the internet using Java. #ai #webscrapping
Easy Guide - youtu.be/YvS5q1hM3GA?...
November 22, 2024 at 2:36 PM
Pega o conteúdo do @teomewhy.org !

Tem Python e Pandas lá, por exemplo… já é um alicerce para dados.
Recomendo também estudar automações com Python e WebScrapping…

E dito isso, vai estudando e aplicando… uma hora dá bom!
September 10, 2024 at 11:47 PM
gosto mto por conta do selenium

role demais fazer webscrapping com input de dados via terminal usando o puppetier do JS
July 3, 2023 at 3:56 PM
https://blog.netrunner.lol/uscrapper-osint-webscraper-5f15e65a9fcf

Looking to do webscrapping to find out what your websites are leaking? Uscrapper 2.0 is robust tool that has some intuitive features. What other tools do you use?
Uscrapper: OSINT webscraper
Brief Information
blog.netrunner.lol
August 8, 2023 at 3:11 PM
Na maioria dos produtos digitais (Netflix, Globoplay, Amazon etc.), a quantidade de usuários não logados que trafega nos domínios é gigante. Chega a ser coisa de mais de 60% fácil do tráfego. Imagina alguém tentanto fazer um webscrapping disso pros fins que ela quiser.

Então, óbvio, não adianta
September 1, 2024 at 6:01 PM