FROM SELENIUM TO SCRAPY AND PARALLEL webscraping
$30-250 USD
Paid on delivery
FROM SELENIUM TO SCRAPY - FREELANCER USERS PROFILE WEBSCRAPING.
TRANSLATE FROM SPANISH.
Actualmente tengo un código en python para hacer descargas automáticas de un sitio web usando Selenium. Necesito modificar el código para hacer lo mismo pero más rápido. Lo que se solicita es traspasar el actual código (con Selenium) a Scrapy y explicar en un documento Word cómo usarlo.
Lo que hace el código es tomar un listado de URLs de perfiles de usuario de Freelancer, que ya extraje con otro código, ingresar a cada uno de los links y extraer información de cada usuario (descripción de servicio, precio por hora, etc.) y pasarlo a un dataframe en pandas. Lo que actualmente demora entre 10 y 40 segundos por usuario (media 20 seg.), la idea es que lo haga en una fracción de ese tiempo (queremos llegar a los 2-5 segundos), NECESITO incluir procesamiento en paralelo.
Project ID: #27853806
About the project
6 freelancers are bidding on average $190 for this job
Hi, Greetings! ✅checked your project details: FROM SELENIUM TO SCRAPY AND PARALLEL webscraping ✅Completed Time: In project deadline We have worked on 600 + Projects. I have 6 + years of the experience in same k More
Hello I'm Web scraping expert. Very interesting in your project”scrapping web”. I'm a Python, with a strong background in Data Scraping and Data Crawling. I have finished more than 30 similar projects in the past, and More
I had been doing scrapping from last 3-4 years. Already done with around 15000 websites so far with scrappy, celenium , browser automation in many real estate,webshop, news sites .I am much sure that I will be the best More