Find Jobs
Hire Freelancers

Python 3 Scrapy Web Scraper behind Flask (or equivalent) Rest API

$30-250 USD

Cancelado
Publicado hace más de 6 años

$30-250 USD

Pagado a la entrega
I created a scrapy web crawler that can be invoked a by script or through the command to scrape between 2-30 pages and turn a json file. I'm trying to put that behind a simple Rest API using Flask and I can't get any of these suggestions to work: [login to view URL] The API works once, and then I get a reactor error. I need to both read the results from a JSON file or object that I can pass into another function, before inserting the results into a mongoDB database. I need the code to be simple so I understand it (and scalable) so many people can use the API and utilize different threads/queue. The objective of this project is just to put the scraper behind simple rest API that can be secured, so that it can be called in a async non blocking manner (multiple times) and return the scraped json to python variable. Its not a requirement to use Flask as long as the approach is simple and uses well known and maintained libraries. I also need to pass arguments to the spider that will be in the POST json body.
ID del proyecto: 15990542

Información sobre el proyecto

16 propuestas
Proyecto remoto
Activo hace 6 años

¿Buscas ganar dinero?

Beneficios de presentar ofertas en Freelancer

Fija tu plazo y presupuesto
Cobra por tu trabajo
Describe tu propuesta
Es gratis registrarse y presentar ofertas en los trabajos

Sobre este cliente

Bandera de UNITED STATES
New York, United States
0,0
0
Forma de pago verificada
Miembro desde ene 2, 2018

Verificación del cliente

¡Gracias! Te hemos enviado un enlace para reclamar tu crédito gratuito.
Algo salió mal al enviar tu correo electrónico. Por favor, intenta de nuevo.
Usuarios registrados Total de empleos publicados
Freelancer ® is a registered Trademark of Freelancer Technology Pty Limited (ACN 142 189 759)
Copyright © 2024 Freelancer Technology Pty Limited (ACN 142 189 759)
Cargando visualización previa
Permiso concedido para Geolocalización.
Tu sesión de acceso ha expirado y has sido desconectado. Por favor, inica sesión nuevamente.