Find Jobs
Hire Freelancers

simple scraping script work

$30-250 USD

En curso
Publicado hace casi 12 años

$30-250 USD

Pagado a la entrega
Hello, I need a php script doing: step 0: you get a file with a list of URLs (hundreds or thousands); they are in all sorts of format (subdomains, https, many SLD/TLD). step 1: you extract the domain names from the URLs and generate a sorted list of unique domains; this is not as simple as it sounds as the function doing that must be able to tokenize any URL format as well as any form of TLD (like .[login to view URL], .fr, .[login to view URL], ... for example). step 2: clean the list to remove some domains such as free blogs or .gov. step 3: scrape [login to view URL] to get one data about some of the domains. step 4: scrape [login to view URL] to get some data for a short list of domains (without getting banned for superusage). step 5: scrape 2 data from the [login to view URL] page for each domain in the list. step 6: sort the list and output as a flat file. Or you can propose your method. Potential for long term work with the right programmer(s)
ID del proyecto: 2379610

Información sobre el proyecto

10 propuestas
Proyecto remoto
Activo hace 12 años

¿Buscas ganar dinero?

Beneficios de presentar ofertas en Freelancer

Fija tu plazo y presupuesto
Cobra por tu trabajo
Describe tu propuesta
Es gratis registrarse y presentar ofertas en los trabajos
10 freelancers están ofertando un promedio de $187 USD por este trabajo
Avatar del usuario
I can deliver the script
$250 USD en 5 días
4,8 (107 comentarios)
7,2
7,2
Avatar del usuario
Hi, I can do that
$150 USD en 2 días
5,0 (100 comentarios)
7,0
7,0
Avatar del usuario
Full time freelance web developer with over 8 years of commercial experience.
$600 USD en 5 días
5,0 (96 comentarios)
6,5
6,5
Avatar del usuario
hi, I'm an expert in scrapper programming and data mining. Please kindly have your inbox checked and let me handle your project.
$149 USD en 5 días
5,0 (29 comentarios)
5,3
5,3
Avatar del usuario
But you should give me the domain names to be removed in step2 "step 2: clean the list to remove some domains such as free blogs or .gov."
$140 USD en 1 día
5,0 (16 comentarios)
4,8
4,8
Avatar del usuario
why not built the script with python?
$100 USD en 3 días
5,0 (6 comentarios)
4,3
4,3
Avatar del usuario
Hello. I'm the right programmer! I write custom programs who can do everything. PHP code runs from certain ips thus blocked, programs can't be blocked. So, I will create a program which check the domain validity, and then go to the websites to get the info we need. Please check my portfolio and website. Thanks
$150 USD en 5 días
5,0 (7 comentarios)
2,8
2,8

Sobre este cliente

Bandera de UNITED KINGDOM
London, United Kingdom
4,8
9
Forma de pago verificada
Miembro desde ago 19, 2010

Verificación del cliente

¡Gracias! Te hemos enviado un enlace para reclamar tu crédito gratuito.
Algo salió mal al enviar tu correo electrónico. Por favor, intenta de nuevo.
Usuarios registrados Total de empleos publicados
Freelancer ® is a registered Trademark of Freelancer Technology Pty Limited (ACN 142 189 759)
Copyright © 2024 Freelancer Technology Pty Limited (ACN 142 189 759)
Cargando visualización previa
Permiso concedido para Geolocalización.
Tu sesión de acceso ha expirado y has sido desconectado. Por favor, inica sesión nuevamente.