Projets pour freelances & agences web

Retrouvez l'actualité des projets pour freelances et agences web.

Service web de scraping: proxy, stripe, zone users, zone admin & front

Posté le 28/04/2021 à 04:00 - Budget : 1000 - 10000

Bonjour,
je recherche un développeur afin de développer un service web (via un site Internet).
Je ne sais pas si du PHP ou du ReactJS est le plus adapté à mon projet.
Le service web à pour but de monitorer le contenu dupliqué de sites Internet, également appelé le duplicate content.
1- L'utilisateur rentre l'URL de son site, le service récupère les URLs des pages de son site.
2- Le service scrape le contenu texte des pages du site de l'utilisateur et les recherche dans Google.
3- Il scrape les résultats Google pour chaque texte puis visite les pages affichées par Google.
4- Il scrape le texte potentiellement dupliqué sur les pages web trouvées via Google et compare la similarité du texte original de l'utilisateur du service web à celui trouvé via Google.
5- Si plus de X% de similarité entre les deux textes, alors on alerte l'utilisateur qu'une page web autre que sur son site Internet copie potentiellement son contenu texte en lui montrant l'URL trouvée via Google.
Fonctions du service web :
- Utilisation de proxy privées (que je loue à un service spécialisé) pour scraper Google
- Petit script qui calcule le taux de similarité entre le texte original & le texte trouvé sur une autre page web via Google.
- Scrape des résultats Google mais aussi certains autres moteurs de recherche : Bing, Yahoo, Search.lilo.org, Findx.
- API du service pour une utilisation en dehors du site web de ce service web
- Zone utilisateur avec logins, mot de passe oublié etc, gestion des sites et pages web à monitorer.
- Zone admin avec liste des utilisateurs, factures, date d'inscription, type d'abonnement etc.
- Zone public (front) avec pages de présentation du service web, mentions légales etc.
- Programme d'affiliation (via un lien fournis aux membres, il gagnent un % si ils réussisent à vendre le service à un ami)
- Abonnement via solution de paiement Stripe
- Génération automatique de factures PDF
Je cherche quelqu'un qui a déjà de l'expérience avec le scraping.
Merci de ne pas m'envoyer de message copié/collé.
Merci de m'indiquer les projets de scraping sur lesquels vous avez déjà travaillé et si possible m'indiquer le ou les sites Internet que vous avez scrapé.
Je ne fais pas d'acompte. J'ai eu trop de développeurs qui abandonnaient les projets au bouts de X mois et partaient avec mon acompte alors qu'ils n'avaient pas fini le projet. Je ne peux pas utiliser un code qui est incomplet.
Merci de me confirmer dans votre message privé que vous êtes d'accord avec le processus suivant :
- Vous m'envoyez votre devis, je le signe et vous le retourne.
- Vous développez le service web sur votre serveur et le terminez à 100%.
- Vous me fournissez une facture, je procède au virement bancaire.
- Une fois que vous avez reçu mon virement, vous installez votre travail sur mon serveur afin qu'il soit fonctionnel.
- Projet terminé :) Si j'arrive à trouver des clients, je fais un nouveau CDC pour améliorer le service et on recommence :)
Merci de m'avoir lu jusqu'au bout.
Bonne journée

Accéder à la fiche du projet

Autres projets susceptibles de vous intéresser