Catégories
Referencement

Un scraper homemade

Un billet très bref pour vous présenter le scraper dont je vous parlais dans un précédent article. Comme je vous l’avais dit, il ne faut pas vous attendre à quelque chose de révolutionnaire, ni à un soft à proprement parler. Ce scraper utilise une extension Firefox Open-Source (ChickenFoot) ainsi que proxy-tool pour la gestion de vos proxies.


Pour ne pas se perdre, je lui ai dédié une page nommée RDDZ Scraper qui évoluera au fur et à mesure de l’élaboration des scripts.
Ceux qui connaissent IMacros ne seront pas perdus, seul le scripting est différent, et pour les autres, c’est aussi simple à utiliser que taper une query dans votre moteur de recherche.
Les 3 premiers scripts mis à disposition sont :
– Google SERP Scraper
– Google Insight Scraper
– Google Maps Scraper

P.S. : Ne me parlez pas d’IMacros, Scrapebox ou équivalent dans les commentaires, si vous savez le faire et mieux c’est bien pour vous 😉
Je ne révolutionne pas le scrap, je souhaite juste le rendre gratuit et accessible à tous. Je pense notamment aux utilisateurs de Mac et Linux, qui pourront l’utiliser sans avoir à lancer une VM ou posséder un VPS.
A bon scraper, salut.

Icon crédit : Visualpharm

40 réponses sur « Un scraper homemade »

ça m’a l’air d’être bien sympa tout ça et drôlement altruiste de penser aux autres.
nul doute que tu nous sortiras de jolis petits script de derrière les fagots.
je teste ça demain à mon retour histoire d’avoir un avis vraiment objectif

Très bonne idée de faire ça en opensource, merci pour le partage je bookmark et je teste ça au besoin 😉

A l’occasion je pense que nodejs ou phamtomjs valnet le coup d’oeil pour faire un scrapper 😉

Haa enfin, la voilà la bete!

Bon y’a plus qu’a tester cela …
Cela ne m’empêchera probablement pas de gonfler ma ram , mais en attendant, cela m’évitera a coups sur de lancer une VM pour parfois pas grand chose !

Merci beaucoup!
David

Hello,
juste un mot pour te remercier toi & DZ pour ce script, je suis toujours épaté de voir des gens mettre en libre DL des scripts de plus en plus innovents et qui répondent à des besoins réels (genre un scraper multi plateforme, ça n’a pas de prix).

Mot en 5 lettres : M E R C I

Très sympa de ta part. Il faudra que je te tope sur skype pour discuter de l’ajout d’un scraper alexa, c’est la plaie sur Mac.

D’accord avec RaphSEo, super cool de présenter et proposer ce nouvel outil que je vais m’empresser d’essayer. Gros risque d’utiliser sans VPN ou pas ?

@cdillat
Quand j’aurais un peu plus de temps, je me tournerais vers des solutions js pour partir « from scratch ». La il me fallait un truc dans l’urgence, d’ou cette selection.

@vincent
Pas de souci, hesite pas quand tu me vois online.

@Rugby Top 14
Si tu n’utilises pas proxy-tool, oui je te le conseille fortement 🙂

@tous
Merki 🙂

Par auteur de l’article

Merci pour cet outil, je vais jeter un œil attentif à tout ça … petit à petit je découvre tout ce beau monde du scrap (et d’utilisation d’iMacro en parallèle).

Thanks. Merci de penser à moi et à tous les débutants qui ont soif d’apprendre et qui manque parfois d’outillage et sont parfois un peu frileux pour dépenser.

Hello,

et merci pour ce don de ta personne.
Une question cependant : je suis sous Mac FF 10.0.2, je ne peux installer l’addons Proxy Tool faute de version incompatible..

Quelqu’un à le même prob, ou bien ?

Thanks

Sympa pour le partage, ça a l’air plutôt simple en plus.
Je vais tester ça de suite alors pour voir si ça tient ses promesses =)
Merci pour cette astuce, bonne continuation, à très vite !

@RDD : bah je veux bien, mais pas moyen de l’installer, le bouton d’install est grisé…
Y’a un truc que j’ai pas du saisir : tu confirmes ?

@RDD : rhaaaaaa mais p*tain le bleu que je suis, #yavaitqua appuyer sur le bouton quand même….
Alors, oui ça marche :p

@Stone
Oui tu cliques sur le bouton grise, et il te demander de l’installer tout de meme 😉

Par auteur de l’article

Visiblement je dois être le seul et donc tant pis au risque de passer pour un boulet et d’abuser encore un peu de ton temps, j’ai l’erreur suivante sur le script Gg Scraper :
1 1er Popup :j’entre le kw > OK
2 2nd Popup : cancel pour ouverture résultats dans un nouvel onglet
> j’ai l’erreur suivante :
« ReferenceError: exit is not defined
in top level line 58 »

Un troisième popup s’ouvre alors avec mon mot+clé comme seule info.

Une idée ?( j’ai modifié les droits d’accès aux divers fichiers en 777 au cas où, mais rien n’y fait…)

Merci

@Stone et @RDD : Maintenant qu’il y a un tuto détaillé pour les utilisateurs sous Mac comme moi, je vais forcément l’essayer.

@Stone
Au moins on voit ceux qui ont commente sans tester !!!
Je viens de re-uploader le script, normalement tout devrait fonctionner maintenant.
Tiens moi au courant 😉

Par auteur de l’article

J’ai jamais utilisé de scraper. A vrai dire j’ai jamais entendu parler. Mais après votre explication ça ma l’air sympa et très utile. je passe sur l’autre lien pour l’installer et l’utiliser.
Merci,

Bonjour @RRD,

Est ce que confirmé ça marche ?
Car pour moi c’est négatif 🙁

Merci pour ce partage quand même 🙂
Bonne journée!

Salut Renard,

Moi le gros problème que j’ai avec les scrapper, c’est l’utilisation d’une liste de proxy valide. Du coup, il faut que je m’en achète, mais apparemment c’est pas la gloire non plus.

Bref, en vu de ton nouveau scrapper, as tu une idée pour nous faire passer le truc un peu plus crème… je sais pas en recommandant un VPN par exemple.

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *