Le web scrapping facile avec Ferret | Korben

Si vous voulez faire un peu de webscrapping, c’est-à-dire extraire de manière automatisée les informations présentes sur une page web, à des fins de test, pour du machine learning, pour faire de la stat ou tout simplement pomper des data, voici Ferret.

Ferret est un outil sous licence MIT qui s’est donné pour but de rendre tout cela très simple, à l’aide de son propre langage déclaratif. Cela permet de se focaliser uniquement sur la donnée à récupérer en faisant abstraction des détails techniques.
Voici un exemple de code :

LET google = DOCUMENT("https://www.google.com/", true)

INPUT(google, 'input[name="q"]', "korben")
CLICK(google, 'input[name="btnK"]')

WAIT_NAVIGATION(google)

LET result = (
FOR result IN ELEMENTS(google, '.g')
RETURN {
...

Source : Korben
Pour accéder à l'article complet, cliquer sur le bouton ci-dessous

Lire l'article complet >>>

5 derniers articles de MacTrackr

5 derniers articles de Korben

  • [06/12 15:39] -

    Interlude casual gamer

    Un peu de lol pour rigoler entre 2 révolutions… Je suis tombé là dessus ce matin sur Twitter et ça m’a fait sourire.Gilet Jaunes, à vos jetpacks !!! GameSir Z1 Clavier de Jeu Mécanique promo...

  • [06/12 11:48] -

    Qwant sort enfin sa map

    Alors pour annoncer la couleur tout de suite avant que les lobotomisés par Google arrivent en mode World War Z dans les commentaires, je vous le dis, oui Qwant Maps est une alpha et ne fait pas encore...

  • [06/12 11:48] -

    WhiteSource Bolt – Un scanner de vulnérabilité pour Github

    Si vous êtes développeur et que vous hébergez votre code sur MS-Github (rooh, ça va, si on peut plus rigoler), WhiteSource Bolt va surement vous intéresser.Ce logiciel gratuit scanne de manière...

  • [27/11 07:39] -

    Édito du 27/11/2018

    Salut tout le monde,Le mois de novembre touche à sa fin et j’ai la sensation que mes journées passent à une vitesse de dingue. Toujours à fond sur YesWeHack qui cartonnemême si j’aimerais avoir...

  • [23/11 15:40] -

    Test du tracker GPS chinois GF-07

    J’ignore pourquoi, mais depuis plusieurs semaines, j’ai de la pub dans Instagram pour un tracker GPS made in China (GF-07). Je me suis dit que ce serait cool de le tester, alors j’en ai commandé...