KB Collector

Collecter vos données sans effort et restez concentrés sur vos analyses.
Tout ce que vous avez à faire c'est de vous inscrire, télécharger notre extension puis créer un collecteur.

Créez votre compte
Inscription

ÉTAPE 1: Inscription et installation de l'extension

Inscrivez vous puis télécharger et installer notre extension pour votre navigateur préféré

*A ce stade, seul Firefox et Google Chrome sont pris en compte.

Télécharger notre extension

ÉTAPE 2: Connexion

Pour commencer, allez sur le site cible. Puis connectez vous.

Pour ce faire, veuillez cliquer sur l'icone de l'extension
Puis renseigner vos informations de connexion via le pop-up qui s'affiche.

ÉTAPE 3: Création d'un collecteur

A ce niveau, il faut choisir le type de collecteur.
**La version 1 ne prend en compte que le type simple.

Le type simple n'est utile que sur les sites qui ne nécessitent pas d'actions utilisateurs

Créer vos "Stages"

Un stage est composé de:

  1. Une adresse, un lien
  2. Des queries string, ou variables de lien
  3. Des variables, données: pouvant être recueillies sur à l'adresse finale

L'utilité des stages apparait lorsqu'il est impératif de combiner plusieurs données présentes sur le site pour finalement recueillir les infos que l'on souhaite

Supposons par exemple que l'on souhaite obtenir toutes les offres d'emploi d'un site d'offre emploi ; les offres étant disposées sur plusieurs pages. Un premier stage serait de récupérer le nombre max de page d'offre. Le second alors sera en charge de parcourir ces pages puis de collecter les informations nécessaires.

Les variables de lien: queries string

Les queries string interviennent pour modifier la structure du lien.
Ce sont des variables avec un type et une valeur (source)

Le type est utilisé pour parser la valeur:
  • Text: du texte
  • Nombre: Un nombre
  • Range: une chaine du type min;max(;step)?
    0;4 -> [0, 1, 2, 3, 4] ou 0;4;2 -> [0,2,4]
  • List: une séquence d'eléments séparé par des ;
    vêtements;maison -> [vêtements, maison]

Il est également possible de spécifier une variable d'un stage antérieur en utilisant {{nom_de_la_variable}}

Dans l'exemple précédent, dans le premier stage on pourrait définir la variable max_page.
Ainsi dans notre second stage, il suffit de définir une variable de lien avec pour type Range et pour valeur 1;{{max_page}}

Les variables - les données

La définition d'une variable nécessite la saisie d'un nom de variable, d'un type et d'un sélecteur.
Ce dernier peut également être obtenu de façon automatique en l'icône

ÉTAPE 4: Validation et test

Après validation, il vous est affiché une commande curl à notre API pour l'obtention de vos précieuse données

Consultez la documentation de notre API pour mieux vous familiariser

Copyright © - Boris KANGA - Tous droits réservés - Email : kangaborisparfait@gmail.com