espaceur bandeau-haut-droit.gif espaceur
espaceur espaceur espaceur
  espaceur test_titre.jpg espaceur
espaceur espaceur espaceur espaceur espaceur espaceur
  espaceur

ARCHIVES

          Introduction       Méthodologie       Résultats

alaune-grd.gif

Introduction

 

lire-la-suite.gifÉvaluation d'outils de text mining : démarche et résultats

Nous testons ces outils avec un même corpus en condition réelle de besoin informationnel.

Dans un premier temps, le test a été effectué avec un corpus comprenant 236 références bibliographiques provenant de trois bases de données bibliographiques Pascal, Current Content Search ®, Medline ®, autour du thème "imidaclopride et abeilles".

OUTILS TESTES

  • Intellixir 5.0
  • Lexiquest Mine 2.2
  • Serv'IST

filet-couleur.gif

actulabo2.gif

Méthodologie                                                

Questionnaire de veille

Ce questionnaire permet de voir si le logiciel fournit les informations auxquelles s'intéresse traditionnellement un veilleur sur un sujet donné : les principales équipes scientifiques, les collaborations etc. Il suit les étapes d'un besoin informationnel type.

Les réponses proposées sont :

  • oui lorsque le testeur obtient l'information sans difficulté assez rapidement et sans avoir consulté une aide.
  • oui mais difficilement quand le testeur obtient l'information mais suite à plusieurs échecs ou essais (au moins deux essais), ou en ayant dû consulter une aide (en ligne ou pas).
  • non en cas d'échec suite soit à une anomalie du logiciel, soit à une difficulté d'utilisation trop importante ayant mis le testeur en échec, soit aux limites fonctionnelles du logiciel.

 

Notation

  • La réponse oui rapporte un +2.
  • La réponse oui mais difficilement rapporte un 0. Malgré le succès, on ne peut imputer une note positive puisque l'accès à l'information a été laborieuse pour le testeur ce qui signifie que le logiciel testé n'est pas intuitif.
  • La réponse non rapporte un -2.

Les logiciels testés seront donc notés entre -12 et +12.

Questionnaire de veille : Pouvez-vous répondre à ces questions ?
Retrouvez-vous les références publiées par Séverine Suchail ? Oui

Oui, mais difficilement

Non

Quels sont les principaux collaborateurs de Séverine Suchail? Oui

Oui, mais difficilement

Non

Quel est le nombre d'équipes de recherche travaillant sur le "cucumber mosaic virus" ? Oui

Oui, mais difficilement

Non

Le logiciel distingue-t-il les doublons pour un auteur ? Oui

Oui, mais difficilement

Non

Accédez-vous aux références sur les "phytopathogènes" concernant les "betteraves sucrières" ? Oui

Oui, mais difficilement

Non

Accédez-vous aux références sur les "phytopathogènes" ne concernant pas les "betteraves sucrières" ? Oui

Oui, mais difficilement

Non

 

espaceur

anoter.gifÀ noter

Le CrashSite

Suite à une volonté de procéder à des tests les plus objectifs possibles sur les outils de collecte...

 

Il s'agit d'un 'faux' site où l'on va déclencher des événements qui devront être détectés par les outils de surveillance de sites Internet. Cette suite d'événements sera toujours identique pour chacun des outils testés, ce qui permettra de les comparer de manière plus objective.

 

Ce test est actuellement en cours de réalisation et une page dédiée (pour l'instant en cours de construction) à ce test sera complétée au fur et à mesure.

Replier

Le corpus test

Le service Veille propose un test d'efficacité et de fonctionnalités des outils d'analyse sur plusieurs corpus.

 

 

Un premier test a été réalisé avec un corpus de 236 documents sur le thème de l'imidaclopride et de son impact sur les abeilles.

De nouveaux corpus pour les prochains tests sont en cours de constitution.

Suites du projet...

 

Replier

Participation

Vous souhaiteriez contribuer aux tests des logiciels de veille, à l'alimentation de la base de données sur ces logiciels. C'est possible en nous

espaceur
icones-01.gif espaceur espaceur espaceur
espaceur espaceur espaceur espaceur espaceur espaceur

 

 

logo-cnrs.jpg
espaceur
mininist.gif
espaceur

 

pointilles.gif

Accueil

pointilles.gif

Référencement et description des outils de veille

pointilles.gif

Corpus Test

pointilles.gif

CrashSite

pointilles.gif

Accès privé

pointilles.gif

Syndication RSS 0.91


            pointilles.gif

Projet mené au sein du service Veille de l'INIST
par , &

2.htm 5.htm Imprimer Contact Retour au haut de la page