Pour chacun des partenaires ayant contribué à définir un scénario d’utilisation au lot 3, il s’agit de valider le cycle d’évolution des ontologies et des annotations lorsque la collection de textes évolue.
L’évaluation se fera en deux temps, à la livraison du prototype intermédiaire en interne par les partenaires, et à la livraison de la version finale par des utilisateurs finaux. Ceci comprend l’évaluation et le test des deux modules développés aux lots 6 et 7 :
1) Validation et test du module de construction et de maintenance de l’ontologie :
2) Validation du module de recherche d’information basé sur une indexation sémantique

Tâche 9.1 Validation en gestion de connaissance associée à des projets industriels (ARTAL)
La validation se fera d’une part en créant une ontologie à partir de documents provenant de projets déjà réalisés puis en effectuant des requêtes dont les résultats seront comparés à ceux de recherches similaires effectuées avec les outils de recherches classiques.
D’autre part le système sera validé à travers son utilisation sur un projet en cours de maintenance afin de tenir compte de l’évolution de l’ontologie à travers l’ajout de nouveaux documents au corpus.

Tâche 9.2 Validation en archéologie des techniques (P&T)
L’ontologie disponible dans le cadre du projet ARKEOTEK sera validée dans un domaine scientifique particulier, la tracéologie, qui concerne des techniques jusque là non modélisées dans l’ontologie. Son évolution se fera au fur et à mesure de la disponibilité de thèses et de numéros de la revue The Arkeotek Journal. Ces nouveaux documents et ceux déjà indexés seront ensuite indexés à l’aide de la nouvelle version de l’ontologie, ce qui permettra de tester le module d’indexation. Enfin, des chercheurs en tracélologie expérimenteront le système de recherche d’information sur ces données.

Tâche 9.3 Validation pour le diagnostic automobile (ACTIA)
ACTIA dispose d’une ontologie adaptée à l’indexation d’un ensemble actuel de 4500 fiches d’incidents. Cet ensemble évolue lorsque la gamme fonctions offertes sur les véhicules s’élargit et que de nouveaux incidents sont repérés. La prise en compte de ces fiches amènera à tester les outils de maintenance de l’ontologie puis des indexations des fiches. La validation du système de recherche sera réalisée en mettant le logiciel à disposition des garagistes dans des sites pilotes