Abstrakt. Att analysera OWL-respondenternas prestationer på uttrycksfulla OWL- ontologier är en pågående utmaning. I detta dokument lägger vi fram en ny metod för resultatanalys baserad på motiveringar för att införa ontologier från den offentliga sektorn. Motiveringarna är minimala undergrupper av en ontologi som är tillräckliga för ett behov att hålla, och är ofta används för att felsöka OWL ontologier. I JustBench utgör motiveringarna den viktigaste testenheten, vilket innebär att individuella motiveringar testas för korrekthet och resonans i stället för för hela ontologier eller slumpmässiga undergrupper. Motiveringarna är i allmänhet små och relativt lätta att analysera, vilket gör dem mycket lämpliga för transparenta analytiska mikrobenchmarks. Dessutom gör JustBench-metoden det också möjligt för oss att isolera resonansfel och inkonsekventa beteenden. Vi presenterar resultaten av de första experimenten med JustBench med FaCT++, HermiT och Pellet. Slutligen visar vi hur JustBench kan användas av resonansutvecklare och ontologiingenjörer som försöker förstå och förbättra prestandaegenskaperna hos resonatorer och ontologier.
I REF presenterar författarna en form av benchmarking av OWL-resonans baserat på motiveringar.
JustBench: a framework for OWL benchmarking
{'venue': 'International Semantic Web Conference', 'journal': None, 'mag_field_of_study': ['Computer Science']}