I detta dokument beskrivs fallgropar, problem och metodik för att mäta programvaruprestanda. I idealfallet bör mätningar utföras och rapporteras på ett sådant sätt att andra kan reproducera resultaten för att bekräfta deras giltighet. Vi strävar efter att motivera forskare att tillämpa den nödvändiga stelheten vid utformning och utförande av sina prestandamätningar för att uppnå tillförlitliga resultat. Försökens repeterbarhet, de rapporterade resultatens jämförbarhet och verifierbarheten hos påståenden som baseras på sådana resultat kan endast uppnås när mätningar och rapporteringsförfaranden är tillförlitliga. Kort sagt, detta dokument uppmanar läsaren att mäta rätt prestanda och att mäta prestanda rätt.
Pieterse m.fl. REF hävdar att forskare bör säkerställa en strikt utformning av sina experiment och tillämpa metoder för mätning av programvaras prestanda för att garantera tillförlitliga resultat, för att stödja repeterbarheten av deras experiment, jämförbarheten av deras rapporterade resultat och verifierbarheten av deras påståenden.
The ghost in the machine : don’t let it haunt your software performance measurements
{'venue': None, 'journal': None, 'mag_field_of_study': ['Computer Science']}