The DevOps methodology has shown that software delivery performance (SDP) as well as organizational culture are key drivers of organizational performance and should be measured. SDP can be measured using Four Key Metrics (FKM): Lead Time for Change, Deployment Frequency, Mean Time to Restore and Change Failure Rate. Existing tools for measuring SDP often lack full automation or require practices that prepare code for release to production. Also, their application in real-world contexts, especially concerning the FKM and team culture, remains underexplored. The aim of this study was to fill this gap by, first, investigating attributes needed for tool development and implementation and, second, relating the measurements to perceived performance and team culture.

Using FKM, a tool was developed measuring the part of the software process where code changes are merged to a main code-branch. The measurements were visualized in a dashboard and evaluated by stakeholders. A survey was distributed to assess the team’s perceived SDP and team culture, and an interview with the team leader provided additional insights.

The results of measured and perceived SDP, were congruent and indicated no single performance category. According to the tool-evaluation, the FKM appeared to have value and the graphics showed potential bottlenecks as well as product development quality and speed. Limitations were measurement of product quality after delivery. The interview and survey both indicated a generative culture characterized by high information sharing, supporting that such culture is desirable for high SDP.

The study produced a guide for organizations to develop a tool measuring SDP. Findings indicate that automatic measuring of KPIs can give value to researchers and the industry.

DevOps-metodologin har visat att prestanda för mjukvaruleverans (SDP) samt organisationskultur är avgörande faktorer för ett företags framgång och bör därför mätas. SDP kan mätas med hjälp av fyra nyckeltal (FKM): ledtid för förändring, distributionsfrekvens, genomsnittlig tid för återställning och felprocent. Befintliga verktyg för att mäta SDP saknar ofta fullständig automation eller kräver en kontinuerlig leveransprocess, och deras tillämpning i verkliga sammanhang, särskilt med avseende på FKM och teamkultur, är fortfarande outforskat. Syftet med denna studie var att fylla denna kunskapslucka genom att först undersöka vilka faktorer som behövs för utveckling och implementering av verktyg och sedan relatera mätningarna till upplevd prestanda och teamkultur.

Med hjälp av FKM utvecklades ett verktyg som mäter integreringsdelen av kod till huvudgrenen av ett teams leveransprocess. Mätningarna visualiserades med hjälp av en digital instrumentpanel och utvärderades av intressenter. En enkät distribuerades också till teamet för att bedöma deras uppfattade SDP och teamkultur, och en intervju med teamledaren gav ytterligare insikter.

Resultaten av uppmätt och uppfattad SDP överensstämde och visade ingen enskild prestandakategori. Enligt utvärderingen av verktyget var FKM värdefulla, och diagrammen visade potentiella flaskhalsar samt produktutvecklingens kvalitet och hastighet. Begränsningar inkluderade mätning av produktkvalitet efter leverans. Både intervjun och enkäten indikerade en generativ kultur som kännetecknas av en kultur med hög informationsdelning, vilket tyder på att en prestationsorienterad kultur är önskvärd för att uppnå hög SDP.

Studien resulterade också i en guide till företag att utveckla egna verktyg för att mäta SDP. Resultaten visade att automatiserad mätning av KPI:er kan ge värde både för forskare och industrin.