Så testar vi tillförlitligheten
Fuzz-tester, minneskontroller, pluginvalidatorer och felfall: vad vi testar, hur ofta och vad som kom fram. Inget löfte om att inget någonsin händer, utan siffror med datum.

Vi visar hur vi letar efter problem och vad det gav. Siffrorna kommer från våra testloggar.
Skadade och illasinnade filer: för de format du kan ladda in i PSOrvia finns fuzz-tester. Ett program bygger miljontals förvrängda varianter av giltiga exempelfiler och kastar dem på läsaren. Det finns fler än 80 sådana testmål: ljudformat, förinställningar och inställningar, typsnitt, bilder, PDF, spellistor, podcastflöden, låtinformation från radio, serversvar och nätverksprotokoll. Totalt gick mer än 180 miljoner indata igenom. Med dem hittade vi fler än 10 defekter, till exempel en oändlig loop orsakad av en enda nollbyte i en förinställningsfil och ett minnesöverflöd vid en fil med ett för kort rubrikfält. Alla är åtgärdade, och varje fynd finns kvar som testfil som spelas upp först före varje ny körning.
Minne och odefinierat beteende: testerna körs också under kontrollverktyg som rapporterar varje minnesåtkomst och varje odefinierad beräkning. På Linux körs dessa kontroller utan fel: 413 kontroller av radioströmmarna, 70 av WebDAV-klienten, 78 av OSC-styrningen och 38 för HTTP och HTTPS.
Plugin-validerare: vår plugin-runda består av en sträng validerare (stränghet 8 av högst 10) som slumpmässigt ändrar parametrar, växlar kanallayouter och sparar och laddar om tillståndet, plus en kontrollant vardera för VST3 och CLAP och, på macOS, Audio Unit-kontrollen. I ett urval av 5 PSOrvia-plugins klarade alla 5 den stränga valideraren.
Automatiska värdtester: ett testprogram laddar plugins utan skärm i ett riktigt musikprogram, läser parametrarna, ställer in en och kontrollerar att den blir kvar, och renderar 2 sekunder som varken får saknas eller vara tysta. För närvarande klarar 3 av 3 fall (ett plugin i tre format).
När något ändå går fel: ett plugin som kraschar i sin egen gästprocess drar inte med sig de andra spåren; sidan ”Ett plugin som kraschar drar inget med sig” beskriver det. Att ljudet inte ändras obemärkt kontrolleras av sidan ”Kontrollerat in i minsta bit”. Här lägger vi till nätverkssidan: radioströmmar ansluter på nytt efter ett avbrott med växande paus och testades med avbrutna och hängande strömmar och skadad låtinformation. En nätverksresurs som inte kan nås är ett tillstånd, inte ett fel: PSOrvia Player försöker igen med växande pauser (5, 15, 30, 60 sekunder) och resursen kommer tillbaka av sig själv. Om ett program kraschar skriver Player en rapport till en lokal fil; ingenting skickas.