Microsoft legt uit waarom het probleem van oktober 2018 nooit had mogen plaatsvinden

Na de rampzalige eerste uitrol van de Windows 10 oktober 2018-update probeert Microsoft het vandaag opnieuw, en in een blogpost legden ze hun aanpak uit voor het vrijgeven van hoogwaardige Windows 10-updates.

Microsoft noemde de problemen van vorige maand 'klein maar serieus' en zei dat het probleem een ​​trend van kwaliteitsverbeteringen bij elke volgende Windows 10-release verloochende.

Michael Fortin, Corporate Vice President voor Windows, zei dat er een echte en gestage daling was in de belangrijkste indicatoren van productkwaliteit - het bel- en chatvolume van de klantenservice, zelfs terwijl het aantal pc's met Windows 10 toenam. Hij beweerde ook dat Windows 10 April 2018 Update de hoogste Net Promoter-beoordeling had van alle versies van Windows 10.

Fortin zei dat Microsoft investeert in feedback van klanten en partners om hen te helpen bij het vormgeven en opstellen van productspecificaties, inclusief het definiëren van zowel vereiste test- als successtatistieken en het gebruik van een breed scala aan geautomatiseerde testprocessen bij het ontwikkelen van functies, waardoor ze problemen snel kunnen detecteren en corrigeren. Hij drong erop aan dat testen een belangrijk onderdeel was van het leveren van Windows en dat functies fundamentele tests moesten doorstaan ​​om in Windows te kunnen worden geïntegreerd.

Hij ging heel kort in op het probleem van het ontslaan van SDET-testers door Microsoft in 2014, en merkte op:

We hebben de verantwoordelijkheid voor functionele basistesten verschoven naar onze ontwikkelingsteams om vanaf het begin code van hogere kwaliteit te leveren.

Hij zei ook dat Microsoft een sterke cultuur had om de nieuwste interne versie van Windows op hun eigen machines te gebruiken en er vervolgens voor te zorgen dat problemen worden nagestreefd en opgelost.

Hij merkt ook op dat Microsoft-partners hun eigen laboratoria hadden waar ze Windows testten, waaronder testen met:

• Externe testlaboratoria met wereldwijde, continue dekking voor applicatiecompatibiliteit, hardware en randapparatuur
• ISV's voor een reeks apps, waaronder antivirus (AV)
• OEM's werken samen met Microsoft om de kwaliteit te testen en te waarborgen voor een groot aantal systemen, apparaten en stuurprogramma's

Hij riep ook het Windows Insider-programma op voor het verstrekken van nieuwe en waardevolle inzichten, met vergelijkbare programma's die beschikbaar zijn voor andere commerciële klanten, zoals het Windows Insider-programma voor bedrijven, waarmee organisaties toegang hebben tot Insider Preview-builds om apps en infrastructuur te valideren voorafgaand aan de volgende openbare Windows vrijlating.

Er is ook het programma op uitnodiging voor grote zakelijke klanten, het Technology Adoption Preview (TAP)-programma, waarmee zakelijke klanten vroegtijdig feedback kunnen geven over productupdates via producttests in de echte wereld om Microsoft te helpen problemen tijdens het ontwikkelingsproces te identificeren.

Toen het tijd was voor daadwerkelijke releases, merkte Michael op dat het bedrijf datagestuurde besluitvorming gebruikte met behulp van gedetailleerde dashboards en statistieken om de builds te evalueren.

Hij merkt op dat Microsoft hun realtime detectie- en reactiemogelijkheden gebruikt om Windows op een zorgvuldige en gegevensgestuurde manier uit te rollen, en dat hun eerste principe was om alleen apparaten bij te werken waarvan de gegevens aantonen dat ze een goede ervaring zullen hebben, momenteel met behulp van een machine leermodel om de apparaten te selecteren die als eerste updates krijgen aangeboden. Hij zegt dat als Microsoft detecteert dat een apparaat een probleem heeft, ze de update niet zullen aanbieden totdat dat probleem is opgelost.

De uitrol komt ook traag op gang en is eerst alleen beschikbaar voor “zoekers", gebruikers die actie ondernemen om de updates vroeg te krijgen, terwijl Microsoft de telemetrie, inclusief feedback van hun klantenserviceteams, nauwlettend in de gaten houdt om meer te weten te komen over nieuwe problemen. Microsoft analyseert ook feedbacklogboeken en schermafbeeldingen rechtstreeks via de Feedback Hub en luistert naar signalen die via socialemediakanalen worden verzonden.

Als Microsoft een combinatie van factoren vindt die resulteren in een slechte ervaring, creëren ze een blokkering die voorkomt dat vergelijkbare apparaten een update ontvangen totdat een volledige resolutie is opgetreden.

Microsoft zegt dat ze blijven zoeken naar manieren om hun vermogen om problemen te detecteren te verbeteren, met name problemen met een hoge impact bij een laag volume en mogelijk zwakke signalen, waaronder onlangs de mogelijkheid toegevoegd voor gebruikers om de impact of ernst van problemen aan te geven wanneer ze feedback geven .

Fortin zei dat ze ondanks de positieve trends ook duidelijk de stemmen horen van gebruikers die te maken hebben met frustrerende problemen, en belooft meer te doen en zich te concentreren op nieuwe kwaliteitsgerichte innovatie op het gebied van productontwerp, ontwikkeling, validatie en levering.

Wat Fortin niet heeft opgeleverd, was een echte autopsie van waarom de problemen met de update van oktober 2018 plaatsvonden, en naast het werk aan het versterken van "zwakke signalen", waarom dergelijke problemen zich niet meer zullen voordoen.

Lees Fortin's volledige en lange blogpost hier, en laat het ons weten als u tevreden bent met de Microsoft-aanpak van Windows-tests.