Microsoft explica por que o problema de outubro de 2018 nunca deveria ter acontecido

Após o lançamento inicial desastroso da atualização do Windows 10 de outubro de 2018, a Microsoft está tentando novamente hoje e, em uma postagem no blog, eles explicaram sua abordagem para lançar atualizações de alta qualidade do Windows 10.

Chamando os problemas do mês passado de “pequenos, mas sérios”, a Microsoft disse que o problema desmentia uma tendência de melhorias de qualidade a cada lançamento sucessivo do Windows 10.

Michael Fortin, vice-presidente corporativo do Windows, disse que houve uma queda real e constante nos principais indicadores de qualidade do produto – chamadas de atendimento ao cliente e volumes de bate-papo, mesmo com o aumento do número de PCs com Windows 10. Ele também afirmou que a atualização de abril de 10 do Windows 2018 tinha a classificação mais alta do Net Promoter de qualquer versão do Windows 10.

Fortin disse que a Microsoft investe no feedback de planejamento de clientes e parceiros para ajudá-los a moldar e enquadrar as especificações do produto, incluindo a definição de testes necessários e métricas de sucesso e empregar uma ampla variedade de processos de teste automatizados à medida que desenvolvem recursos, permitindo detectar e corrigir problemas rapidamente. Ele insistiu que o teste era uma parte fundamental da entrega do Windows e que os recursos precisavam passar por testes fundamentais para serem integrados ao Windows.

Ele abordou brevemente a questão da Microsoft demitir testadores SDET em 2014, observando:

Transferimos a responsabilidade pelo teste funcional básico para nossas equipes de desenvolvimento, a fim de fornecer código de maior qualidade desde o início.

Ele também disse que a Microsoft tinha uma forte cultura de executar a versão interna mais recente do Windows em suas próprias máquinas e, em seguida, garantir que os problemas fossem investigados e corrigidos.

Ele também observa que os parceiros da Microsoft tinham seus próprios laboratórios onde testaram o Windows, incluindo testes com:

• Laboratórios de testes externos com cobertura global e contínua para compatibilidade de aplicativos, hardware e periféricos
• ISVs para uma variedade de aplicativos, incluindo antivírus (AV)
• OEMs fazem parceria com a Microsoft para testar e garantir a qualidade em uma vasta gama de sistemas, dispositivos e drivers

Ele também destacou o Windows Insider Program por fornecer insights novos e valiosos, com programas semelhantes disponíveis para outros clientes comerciais, como o Windows Insider Program for Business, que permite que as organizações acessem compilações do Insider Preview para validar aplicativos e infraestrutura antes do próximo Windows público. liberar.

Há também o programa somente para convidados para grandes clientes corporativos, o programa Technology Adoption Preview (TAP), que permite que clientes corporativos forneçam feedback antecipado sobre atualizações de produtos por meio de testes de produtos no mundo real para ajudar a Microsoft a identificar problemas durante o processo de desenvolvimento.

Quando chega a hora de lançamentos reais, Michael observou que a empresa usou a tomada de decisões orientada por dados usando painéis e métricas detalhados para avaliar as compilações.

Ele observa que a Microsoft usa seus recursos de detecção e resposta em tempo real para implantar o Windows de maneira cuidadosa e orientada por dados, e que seu primeiro princípio foi atualizar apenas os dispositivos que seus dados mostram que terão uma boa experiência, atualmente usando uma máquina modelo de aprendizagem para selecionar os dispositivos que recebem atualizações primeiro. Ele diz que se a Microsoft detectar que um dispositivo pode ter um problema, eles não oferecerão a atualização até que o problema seja resolvido.

O lançamento também começa devagar e está disponível apenas para “requerentes”, usuários que agem para obter as atualizações antecipadamente, enquanto a Microsoft monitora cuidadosamente a telemetria, incluindo feedback de suas equipes de atendimento ao cliente, cuidadosamente para aprender sobre novos problemas. A Microsoft também analisa logs de feedback e capturas de tela diretamente por meio do Feedback Hub e ouve os sinais enviados por meio de canais de mídia social.

Se a Microsoft encontrar uma combinação de fatores que resultem em uma experiência ruim, ela criará um bloco que impede que dispositivos semelhantes recebam uma atualização até que ocorra uma resolução completa.

A Microsoft diz que continua procurando maneiras de melhorar sua capacidade de detectar problemas, especialmente problemas de alto impacto onde há baixo volume e sinais potencialmente fracos, incluindo recentemente adicionado a capacidade para os usuários indicarem o impacto ou a gravidade dos problemas quando fornecem feedback. .

Fortin disse que, apesar das tendências positivas, eles também ouvem claramente as vozes dos usuários que estão enfrentando problemas frustrantes e se comprometem a fazer mais e se concentrar em novas inovações focadas na qualidade em design, desenvolvimento, validação e entrega de produtos.

O que o Fortin não entregou foi uma autópsia real de por que os problemas com a atualização de outubro de 2018 ocorreram e, além do trabalho de amplificar “sinais fracos”, por que esses problemas não ocorrerão novamente.

Leia Fortin's post completo e longo no blog aqui, e deixe-nos saber se você está satisfeito com a abordagem da Microsoft para testes do Windows.