Copilot bez iluzji: Microsoft liczy udane sesje, nie kliknięcia

​W ramach obchodów 50-lecia Microsoftu, Mustafa Suleyman, dyrektor generalny Microsoft AI, przedstawił nową metrykę oceny skuteczności asystenta AI firmy, Copilot. Tradycyjne wskaźniki, takie jak liczba aktywnych użytkowników dziennie czy tygodniowo, choć przez cały czas monitorowane, ustępują miejsca wskaźnikowi Successful Session Rate (SSR), czyli wskaźnikowi udanych sesji. SSR mierzy odsetek interakcji użytkowników z Copilotem, które zakończyły się sukcesem, dostarczając bardziej precyzyjnej oceny jakości i użyteczności narzędzia. ​

Suleyman podkreślił, iż w przeszłości firmy polegały na pośrednich wskaźnikach jakości, takich jak czas spędzony z produktem. Obecnie, dzięki analizie anonimowych dzienników i ocenie sentymentu użytkowników, możliwe jest bezpośrednie mierzenie jakości interakcji. W ciągu ostatnich czterech miesięcy Microsoft odnotował znaczący wzrost SSR, co wskazuje na rosnącą skuteczność Copilota. ​

Wprowadzenie SSR jako kluczowego wskaźnika efektywności Copilota odzwierciedla szerszy trend w branży IT, polegający na przechodzeniu od ilościowych miar zaangażowania do jakościowych ocen doświadczeń użytkowników. Ta zmiana może sygnalizować nową erę w projektowaniu i ocenie narzędzi AI, gdzie nacisk kładziony jest na realną wartość dostarczaną użytkownikom, a nie tylko na statystyki użytkowania.​

Dla firm wdrażających rozwiązania AI, takich jak Copilot, najważniejsze staje się nie tylko monitorowanie wskaźników adopcji, ale również głębsze zrozumienie, jak te narzędzia wpływają na efektywność i satysfakcję pracowników. Microsoft udostępnił raport adopcji Copilota w Microsoft 365, który pozwala organizacjom śledzić wykorzystanie narzędzia w różnych grupach i aplikacjach, co może wspierać procesy decyzyjne dotyczące dalszego wdrażania i optymalizacji. ​