Co to jest drift i jak zauważyć, że jakość spada?

Drift to zmiana danych lub warunków, przez którą wcześniejsza ocena przestaje dobrze opisywać obecną pracę systemu. Użytkownicy mogą zacząć przesyłać inny typ dokumentów, inny język albo trudniejsze zadania, nawet bez zmiany modelu.

Obserwuję więc rodzaje wejść, błędy, czas i wyniki jakości na bieżącej próbce. Przy zmianie dostawcy sprawdzam także obsługę schematów, narzędzi, odmów i strumienia. Wspólna biblioteka API nie oznacza identycznego zachowania modeli. Zachowuję wersje konfiguracji i możliwość powrotu do wcześniejszej. Sam wzrost liczby udanych odpowiedzi technicznych nie dowodzi, że treść jest równie poprawna.