Как проверять результат, чтобы не обмануть себя
Самая частая ошибка — проверить один раз на своём устройстве, на своём интернете, и сделать вывод. Такая проверка говорит только о том, что в этих условиях всё работает.
Проверять на трёх типах связи
Проводной интернет, домашний Wi-Fi на расстоянии от точки, мобильная сеть в движении. Результаты будут разными, и интересен именно худший.
Смотреть не только на «идёт или нет»
Значение имеют время до первого кадра, количество остановок за десять минут, сколько раз переключилось качество. Видео, которое «работает», но переключается каждые двадцать секунд, воспринимается как неисправное.
Повторять
Одна проба на нестабильной сети не значит ничего. Три прогона подряд с разбросом в два раза — это не «в среднем нормально», это «нестабильно».
Проверять на старом устройстве
Телефон четырёхлетней давности показывает проблемы, которых не видно на свежем: программное декодирование, нехватка памяти, троттлинг при нагреве.