В технических дискуссиях часто возникает вопрос: какую частоту кадров считать достаточной для видео. Некоторые говорят, что вполне хватит 24 кадров/с для кинофильмов и 30 кадров/с для игр, а всё остальное — ненужное излишество.
С этим утверждением в корне не согласен исследователь Саймон Кук (Simon Cooke) из Xbox Advanced Technology Group. Он опубликовал аргументированную статью с доказательствами, почему человеческий глаз предпочитает больший фреймрейт.
Ясному ответу на этот вопрос мешает тот факт, что глаз — исключительно сложная конструкция, которая осуществляет предварительную обработку изображения до его передачи в мозг. Это не какой-то аналог камеры, просто фиксирующей изображение. Глаз постоянно изменяет свою чувствительность к цвету, освещению, движению объектов. Во многих случаях воспринимаемая мозгом картина — это иллюзия, специально сконструированная для обмана, а генерация такой картинки осуществляется по сложным и не до конца понятным алгоритмам.
Проведённые эксперименты показывают, что при показе видеороликов с разной частотой кадров люди всегда предпочитают больший фреймрейт, и это правило соблюдается даже на частотах выше 60 fps. Согласно теории Саймона Кука, причина в физической подвижности сетчатки глаза, на поверхности которой и регистрируется изображение. Медицинские исследования показали, что глаз совершает непроизвольные колебания (микротремор) со средней частотой 83,68 Гц, изменяя положение сетчатки на 150-250 нм. Это расстояние примерно соответствует размеру 1-3 фоторецепторов в сетчатке.
Микротремор глаза позволяет зарегистрировать одну и ту же сцену с двух слегка различных позиций. Это помогает чётче определить края объектов, что было жизненно важным для наших предков.
Если это правда, то получается, что глаз как бы искусственно повышает детализацию изображения перед отправкой мозг (upsampling), прямо как это делают компьютерные видеокарты.
Учитывая эту особенность, становится понятной польза от повышения частоты кадров. Частота кадров почти всегда ниже, чем частота микротремора (83,69 Гц). Поэтому чем больше кадров в секунду мы показываем, тем больше дополнительной информации извлечёт глаз.
Нужно учитывать ещё и то, что повышение фреймрейта с 30 fps до 40 fps субъективно воспринимается как более заметное, чем повышение с 40 fps до 60 fps.
Согласно теории Кука, повышение частоты кадров на видеоматериале с низким разрешением субъективно может обеспечить лучшее качество восприятия, чем HD-картинка на 30 fps. То есть разработчикам игр лучше бы сосредоточиться на повышении фреймрейта, а не разрешения. К сожалению, многие не прислушиваются к его доводам и продолжают «тупо» гнаться за размером картинки.