Недостатки методов на основе сравнения гистограмм

Поскольку цветовые гистограммы содержат только информацию о цвете и не содержат информацию о пространственной конфигурации элементов сцены, изображения с похожими гистограммами могут сильно отличаться друг от друга. Из-за этого поиск похожих изображений с помощью сравнения гистограмм хорошо работает на маленьких базах изображений, однако на больших базах вышеописанные недостатки не позволяют достичь приемлемого уровня качества.

Ещё один недостаток связан с дискретностью ячеек гистограммы. При разной ширине ячеек получится разный результат сравнения гистограмм. Если выбрать ширину ячеек слишком маленькой, похожие по цвету пиксели попадут в разные ячейки, алгоритм будет слишком чувствителен к небольшим случайным изменениям цвета и сравнение гистограмм окажется малоинформативным. Если же выбрать ширину ячеек слишком большой, то алгоритм будет плохо различать похожие оттенки. Поэтому оптимальный размер ячейки приходится подбирать экспериментально.

Для поиска заданных объектов на изображении с помощью гистограмм обычно применяется метод «скользящего окна». Вычисляется гистограмма исследуемого изображения внутри некоторого прямоугольника («окна»), которая сравнивается с гистограммой искомого объекта. Однако, искомый объект — не обязательно прямоугольной формы, следовательно, в «окно» попадут не только пиксели объекта, но и пиксели фона, что может существенно исказить гистограмму.

Также, если разные грани объекта имеют разный цвет, при повороте и аффинных преобразованиях пропорции этих цветов в гистограмме могут сильно измениться.

Экспериментальные исследования показали, что методы на основе сравнения гистограмм неустойчивы к сильным изменениям освещения сцены. Дополнительные сложности создаёт наличие световых бликов на изображении. Кроме того, разные камеры и фотоаппараты обладают разной цветопередачей, поэтому один и тот же цвет может выглядеть по-разному на изображениях с разных устройств.