Caltech Pedestrian
Одна из главных баз по детектированию пешеходов. Практически все алгоритмы по распознаванию пешеходов тестируются на нем. Результаты по скорости и качеству также есть.
Пример:
Сайт: https://www.vision.caltech.edu/Image_Datasets/CaltechPedestrians/
В дополнительных датасетах также указан интересный датасет с фишаем.