Столкнулся с проблемой при граббинге видео на основе embed-кодов с XVideos.
Пример : по тагу anime имеем anime 3776 видео
что и отражено на их странице http://www.xvideos.com/tags/
Однако же при переходе на страницу с соответствующим видео их всегда 2500 !
http://www.xvideos.com/tags/anime
Где остальные ?![*]
Видимо, при поиске стоит лимит 2500 т.к. подсчитывать все результаты накладно для производительности. Поэтому правильнее будет скачать их файл со всеми видео и выбрать нужные.
Я в курсе,но посмотрел. там и база что дается тоже не в лучшем виде. Я чекаю все автоматом. Там есть например страница с видео,а видюхи самой нет. я проверяю.