парсер линков с DOM

[Kerry]

есть сайт. нужно парсить инфо оттуда. перелистывая страницы.
в DOMе основной страницы нет всех линков для парсинга. есть только первые 9 штук.
Если перелеснуть страницу и пойти в DOM, будет ещё 9 линков.
как все это реализовать? какой алгоритм выбрать?

 

[qzen4i]

Есть шаблон bing, по которому как вариант можно посмотреть, а так можете просто взять дом скролить вниз, опять взять дом скролить вниз, каждым разом проверяя количество спаршенных ссылок. когда оно будет ровное число что и было тогда уже остановить. ну примерно так.