Программистам - куплю или закажу парсер

Цитата:

А на моем хостинге чета не шурупит. Закинул в корень, при обращении выдается форма запроса, а когда нажимаешь "подобрать" -выдает "Произошла ошибка при соединении с Yandex.direct."

Прогрессная инфа, возможно, не показывается по той же причине, что и на моём хостинге - принудительная буферизация вывода php. Но её можно посмотреть, посмотрев source итоговой страницы. Она там в самом начале. Там показывается какую страницу была попытка распарсить и т.п.

artsoft писал:

Там показывается какую страницу была попытка распарсить и т.п.

Что-то у меня не очень хочет работать.... Делаю один, максимум два запроса и дальше увы... только "Произошла ошибка при соединении с Yandex.direct". И хоть убейся. Пробовал на трех разных хостингах, везде то же самое.

Вообще-то я нормально пользовался и самим Яндекс-Директом, вот только "забодался" редактировать потом список - убирать количество запросов после ключевой фразы.

Может можно сделать какой-то простенький скрипт, который бы просто из списка убирал цифры - количество запросов?

Выбрал в Яндексе фразы и сохранил полученный список например в файле "baza.txt". В нем что-нибудь типа:

фраза 42600
крылатые фразы 5533
прикольные фразы 2834
фразы фильм 1840
скачать фразы 1415
английские фразы 1294
смешные фразы 1281
умные фразы 1084
mp3 фразы 1016
фразы любви 755
фразы кинофильмы 589

Потом запустил бы скрипт и "baza.txt" получился бы такой:

фраза
крылатые фразы
прикольные фразы
фразы фильм
скачать фразы
английские фразы
смешные фразы
умные фразы
mp3 фразы
фразы любви
фразы кинофильмы

Только чтобы скрипт не убирал цифры, содержащиеся внутри ключевых фраз, и не оставлял пробела после них. В принципе, подобный скриптик меня вполне удовлетворил бы. Во всяком случае, в настоящий момент.

В данный момент идет работа над этим скриптом по мере появления свободного от других заказов времени. Собираюсь сделать анализ параметров бана yandex.direct'а, то есть через какой промежуток времени можно искать, не боясь бана.
Кроме того будет реализовано:
- парсинг статистики rambler'а и mail.ru c возможностью показа совокупных рез-ов всех трех систем.

а скрипт вроде бы не выводит то что в разделе:
Что еще искали люди, искавшие ...
?

Kasta писал:

а скрипт вроде бы не выводит то что в разделе: Что еще искали люди, искавшие ... ?

Да, эта инфа пока не выводится.

artsoft писал:

Да, эта инфа пока не выводится.

а нельзя ли? как бы по выбору хотите выводить это или нет.
кстати для того чтоб не было банов, а тем более если кто это использует на хостингах платных своих, или из дома, приятно было бы если была возможность работы через переменную $proxy
а прокси вводить на главной странице или из файла
или в самом пхп файле ручками

кстати , а это скрипт все страницы перебирает, вроде по коду смотрю "следующая" там прописана.

Цитата:

а нельзя ли? как бы по выбору хотите выводить это или нет. кстати для того чтоб не было банов...

Все можно, появится свободное время - сделаю.
Страницы перебираются до тех пока это требуется, то есть исходя из нижнего лимита показов.

artsoft писал:

Все можно, появится свободное время - сделаю. Страницы перебираются до тех пока это требуется, то есть исходя из нижнего лимита показов.

кстати говоря, вообще то почему то захватило раздел "что еще искали люди" , то есть пропарисло 14 страниц выдачи + 25 слов из чего еще искали люди , тоже пропарсило. и около 30 слов из этого раздела непропарсила. странно...

эти 25 слов были на последней 14 странице в разделе "что еще"

вот такая фишка получилась в файле где результат:
660) наш запрос который уже на последней странице яндексдиректа
661) <span>&larr;</span>&nbsp;предыдущая
662) тут уже запрос из "чего ищё"

Kasta писал:

эти 25 слов были на последней 14 странице в разделе "что еще"

А на этой странице кроме раздела "что еще" еще разделы были?

Цитата:

660) наш запрос который уже на последней странице яндексдиректа 661) <span>&larr;</span>&nbsp;предыдущая 662) тут уже запрос из "чего ищё"

Ага, это баг, в след-ей ревизии исправлю.
Спасибо за тестинг.