htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
 Добавлено: 23/12/05 в 23:20 |
Я в этом человек новый, так что за слэнг особо не пинать.
Итак, нужен фри-сервис по парсингу выдачи гугля (если пропарсить дальше первых 100 резалтов невозможно физически - то дальше можно не читать  ибо первые 10 страниц я отпарсил вручную). Нужно вытянуть все урлы вида http://mydomain.com/some_file... т.е. задать "маской" определенный домен и все что по нему есть - высосать. Вся соль в том что нужно вытащить и так называемые "опущенные результаты"... поэтому нужен парсер либо с возможностью установления параметров (filter=0) в урле гугля либо чтоб сам парсер понимал что и оттуда нужно тащить...
если кто что непонял спрашивайте - я отвечу... 
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 23/12/05 в 23:25 |
|
|
|
|
| |
С нами с 17.07.04
Сообщения: 1285
Рейтинг: 651
|
| Добавлено: 23/12/05 в 23:29 |
Думаю написать парсер не очень дорого. Найди кодера и он тебе напишет то что нужно.
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 23/12/05 в 23:34 |
возможно, но не так сразу...
столько всяких фри парсеров вокруг... и неужели нет такого которому можно давать полность урл который парсить?
|
|
|
|
| |
С нами с 17.07.04
Сообщения: 1285
Рейтинг: 651
|
| Добавлено: 23/12/05 в 23:37 |
|
|
|
|
| |
♥♥♥
С нами с 28.08.04
Сообщения: 7098
Рейтинг: 5671
|
| Добавлено: 23/12/05 в 23:42 |
| just_beginner писал: | | ибо первые 10 страниц я отпарсил вручную |
В гугле есть кнопочка настройки - там можно поставить выводить 100 результатов на странице - по крайней мере когда надо что то ыбстро вручную просмотреть - все легче
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 23/12/05 в 23:58 |
| Kn писал: | | В гугле есть кнопочка настройки - там можно поставить выводить 100 результатов на странице - по крайней мере когда надо что то ыбстро вручную просмотреть - все легче |
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 00:01 |
кстати, вопрос "между строк" остался незамеченным
где то читал про эту проблему (чота вот нихрена не запонил)... немогу найти где. Результаты после сотого как нибудь вообще получить можно?
|
|
|
|
| |
1К13!
С нами с 07.05.04
Сообщения: 7721
Рейтинг: 2428
|
| Добавлено: 24/12/05 в 00:17 |
У Гринвуда парсилка с параметрами гугля есть. тока больше 200-280 результатов не покажет. зато покажет ПР каждой найденной ссылки.
|
|
|
|
| |
С нами с 22.10.03
Сообщения: 598
Рейтинг: 706
|
| Добавлено: 24/12/05 в 00:18 |
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 00:20 |
| benzole писал: | | У Гринвуда парсилка с параметрами гугля есть. тока больше 200-280 результатов не покажет. зато покажет ПР каждой найденной ссылки. |
чего то забыл я про нее... значит вопрос номер два, а именно:
| just_beginner писал: | | кстати, вопрос "между строк" остался незамеченным где то читал про эту проблему (чота вот нихрена не запонил)... немогу найти где. Результаты после сотого как нибудь вообще получить можно? |
снят...
Последний раз редактировалось: just_beginner (24/12/05 в 00:42), всего редактировалось 1 раз
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 00:25 |
эээ.... курим еще раз то что мне нужно
курим внимательно
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 00:41 |
| benzole писал: | | У Гринвуда парсилка с параметрами гугля есть. тока больше 200-280 результатов не покажет. зато покажет ПР каждой найденной ссылки. |
неа, она тоже не идет в "опущенные результаты"
|
|
|
|
| |
1К13!
С нами с 07.05.04
Сообщения: 7721
Рейтинг: 2428
|
| Добавлено: 24/12/05 в 01:31 |
в смысле &filter=0 ?
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 02:01 |
в прямом... есть у гугли такой параметр урла... если фтыкаешь его то он показывает опущенные результаты... те, что он пощитал схожими...
|
|
|
|
| |
С нами с 19.11.03
Сообщения: 3973
Рейтинг: 2362
|
| Добавлено: 24/12/05 в 03:47 |
если готов потратить средства на сабж , стучи , че нить придумаем.
|
|
|
|
| |
С нами с 24.10.04
Сообщения: 18881
Рейтинг: 9010
|
| Добавлено: 24/12/05 в 17:32 |
Попробуй вот этот парсер...
Запрос вида
| Код: |
?q=keyword&start=0&ie=utf-8&oe=utf-8&client=firefox-a&rls=org.mozilla:en-US:official
|
Фигачишь сюда:
igorek
P.S. Просьба обо всех багах мне в аську отписать или тут...
Последний раз редактировалось: ibiz (05/01/06 в 10:37), всего редактировалось 1 раз
|
|
|
|
| |
С нами с 17.07.04
Сообщения: 677
Рейтинг: 590
|
| Добавлено: 24/12/05 в 17:40 |
у меня есть для личных нужд :-)
всю 1000 (всё короче что гугл выдает по твоему запросу) просматривает и урлы сохраняет в текстовом файле
токо работает он не на серваке а локально, на дельфях написан
если надо - стучи :-)
поговрим о цене
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 17:52 |
ВОООО!!! респект тебе
только мне нужно еще чтоб он не постранично выдавал, по 10 резалтов а все сразу
|
|
|
|
| |
С нами с 24.10.04
Сообщения: 18881
Рейтинг: 9010
|
| Добавлено: 24/12/05 в 18:02 |
| just_beginner писал: | ВОООО!!! респект тебе :)
только мне нужно еще чтоб он не постранично выдавал, по 10 резалтов а все сразу :) |
Можно все организовать, тока не на моем сервере, т.к. парсер работает без проксей =)))
Кинь ТЗ в аську, попробую реализовать если несложно.
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 18:37 |
| ibiz писал: | Можно все организовать, тока не на моем сервере, т.к. парсер работает без проксей =)))
Кинь ТЗ в аську, попробую реализовать если несложно. |
ну какое там ТЗ
зацикли это дело на 10 страниц гугли и добавь возможность высасывать только урлы из того что выдает скрипт
хост есть...
|
|
|
|
| |
С нами с 24.10.04
Сообщения: 18881
Рейтинг: 9010
|
| Добавлено: 24/12/05 в 21:41 |
| just_beginner писал: | ну какое там ТЗ :)
зацикли это дело на 10 страниц гугли и добавь возможность высасывать только урлы из того что выдает скрипт :)
хост есть... :) |
Да нет проблем, в свободное время, еще и на заказ скрипты пишу, правда редко оно бывает =)))
|
|
|
|
| |
htmlcheap.com
С нами с 07.05.04
Сообщения: 6418
Рейтинг: 2072
|
| Добавлено: 24/12/05 в 23:19 |
рЫспект ibiz'у
помог мне очень
|
|
|
|
| |
С нами с 17.07.04
Сообщения: 1285
Рейтинг: 651
|
| Добавлено: 24/12/05 в 23:41 |
Я же говорил что кодер быстро сделает свое дело. Удачи... ))
|
|
|
|
| |
Old Oil Barrel
С нами с 09.09.04
Сообщения: 58531
Рейтинг: 14265
|
| Добавлено: 25/12/05 в 15:25 |
| just_beginner писал: | рЫспект ibiz'у
помог мне оче нь |
Дал бы попользоваться?
|
|
|
|
| |
