| 23.02.2008, 22:21 |
se_home | Кто что может посоветовать для парсинга Yahoo Site Explorer? Оказалось, что Hrefer его не парсит, а жаль... |
| 24.02.2008, 08:22 |
Valdis | давным-давно автор спамита кайзер продавал парсер гугла.
я меняю регулярки, меняю запросы - в результате этот скрипт прекрасно парсит все поисковики, в том числе Yahoo Site Explorer.
Там минимум изменений в одном файле. Вообще с Yahoo Site Explorer все просто - там же по API урлы отдаются явно. вот только зараза банит быстро - 1000 запросов с одного ИПа в сутки. |
| 24.02.2008, 19:13 |
alexf2000 | У яхи есть апи, там официально дают делать по 10000 запросов в сутки, ответ в виде хмл, то есть парсить ничего не надо. |
| 24.02.2008, 22:15 |
false | 5к запросов в сутки на один ИП, ответ - сериализированій максив пхп )) |
| 25.02.2008, 12:10 |
Valdis | ну естественно по API. только вроде там не 10к запросов, поменьше.
а, вот, точно 5к
http://developer.yahoo.com/search/siteexplorer/V1/inlinkData.html
limited to 5,000 queries per IP address per day |
| 25.02.2008, 12:18 |
kiwi | покупается за сто-стописят баксов подсеть на сервак и вопрос парсинга яхи решён |
| 25.02.2008, 14:38 |
Gentle Giant | покупается за сто-стописят баксов подсеть на сервак и вопрос парсинга яхи решён
+1 не понимаю че народ ебется с проксями для парсинга |
| 25.02.2008, 16:00 |
bers99 | Самоё лёгкое - agress parser http://engseo.net/?p=7 |
Работает на vBulletin® версия 3.8.4. Copyright ©2000-2010, Jelsoft Enterprises Ltd. Перевод: zCarot
