SPoster v0.3 - прогоняет страницы ваших дорвеев по Scuttle закладкам. В результате, Яндекс довольно быстро находит ссылки на дорвеи и успешно их индексирует.
Возможности и характеристики программы SPoster v0.3:
1) Работа в несколько потоков. Тестировалось при 20 и 40 потоках, особой нагрузки на процессор не было выявлено. Можно ставить и больше.
2) Реализована пакетная генерация.
3) При нескольких неудачных регистрациях на Scuttle закладке, она выбрасывается из очереди на прогон, а также записывается в специальный для этого текстбокс. После окончания работы можно отфильтровать свои закладки, убрав оттуда нерабочие.
SPoster’у есть бесплатная альтернатива, которой пользовался я сам – ScuttlePoster. Эта программа написана на php с прикрученным интерфейсом, работает в один поток. Приходилось запускать 10 копий, что серьезно грузило процессор.
Для сравнения: 10 запущенных копий ScuttlePoster’а прогнали 1000 страниц за 33 часа.
SPoster v0.3 справился с 1000 страницами в 40 потоков за 5 часов.
Теперь касательно результатов:
Прогнанные доры входят в индекс спустя 1-2 апа. В индекс входит больший процент страниц и сидят дольше в нем. Это если сравнивать с простой аддурилкой, сквозь прокси.
Возможности и характеристики программы SPoster v0.3:
1) Работа в несколько потоков. Тестировалось при 20 и 40 потоках, особой нагрузки на процессор не было выявлено. Можно ставить и больше.
2) Реализована пакетная генерация.
3) При нескольких неудачных регистрациях на Scuttle закладке, она выбрасывается из очереди на прогон, а также записывается в специальный для этого текстбокс. После окончания работы можно отфильтровать свои закладки, убрав оттуда нерабочие.
SPoster’у есть бесплатная альтернатива, которой пользовался я сам – ScuttlePoster. Эта программа написана на php с прикрученным интерфейсом, работает в один поток. Приходилось запускать 10 копий, что серьезно грузило процессор.
Для сравнения: 10 запущенных копий ScuttlePoster’а прогнали 1000 страниц за 33 часа.
SPoster v0.3 справился с 1000 страницами в 40 потоков за 5 часов.
Теперь касательно результатов:
Прогнанные доры входят в индекс спустя 1-2 апа. В индекс входит больший процент страниц и сидят дольше в нем. Это если сравнивать с простой аддурилкой, сквозь прокси.
