Производство фотообоев в Новосибирске. Интернет магазин фотообоев. Изготовление - один день! Каталог 10 000 изображений!
4 Сентябрь 2009

Универсальный PHP граббер

posted in SEO, Программирование |

Серфил по инету — на одном портальчике наткнулся на довольно ценную информацию, на основе которой, по моей идее, можно сварганить еще более интересный сайтик и собирать целевой траф  —  в общем для опытов мне понадобился сайт донор ЦЕЛИКОМ.

Сваял скриптик для полного «сдутия» сайта — этакой универсальный граббер на PHP, win32 приложений таких полно, а вот серверных nix решений не нашел (скорее всего снова изобретение велосипеда — но минут 15 моих поисков в поисковиках не увенчались успехом).

Итак:

На входе любая ссылка с сайта — на выходе папочка содержащая все файлы с данного сайта (всё куда мог дотянуться граббер).  Грабятся только внутренние ссылки — внешние полностью игнорируются.

Сохраняются все файлы, найденные по маске href= … и  src= …

Кому интересно — готов обсудить цену вопроса.

У нас 15 комментариев на запись “Универсальный PHP граббер”

Почему бы Вам не высказать своем мнение! Позвольте нам узнать, что Вы думаете...

  1. 1 On 04.09.2009, GTAlex said:

    всё оказалось ОЧЕНЬ просто 🙂
    wget -r -t1 http://www.site.ru/
    в общем man wget 🙂

  2. 2 On 04.09.2009, Tarasich said:

    И цена вопроса?

  3. 3 On 05.09.2009, GTAlex said:

    цена вопроса обсуждается приватно — стукни или напиши — решим

  4. 4 On 07.09.2009, Fedyayka said:

    Так я не понял ты сам написал этот грабер или гдето спер?

  5. 5 On 08.09.2009, adios said:

    если бы ты научил дорвеи делать было бы другое дело.

  6. 6 On 08.09.2009, Petrusya said:

    Хорошо бы такой скриптик, но чтоб работал на хостингах без исходящих 😉
    Тогда можно и цену вопроса обсудить…

  7. 7 On 09.09.2009, Макс Енот said:

    Насколько я понимаю, сей скрипт ставится на хостинг и по сути просто напросто делает сай-клон? так?

  8. 8 On 09.09.2009, GTAlex said:

    почти так — просто скачивает в исходном виде
    для того чтоб сделать клон — нужно ссылки везде заменить на новые или относительные
    могу в принципе доработать — не сложно

  9. 9 On 10.09.2009, Photonset said:

    http://www.musdepo.com/video/ скачать видео камеди клаб

  10. 10 On 10.09.2009, Filya said:

    Alex ,а подскажи где взять бота Always last said?

  11. 11 On 10.09.2009, Alesha said:

    отличное предложение! я чуток подзаработаю и обращусь!

  12. 12 On 12.09.2009, Vitaliy said:

    Отлично! Взял на заметку!
    Полезная инфа — http://antisgushenka.ru/

  13. 13 On 27.12.2009, Woodman said:

    Спасибо за инфу, пора бы подкопить денжат на такое чудо 🙂

  14. 14 On 12.02.2010, Todya said:

    Интересно, а что еще умеет граббер?

  15. 15 On 12.03.2010, Юрий said:

    Здравствуйте! Граббер, нужен но только что бы он работал именно с контентом, то есть постоянно добавлял статьи с других сайтов! Вот эта тема, самораскручивающийся сайт….

Оставить комментарий