Серфил по инету – на одном портальчике наткнулся на довольно ценную информацию, на основе которой, по моей идее, можно сварганить еще более интересный сайтик и собирать целевой траф – в общем для опытов мне понадобился сайт донор ЦЕЛИКОМ.
Сваял скриптик для полного “сдутия” сайта – этакой универсальный граббер на PHP, win32 приложений таких полно, а вот серверных nix решений не нашел (скорее всего снова изобретение велосипеда – но минут 15 моих поисков в поисковиках не увенчались успехом).
Итак:
На входе любая ссылка с сайта – на выходе папочка содержащая все файлы с данного сайта (всё куда мог дотянуться граббер). Грабятся только внутренние ссылки – внешние полностью игнорируются.
Сохраняются все файлы, найденные по маске href= … и src= …
Кому интересно – готов обсудить цену вопроса.
15 комментариев на «“Универсальный PHP граббер”»
всё оказалось ОЧЕНЬ просто 🙂
wget -r -t1 http://www.site.ru/
в общем man wget 🙂
И цена вопроса?
цена вопроса обсуждается приватно – стукни или напиши – решим
Так я не понял ты сам написал этот грабер или гдето спер?
если бы ты научил дорвеи делать было бы другое дело.
Хорошо бы такой скриптик, но чтоб работал на хостингах без исходящих 😉
Тогда можно и цену вопроса обсудить…
Насколько я понимаю, сей скрипт ставится на хостинг и по сути просто напросто делает сай-клон? так?
почти так – просто скачивает в исходном виде
для того чтоб сделать клон – нужно ссылки везде заменить на новые или относительные
могу в принципе доработать – не сложно
http://www.musdepo.com/video/ скачать видео камеди клаб
Alex ,а подскажи где взять бота Always last said?
отличное предложение! я чуток подзаработаю и обращусь!
Отлично! Взял на заметку!
Полезная инфа – http://antisgushenka.ru/
Спасибо за инфу, пора бы подкопить денжат на такое чудо 🙂
Интересно, а что еще умеет граббер?
Здравствуйте! Граббер, нужен но только что бы он работал именно с контентом, то есть постоянно добавлял статьи с других сайтов! Вот эта тема, самораскручивающийся сайт….