Страница 1 из 2

Поиск по всей сети.

СообщениеДобавлено: 18 янв 2007, 18:53
zuzacabric
в сети много ресурсов и искать "вручную" становится всё сложне. спрашивать у всех если у тя то или то тоже не самая лучша идея.
поэтому есть такой поисковик http://search.local.glazov.net (или http://10.10.254.254).
система поиска и шаблоны поиска оочень гибкие и позволяют найти всё что угодно. поэтому прежде чем что то начать спрашивать попробуйте искать с помощью этого сайта - позволяет найти гораздо быстрее и точнее.

СообщениеДобавлено: 18 янв 2007, 19:02
logrus
Еще при первом упоминании http://search.local.glazov.net стоило указать ip.
zuzacabric, спс

СообщениеДобавлено: 18 янв 2007, 19:04
zuzacabric
возможно у вас днс на нас не перенаправляется. тогда по адресу http://10.10.254.254 или http://192.168.254.250

СообщениеДобавлено: 18 янв 2007, 20:35
maxxxx
пока небудет стабильного линка перенаправлять небуду на вас) вообщем а за эту фиговину спасибо) удобно) а у нас есть вот это для поиска по сети - http://mftp.ghl.lan/?n=amusement

СообщениеДобавлено: 18 янв 2007, 22:11
nike
а можно узнать как часто ресурсы подвергаються сканированию? Я смотрю на свой фтп, а там файлы ссылки на давнейшии файлы.

P.S.Ну а за эту фичу спасибо.

СообщениеДобавлено: 19 янв 2007, 12:27
ukko
Кстати, подскажите, как можно сделать файл листинга каталогов, в гзипе для этих поисковиков..?

СообщениеДобавлено: 19 янв 2007, 12:30
zuzacabric
можно создать один большой файл в котором будет инфа о всех ресурсах. обычный текстовик под 80 мегов. или я не понял о чём ты?)

СообщениеДобавлено: 19 янв 2007, 15:34
logrus
2ukko

Если ты про свой сервер, то в корне фтп ls -lR > ftp_list

СообщениеДобавлено: 19 янв 2007, 16:03
zuzacabric
лучше tree) кстати поисковик может искать не токо тупо проходя всю иерархию фтп сервера. фтп сервер может хранить файл со всеми своими данными. поисковик просто будет его скачивать и распинывать по базе - это займёт времени во много раз меньше чем сканировать весь фтп сервер...вот... :D

СообщениеДобавлено: 19 янв 2007, 18:13
BoBr
Nike пишет:а можно узнать как часто ресурсы подвергаються сканированию? Я смотрю на свой фтп, а там файлы ссылки на давнейшии файлы.

P.S.Ну а за эту фичу спасибо.
Этот сервис сейчас проходит отладку и доработку, и пока запускается вручную. Сканирование не всегда проходит гладко, что в некоторой степени связано и с самими FTP серверами пользователей (с софтом и коннектом).
На крупных же серверах сканирование проходит наура 8)


Иногда при сканировании серваки пользаков уходят в DoS :lol: хотя используется одно подключение и ничиго сверхестевственного ..

СообщениеДобавлено: 19 янв 2007, 18:34
zuzacabric
BoBr пишет:
Nike пишет:а можно узнать как часто ресурсы подвергаються сканированию? Я смотрю на свой фтп, а там файлы ссылки на давнейшии файлы.

P.S.Ну а за эту фичу спасибо.
Этот сервис сейчас проходит отладку и доработку, и пока запускается вручную. Сканирование не всегда проходит гладко, что в некоторой степени связано и с самими FTP серверами пользователей (с софтом и коннектом).
На крупных же серверах сканирование проходит наура 8)


Иногда при сканировании серваки пользаков уходят в DoS :lol: хотя используется одно подключение и ничиго сверхестевственного ..


врунчую?) издеваешься чтоли?)
вручную только иногда когда очень надо обновить пораньше. некоторые пользователи блокируют доступ с адреса поисковика вот редиски) хотя сами им пользуются

СообщениеДобавлено: 19 янв 2007, 18:58
BoBr
Написанож "проходит отладку и доработку" поэтому вручную. Запускаешь один скрипт и он всё делает .. php рулит вообщем :twisted:
Можно легко кроном запускать .. уже делали.

СообщениеДобавлено: 19 янв 2007, 19:04
zuzacabric
BoBr пишет:Написанож "проходит отладку и доработку" поэтому вручную. Запускаешь один скрипт и он всё делает .. php рулит вообщем :twisted:
Можно легко кроном запускать .. уже делали.


бррр. ты мне щас рассказывать будешь про планировщики чтоли?) пхп сос*т такто - его главное предназначени веб. для остального он идёт лесом. читай коменты разработчиков. про крон я и не знал а то у меня в памяти висит процесс спит какое то время потом снова запускается....уахахахха.

СообщениеДобавлено: 19 янв 2007, 19:15
BoBr
Руки прочь от пхп 8)
Использовал его для написания индексатора фтп и оч доволен. Написание его на другом языке perl/java/cpp занялоб на порядок больше времени и нервов.

Не использовал готовые решения, т.к. нужна была ещё одна большая фича при индексации ... об этом позже

СообщениеДобавлено: 19 янв 2007, 19:45
zuzacabric
BoBr пишет:Руки прочь от пхп 8)
Использовал его для написания индексатора фтп и оч доволен. Написание его на другом языке perl/java/cpp занялоб на порядок больше времени и нервов.

Не использовал готовые решения, т.к. нужна была ещё одна большая фича при индексации ... об этом позже


ява точно лесом. к пёрлу так то полно готовых модулей даже в базовой поставке нужно уметь их только пользовать.

СообщениеДобавлено: 19 янв 2007, 20:11
BoBr
zuzacabric пишет:ява точно лесом. к пёрлу так то полно готовых модулей даже в базовой поставке нужно уметь их только пользовать.
согласен

СообщениеДобавлено: 20 янв 2007, 03:45
ukko
Мальчики, не ссорьтесь, ибо ПХП со своим пеаром, пеклом, зендом и прочими лабудами рулит по любому :)

2 Бобр, а нафиг ты сам-то пишешь? Есть же готовые решения на соурсефордже!

2 Зузакабрик, всё правильно.. В этих поисковиках есть такая фича, если в корне фтп он находит файл с определённым названием, который сжат в гзип, и содержит листинг всех ресурсов фтп, то поисковик скачивает только его, и не стартует сканирование..

На моём фтп (мир праху его) сканирование продолжалось в среднем около часа, потому создание такого файла я считаю просто необходимым..

Как что-то поменял, запустил скрипт и все довольны :)

Так вот.. каков формат этого файла, кто в курсе?

СообщениеДобавлено: 20 янв 2007, 13:10
zuzacabric
ukko пишет:Мальчики, не ссорьтесь, ибо ПХП со своим пеаром, пеклом, зендом и прочими лабудами рулит по любому :)

2 Бобр, а нафиг ты сам-то пишешь? Есть же готовые решения на соурсефордже!

2 Зузакабрик, всё правильно.. В этих поисковиках есть такая фича, если в корне фтп он находит файл с определённым названием, который сжат в гзип, и содержит листинг всех ресурсов фтп, то поисковик скачивает только его, и не стартует сканирование..

На моём фтп (мир праху его) сканирование продолжалось в среднем около часа, потому создание такого файла я считаю просто необходимым..

Как что-то поменял, запустил скрипт и все довольны :)

Так вот.. каков формат этого файла, кто в курсе?


да эта фича поддерживается.
формат файла текстовый - не сжатый на скок я помню. в одной строке 1 запись вида: размер файла путь до файла
если все будут предоставлять такую возможность это будет лучше чем просто замечательно. обновление баз будет идит мгновенно.

пс. пхп рулит токо в вебе))

СообщениеДобавлено: 20 янв 2007, 16:27
ukko
если все будут предоставлять такую возможность это будет лучше чем просто замечательно. обновление баз будет идит мгновенно.


Ага, тогда тут ничего сильно сложного не будет, надо лишь определиться с форматом файлов, и написать скриптик под линукс..

А под винду можно сделать бат файл, многие консольные юникс программы портированны, так что я думаю тут тоже проблем не возникнет.

СообщениеДобавлено: 20 янв 2007, 17:11
zuzacabric
скрипт я написал) щас его тестирую. с батником хз чё там)

СообщениеДобавлено: 20 янв 2007, 17:38
ukko
zuzacabric пишет:скрипт я написал) щас его тестирую. с батником хз чё там)


Делись же с нами :)

СообщениеДобавлено: 20 янв 2007, 21:26
zuzacabric
и таг. покопав исходники поисковика - он поддерживает несколько внутренних форматов файла данных. один из которых ls -lR ) так что загоняйте соедржимое этим) и указывайте кака файл называется. расширение у файла одно из этих bz2 gz Z .
пойду пока копать какие он ещё форматы понимает. скрипт готов но формат не полный.

СообщениеДобавлено: 20 янв 2007, 21:32
AzazeL
zuzacabric пишет:пс. пхп рулит токо в вебе))

НЕ НЕ :av:
Знаю что на ПХП многое не сделать из-за оффлайн режима - игру современную не написать, хороший граф редактор да и много чего...
Но этот язык настолько прост и популярен, что думаю прог (скриптов, сатов, движков) наберётся кудаааа больше чем на том же С++/С# и почти все Веб Сервера его держат и кроссплатформанность его плюс.
Много задачь не решаемых в С++/С# можно решить в ПХП, ну хотябы самоизменяющийся скрипт или организовать распределённые вычисления без лишних материальных затрат.
zuzacabric я наверно извращенец но я так пользую ПХП
Код: Выделить всё
php.exe -f file.php>>file.htm

Лабы там делаю :roll:

Вобщем связка Apache+MySQL+PHP+XAJAX будет ещё долго рулить :!:

СообщениеДобавлено: 20 янв 2007, 21:34
zuzacabric
) это ты к чему?) причём тут пхп?) говори яснее

СообщениеДобавлено: 20 янв 2007, 21:48
AzazeL

СообщениеДобавлено: 20 янв 2007, 21:50
zuzacabric
AzazeL пишет:
zuzacabric пишет:пс. пхп рулит токо в вебе))

НЕ НЕ :av:
Знаю что на ПХП многое не сделать из-за оффлайн режима - игру современную не написать, хороший граф редактор да и много чего...
Но этот язык настолько прост и популярен, что думаю прог (скриптов, сатов, движков) наберётся кудаааа больше чем на том же С++/С# и почти все Веб Сервера его держат и кроссплатформанность его плюс.
Много задачь не решаемых в С++/С# можно решить в ПХП, ну хотябы самоизменяющийся скрипт или организовать распределённые вычисления без лишних материальных затрат.
zuzacabric я наверно извращенец но я так пользую ПХП
Код: Выделить всё
php.exe -f file.php>>file.htm

Лабы там делаю :roll:

Вобщем связка Apache+MySQL+PHP+XAJAX будет ещё долго рулить :!:


пусть рулит) я пхп не перевариваю кстати. но у каждого свои же тараканы в голове?) вот мои

СообщениеДобавлено: 20 янв 2007, 22:00
AzazeL
На PHP запросто можно ФТП индексатор написать даже сервак не надо ставить, разве что MySQL. Будет себе скрипт вида
php.exe -f file.php>>logfile.log
раза 4 в день запускаться и нет проблем
PHP всё необходимое поддерживает: FTP MySQL GZIP

СообщениеДобавлено: 20 янв 2007, 22:01
zuzacabric
и что с того?) можно без проблем на баще написать. можно хоть на паскале написать)

СообщениеДобавлено: 20 янв 2007, 22:03
AzazeL
zuzacabric да хоть на масм пишите :D

СообщениеДобавлено: 20 янв 2007, 22:10
zuzacabric
бгы. это уже не тараканы это тараканища!))