алгоритмы поискового робота
Ув. господа программисты, подскажите литературку и ссылки по сабжу!
Также буду очень благодарен за ссылки по принципам индексации больших баз данных (типа поисковых систем)
За сим разрешите откланяться! ;)
Также буду очень благодарен за ссылки по принципам индексации больших баз данных (типа поисковых систем)
За сим разрешите откланяться! ;)
Что, никто никогда не занимался этим?! :-?
Цитата:
Originally posted by Lastdruid
Ув. господа программисты, подскажите литературку и ссылки по сабжу!
Также буду очень благодарен за ссылки по принципам индексации больших баз данных (типа поисковых систем)
За сим разрешите откланяться! ;)
Ув. господа программисты, подскажите литературку и ссылки по сабжу!
Также буду очень благодарен за ссылки по принципам индексации больших баз данных (типа поисковых систем)
За сим разрешите откланяться! ;)
алгортмы поискового робота - что именно требуется?
предположим разделим работу на 3 части:
1 - находить страницы, переходить со страницы на страницу
2 - сканировать их
3 - помещать в свою базу
реши что представляет для тебя сложность. плюс посмотри аналоги существующих роботов. на многих сайтах по WEB-программированию есть информация о том как они индексируют страницу.
принципы индексациибольших баз данных такие же как и не очень больших баз данных :) - rtfm.
а если ОЧЕНЬ большая база данных - то посмотри в сторону хранилищ данных.