Показано с 1 по 6 из 6
Тема: Индексация веб сайтов
-
18.01.2010, 14:35 #1
- Регистрация
- 18.01.2010
- Сообщений
- 6
- Сказал(а) спасибо
- 0
- Поблагодарили 0 раз(а) в 0 сообщениях
Индексация веб сайтов
В мире существуют кучи поисковиков. Яндекс Гугл и прочие. Так вот возникла необходимость создать свой небольшой поисковик.
Кто нибудь видел описания алгоритмов индексации? Понятное дело что что-то похожее на яндекс и гугл не сделать, но мне это и не нужно :)
Первое что приходит в голову рекурсивно обойти страницы, выкинуть хтмл, знаки препинания, слишком короткие слова.
Но как выкинуть например элементы дизайна? На каждой странице есть менюшки, счетчики и всякая прочая фигня. Как её вырезать чтобы она не забивала поиск?
Как выбрать из страницы только смысл? Хотябы направление по которому идти где нибудь описано? :)
-
18.01.2010, 18:56 #2
- Регистрация
- 22.01.2009
- Сообщений
- 45
- Сказал(а) спасибо
- 0
- Поблагодарили 228 раз(а) в 15 сообщениях
а есть уже готовые решения по поиковикам
например тоже апи от гугла
получится свой гугл)))
-
18.01.2010, 23:11 #3
- Регистрация
- 18.01.2010
- Сообщений
- 6
- Сказал(а) спасибо
- 0
- Поблагодарили 0 раз(а) в 0 сообщениях
Мне не нужен свой гугл :)
мне нужно проиндексировать десяток сайтов и по ним искать :)
-
19.01.2010, 00:30 #4
- Регистрация
- 22.01.2009
- Сообщений
- 45
- Сказал(а) спасибо
- 0
- Поблагодарили 228 раз(а) в 15 сообщениях
ну ведь сказал же апи от гугла юзай
теперь даю ссылку http://www.google.com/cse/docs/cref.html
все тот же апи от гугла, т.е. в результате будет посик от гугла по ТВОИМ сайтам
если сам не можешь закажи мне, сделаю за бабки
-
19.01.2010, 15:51 #5
- Регистрация
- 18.01.2010
- Сообщений
- 6
- Сказал(а) спасибо
- 0
- Поблагодарили 0 раз(а) в 0 сообщениях
Я сам это за бабки делаю :) Сайты не доступны снаружи. Можно заюзать Яндекс.Сервер, но тогда придется вешать логотип яндекса везде и рекламму. А это плохо.
-
19.01.2010, 15:56 #6
- Регистрация
- 22.01.2009
- Сообщений
- 45
- Сказал(а) спасибо
- 0
- Поблагодарили 228 раз(а) в 15 сообщениях
Похожие темы
-
Программы для посетителей Веб сайтов
от web-soft в разделе Интернет и сетиОтветов: 0Последнее сообщение: 26.12.2009, 20:52 -
скрипт рейтинга сайтов
от DEL в разделе В помощь вебмастеруОтветов: 0Последнее сообщение: 05.07.2009, 23:27
Социальные закладки