Вы создали свой корпоративный сайт и хотите поставить его в Интернет, отдать на суд как пользователям Интернет, так и паукам поисковых систем Интернет.
Но Ваш сайт имеет десятки и сотни разделов, сотни и тысячи страниц. И нет ли ошибок в Вашем сайте?
Вручную проверить все ссылки на сайте практически невозможно, ведь они находятся не только в пунктах меню, но и разбросаны по текстам. Помочь здесь могут автоматизированные программы, автоматически, без всякого Вашего участия, проверяющие все ссылки на Вашем сайте и выдающие как полный перечень страниц Вашего сайта (карту сайта), так и перечень обнаруженных ошибок. Причем указывается, не только какая ссылка выдает ошибку, но и на какой странице сайта находится эта ссылка.
К таким программам относится, например, бесплатная и очень простая в использовании программа компании SOFTplus GSiteCrawler.
Если Ваш сайт создан недостаточно профессионально, эта программа может найти на нем, например, страницы такого вида:
- http://page/
- http://page
- http://www.page/
- http://www.page
Это одна и та же страница, но имеющая ссылки различного вида на нее. Это практически незаметно пользователю Интернет, но поисковые системы Интернет могут решить, что их обманывают, и наказать Ваш сайт.
Могут так же быть и одинаковые страницы со ссылками вида:
- http://page/page.html
- http://page/page.html?2
- http://page/page.html?ID=2
Если они имеются, они тоже будут обнаружены.
Такие программы могут работать как на сервере Интернет, так и на локальном компьютере, на котором создается сайт. Можно хорошенько проверить Ваш сайт не выходя в Интернет, и поставить туда уже проверенный и отлаженный продукт.
Кроме того, такую проверку желательно проводить и во время эксплуатации сайта, ведь страницы Вашего сайта меняются, некоторые удаляются, меняются и сайты, на которые ссылается Ваш сайт.
Проводя такие проверки, Вы можете быть уверены, что созданный Вами корпоративный сайт будет работать четко и корректно. Он не будет вызывать нареканий пользователей Интернет, его будут успешно индексировать поисковые системы Интернет.
Кроме того, эта программа формирует карту сайта для поисковых систем Google и Yahoo, которая может использоваться для улучшения индексации Вашего сайты. Вы например, можете указывать, время обновления Ваших страниц, приоритет, исключать из карты сайта некоторые страницы сайта.