Специальный интерфейс для поисковиков
Как есть для страниц на сайте версия для печати (для принтера), как есть rss для получения обновлений на сайте, так нужно и сделать специальный интерфейс, в который будут ходить только роботы-пауки поисковых систем.
То есть, всю информацию о сайте, его структуре, разделах, статьях и прочего - можно получить через этот канал.
При этом один раз взяв всю информацию, в последующие моменты паук будет просить только обновления-добавления-изменения на сайте (процесс может напоминать rss).
То есть, всю информацию о сайте, его структуре, разделах, статьях и прочего - можно получить через этот канал.
При этом один раз взяв всю информацию, в последующие моменты паук будет просить только обновления-добавления-изменения на сайте (процесс может напоминать rss).
Comments (2):
но там есть недоработки.