Robots.txt для dle

Тема в разделе "SEO оптимизация", создана пользователем Nomad, 18.12.10.

  1. Nomad

    Nomad Энтузиаст

    Регистрация:
    09.10.10
    Сообщения:
    229
    Симпатии:
    0
    Скажите, что в него внести, если сайт на Дле?
     
  2. Ivan

    Ivan Команда форума Администратор

    Регистрация:
    28.10.10
    Сообщения:
    853
    Симпатии:
    16
    Пол:
    Мужской
    точно не знаю, админку и повторяющиеся страницы, профили юзеров, оценки всякие.
     
  3. Jack

    Jack Энтузиаст

    Регистрация:
    09.10.10
    Сообщения:
    268
    Симпатии:
    1
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /user/
    Disallow: /favorites/
    Disallow: /index.php?do=register
    Disallow: /?do=lastcomments
    Disallow: /statistics.html
     
  4. Nomad

    Nomad Энтузиаст

    Регистрация:
    09.10.10
    Сообщения:
    229
    Симпатии:
    0
    А адрес к карте сайта тоже там прописывать?
     
  5. Cosmo

    Cosmo Энтузиаст

    Регистрация:
    09.10.10
    Сообщения:
    315
    Симпатии:
    1
    Желательно, да.
     
  6. Jack

    Jack Энтузиаст

    Регистрация:
    09.10.10
    Сообщения:
    268
    Симпатии:
    1
    В принципе, можно еще добавить страницы. Все зависит от того, что за сайт
     
  7. Cosmo

    Cosmo Энтузиаст

    Регистрация:
    09.10.10
    Сообщения:
    315
    Симпатии:
    1
    Если сайт корпоративный?