Настройка форума phpbb под поисковые системы. Часть II

2) Написание правильного файла robots.txt

Суть проблемы в том, что по умолчанию поисковые системы индексируют все доступные урл-ы на форуме phpbb. Как следствие — утечка PageRank’а и возможный бан в Яндексе.

Метод решения:

Для индексации нам нужно только три файла:

/index.php
/viewforum.php
/viewtopic.php

Все остальное надо закрыть в robots.txt

User-agent: *
Disallow: /admin/
Disallow: /db/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /templates/
Disallow: /common.php
Disallow: /config.php
Disallow: /faq.php
Disallow: /groupcp.php
Disallow: /login.php
Disallow: /memberlist.php
Disallow: /modcp.php
Disallow: /posting.php
Disallow: /privmsg.php
Disallow: /profile.php
Disallow: /search.php
Disallow: /viewonline.php

Кстати, грамотный robots.txt даст вам передышку от спаммеров, у которых один из методов поиска форумов для спама — поиск определенных файлов из дистрибутива phpbb. Следовательно, отсутствие этого файла в индексе Google на некоторое время спасет ваш форум.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *