Комментарии: Универсальный robots.txt для IP.Board 2.x

Автор: Fasol

Fasol — Sun, 20 Feb 2011 10:44:41 +0000

Прошу прощения, дополнение к каменту выше: DLE all с ЧПУ любого типа.

Автор: Fasol

Fasol — Sun, 20 Feb 2011 10:40:51 +0000

В комбинации IPB 2.x (-/ЧПУ) + DLE all (ЧПУ тип 2: http://site.ru/категор�...../id-имя новости.html) данный robots.txt, тот, что выше, приведёт к множеству исключенных страниц из индекса.

Автор: Fisana

Fisana — Sun, 20 Feb 2011 10:34:41 +0000

У меня ничего не транслитерировалось при выводе на сайт Несколько лет подобный роботс использовала. Новости на сайт выводила, но со ссылками вида *topic Все зависит от движка сайта, вариантов масса.

Автор: Fasol

Fasol — Sun, 20 Feb 2011 10:30:56 +0000

Fisana, для форума IPB2.x без ЧПУ, где форум поддоменом (*Тем у кого форум поддоменом на сайте…*), а основным доменом, например DLE.

При транслитерации заголовков для основного домена при генерации ссылки на новость будут частенько встречаться вхождения js:

_http://сайт.ру/id-house-djs-session.html
_http://сайт.ру/id-memuary-gejjshi.html
_http://сайт.ру/id—ix-vserossijjskijj-festival-piva-more-piva-v.html

Ну и так далее…

>Когда даются готовые решения, как бы предполагается, что у пользователя имеется немнога мозга, чтобы доделать под себя.
Так я и пишу для тех, у кого не немного мозга, а недостаточно знаний в данной области

Автор: Fisana

Fisana — Sun, 20 Feb 2011 10:07:00 +0000

На форуме IPB2 без ЧПУ в принципе не бывает приведенных Вами страниц или подобных. Этот роботс только для IPB2 и подходит для него. Если он мешает сайту в корне (генерирующем такие страницы) или на форуме имеется ЧПУ с использованием транслитерации, разумеется, надо корректировать, если есть конфликты.
Когда даются готовые решения, как бы предполагается, что у пользователя имеется немнога мозга, чтобы доделать под себя.

Автор: Fasol

Fasol — Sun, 20 Feb 2011 09:52:23 +0000

Правило /*js закроет в корне сайта все новости, где в названии будут вхождения js, например:

_http://сайт.ру/nazvanie_stranicy_js.html
_http://сайт.ру/nazvaniejs_stranicy_js.html
_http://сайт.ру/nazvanie_stranicy_js.php
_http://сайт.ру/jsnazvanie_stranicy

Вобщем в любой комбинации и со всеми вышеперечисленными вхождениями.

Тем у кого форум поддоменом на сайте и стоит этот недороботс.тикст срочно удалить или привести к нормальному виду

Автор: Охрана труда

Охрана труда — Fri, 08 Oct 2010 12:27:30 +0000

Ну как там с ipb3 с robots.txt есть подвижки?

Автор: Fisana

Fisana — Mon, 04 Oct 2010 19:04:54 +0000

Дописать

Автор: Yurina

Yurina — Tue, 21 Sep 2010 06:18:09 +0000

А как быть если у меня Joomla в корне а форум сайт.ру/foum? У Joomlа свой robots.txt имеется. Просто дописать туда из топика выше? или создать новый robots.txt в папке форума?

Автор: Fisana

Fisana — Fri, 09 Jul 2010 06:57:08 +0000

1. Профили и список пользователей в случае, если они не запрещены для просмотра гостям..
2. Закрывает сессии, страницы для печати, результаты поиска, ссылки на отдельные посты, повторы ссылок на страницы, на новые посты, перенаправления…
Если не закрыть, будут ошибки и масса нечетких дублей, на которые размажется вес основного адреса страницы.

Автор: Zedd

Zedd — Fri, 09 Jul 2010 06:36:41 +0000

Disallow: /*?showuser
Disallow: /*showuser
Disallow: /*?act=Members
Это если я не хочу профили пользователй индексировать?

Не совсем понятно,что вот это закрывает, если кто знает, в кратце, пожалуйста)
Disallow: /*?s=
Disallow: /*ptopic
Disallow: /*act=SF&s=&f
Disallow: /*s0
Disallow: /*pid=
Disallow: /*?start=
Disallow: /*&p=
Disallow: /*?p=
Disallow: /*&gopid=
Disallow: /*?gopid=
Disallow: /*&hl=
Disallow: /*?hl=
Disallow: /*&cal_id

Автор: bat

bat — Mon, 21 Jun 2010 06:57:20 +0000

ммм а критично добавлять /*index.php ?

Автор: Fill

Fill — Tue, 18 May 2010 13:39:55 +0000

спасибо, подкорректировал свой файлик

Автор: Охрана труда

Охрана труда — Wed, 12 May 2010 14:19:21 +0000

просто нет совсем — я не нахожу, в принципе на 3 версию. а в основной дан только для форума без чпу

Автор: Fisana

Fisana — Wed, 12 May 2010 13:52:24 +0000

Пока не могу выложить, потому что мой основной форум пока что на 2.3.
Когда придет время и разберусь с этим, обязательно поделюсь.