robots.txt для 4.х.х

[[Gusev.rf]]

Всем привет.

Может у кого уже есть готовый robots.txt для четвёртой линейки ipb чтоб скрыть всё лишние от индексации? В моём случае для 4.1.19.2

Поиском ничего не нашел.

Заранее признателен за подсказку.

[Silence]

4 минуты назад, [Gusev.rf] сказал:

Всем привет.

Может у кого уже есть готовый robots.txt для четвёртой линейки ipb чтоб скрыть всё лишние от индексации? В моём случае для 4.1.19.2

Поиском ничего не нашел.

Заранее признателен за подсказку.

Изменит свой сайт в ниже части robots.txt

 

robots.txt

[Cheshir]

User-agent: *
Disallow: /activity/*
Disallow: /admin/*
Disallow: /cheshir/*
Disallow: /attachments/*
Disallow: /contact/*
Disallow: /followed/*
Disallow: /ignore/*
Disallow: /lostpassword/*
Disallow: /profile/*
Disallow: /register/*
Disallow: /search/*
Disallow: /settings/*
Disallow: /statuses/*
Disallow: /terms/*
Disallow: /messenger/*
Disallow: /modcp/*
Disallow: /notifications/*
Disallow: /online/*
Disallow: /*/submit/*
Disallow: /feedback/*
Disallow: /?*

Host: domen.ru
Sitemap: http://domen.ru/sitemap.php

[lovemenow]

В 26.04.2017 в 19:55, Silence сказал:

Изменит свой сайт в ниже части robots.txt

 

robots.txt

Добрый вечер! а можете мне помочь с robots.txt! 

[Silence]

1 минуту назад, lovemenow сказал:

Добрый вечер! а можете мне помочь с robots.txt! 

как помочь

[lovemenow]

я любой код в робот вставляю он мне ошибки выдает ! даже ваш ! 

[Silence]

Только что, lovemenow сказал:

я любой код в робот вставляю он мне ошибки выдает ! даже ваш ! 

какие ошибки ... покажите скрийншот

[lovemenow]

3 минуты назад, Silence сказал:

как помочь

google вообщем не хочет принимать ))

[Silence]

1 минуту назад, lovemenow сказал:

google вообщем не хочет принимать ))

Попробуйте ето:

Спойлер

User-agent: *
Disallow: /eyeblaster
Disallow: /addineyeV2.html
Disallow: /eyeblaster/addineyeV2.html
Disallow: /adform/IFrameManager.html
Disallow: /doubleclick/adx_iframe.html
Disallow: /doubleclick/DARTIframe.html
Disallow: /eyewonder/interim.html
Disallow: /unicast/unicastIFD.html
Disallow: /flashtalking/ftlocal.html
Disallow: /flite/fif.html
Disallow: /kpsule/iframebuster.html
Disallow: /linkstorm/linkstorm_certified.html
Disallow: /mediaplex/mojofb_v9.html
Allow: /applications/core/interface/font/
Disallow: /_script/
Disallow: /api/
Disallow: /applications/
Disallow: /cgi-bin/
Disallow: /datastore/
Disallow: /plugins/
Disallow: /system/
Disallow: /403error.php
Disallow: /404error.php
Disallow: /500error.php
Disallow: /Credits.txt
Disallow: /error.php
Disallow: /upgrading.html
Disallow: /login/
Disallow: /register/
Disallow: /lostpassword/
Disallow: /search/
Disallow: /online/
Disallow: /contact/
Disallow: /activity/
Disallow: /discover/
Disallow: /?tab=*
Disallow: /index.php?*
Disallow: /*?app=*
Disallow: /*sortby=*
Disallow: /*/?do=download
Disallow: /profile/*/?do=*
Disallow: /profile/*/content/

User-agent: Yandex
Disallow: /eyeblaster
Disallow: /addineyeV2.html
Disallow: /eyeblaster/addineyeV2.html
Disallow: /adform/IFrameManager.html
Disallow: /doubleclick/adx_iframe.html
Disallow: /doubleclick/DARTIframe.html
Disallow: /eyewonder/interim.html
Disallow: /unicast/unicastIFD.html
Disallow: /flashtalking/ftlocal.html
Disallow: /flite/fif.html
Disallow: /kpsule/iframebuster.html
Disallow: /linkstorm/linkstorm_certified.html
Disallow: /mediaplex/mojofb_v9.html
Allow: /applications/core/interface/font/
Disallow: /_script/
Disallow: /api/
Disallow: /applications/
Disallow: /cgi-bin/
Disallow: /datastore/
Disallow: /plugins/
Disallow: /system/
Disallow: /403error.php
Disallow: /404error.php
Disallow: /500error.php
Disallow: /Credits.txt
Disallow: /error.php
Disallow: /upgrading.html
Disallow: /login/
Disallow: /register/
Disallow: /lostpassword/
Disallow: /search/
Disallow: /online/
Disallow: /contact/
Disallow: /activity/
Disallow: /discover/
Disallow: /?tab=*
Disallow: /index.php?*
Disallow: /*?app=*
Disallow: /*sortby=*
Disallow: /*/?do=download
Disallow: /profile/*/?do=*
Disallow: /profile/*/content/

# Если сайт на HTTPS, то обязательно это указываем для карты: https://site.ru/sitemap.php
Sitemap: http://site.ru/sitemap.php

# Если сайт на HTTPS, то обязательно это указываем: https://site.ru
Host: site.ru

 

Проверит ваш sitemap.php если работает

[lovemenow]

2 минуты назад, Silence сказал:

какие ошибки ... покажите скрийншот

 

[Silence]

В ниже части robots.txt вие пополнили saitemap и host с ваши данни ...?

[lovemenow]

Только что, Silence сказал:

В ниже части robots.txt вие пополнили saitemap и host с ваши данни ...?

Да конечно! 

[Silence]

32 минуты назад, lovemenow сказал:

Да конечно! 

Мне очень жаль, но я не нашел решение этой проблемы

[lovemenow]

21 минуту назад, Silence сказал:

Мне очень жаль, но я не нашел решение этой проблемы

еще 1 такой вопрос, этот файл подойдет?!

robots.txt