Сайт не проиндексирован.

[mehman4uk]

Весь форум пролистал,но у Вас нету того,из - за чего можно выкинуть из списка Яндекса.Хм...правда глупо и странно)

[instrumentariy]

Весь форум пролистал,но у Вас нету того,из - за чего можно выкинуть из списка Яндекса.Хм...правда глупо и странно)

Вот и я не могу понять. Ну да ладно буду развивать дальше, может батюшка милостыню подаст.

[instrumentariy]

Продолжаю историю как и обещал !

 

Яндекс начал индексировать форум наконец-то,  уже 2300 страниц проиндексировал.

[Respected]

instrumentariy, ну вот, Яндекс не заставил себя долго ждать

Ещё бы дизайн сделать, оригинальный как-то "заезженно" выглядит  

[instrumentariy]

Да дизайн конечно надо, но пока из стилей которые видел для ipb - ни один не понравился, видимо прийдётся делать индивидуально на заказ.

А это уже дороговато получается. 

 

Например списывался около года назад с Fisana, так она мне за разработку индивидуального дизайна счёт на 25 тысяч выкатила. 

[Respected]

Дело очень трудоёмкое. Сейчас наверное все 30 выставит.

[Gabda]

У меня тоже таоке было. Ты просто перезалей файл html файл яндекса. На следующий день должно всё возобновиться

[Respected]

Это вообще тут причём?

[lg29]

А меня платон тоже не так давно из под АГС вывел. 

Что делал что бы вывести форум:

1) статьи мало того что бы были уникальными, но так и еще оформлялись что бы нормально

2) Ждал ждал ждал

3) 2 раза хрумой прогнал под гугл

4) Купил несколько статей

5) ждал ждал ждал

 

И вот был апдейт и наконец то меня он принял, а так больше 7 месяцев мурыжил.

[Respected]

Сейчас мода уже давно идёт на СДЛ, лучше сразу всё нормально оформить, чем потом

ждал ждал ждал

 

[spoken]

У меня вчера +70 страниц в индексе, sitemap робот наконец обработал.

[Respected]

spoken,  сайт на IP.Board?

[spoken]

Respected, да. Сначала было около 130 страниц в индексе, потом упало до 90 по непонятно причине, а вчера он наконец обработал Sitemap и стало +70. но я из индекса всё лишнее убрал при помощи robots.txt, теги, например. По сути добиваюсь индексации только главной и /topic/ вместе с /forum/

 

 

 

По моим подсчётам, для попадания в индекс сейчас доступно около 800 страниц, так что ещё есть куда расти.

Изменено 6 августа, 2013 пользователем spoken

[Respected]

spoken, тематику можно узнать? 

В IP.Board много чего нужно закрывать от индекса, поисковики любят, когда им предоставляют только актуальную информацию. 

[spoken]

Respected, тематика примерно юридическая. Над robots.txt я очень поработал, изучая проиндексированное и логи сервера. Теперь в индексе только сам контент и ничего лишнего.

 

robots сейчас такой

User-agent: *
Sitemap: __forum.test/sitemap.xml
Disallow: /cache/
Disallow: /hooks/
Disallow: /ips_kernel/
Disallow: /public/style_captcha/
Disallow: /index.php?app=core&module=task
Disallow: /index.php?app=forums&module=moderate&section=moderate
Disallow: /index.php?app=forums&module=extras&section=forward
Disallow: /index.php?app=core&module=global&section=login
Disallow: /index.php?app=core&module=global&section=register
Disallow: /index.php?app=core&module=global&section=lostpass
Disallow: /index.php?app=core&module=global&section=navigation&inapp=forums
Disallow: /index.php?app=core&module=help
Disallow: /index.php?app=forums&module=extras&section=boardrules
Disallow: /index.php?app=forums&module=extras&section=stats
Disallow: /index.php?&unlockUserAgent=1
Disallow: /index.php?sharelink=*
Disallow: /*&module=search
Allow:	  /*&search_tags=
Disallow: /*app=core&module=global&section=reputation
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=*
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*view=getnewpost$
Disallow: /*view=getlastpost$
Disallow: /*view=old$
Disallow: /*view=new$
Disallow: /*view=getfirst$
Disallow: /*view=getprevious$
Disallow: /*view=getnext$
Disallow: /*view=getlast$
Disallow: /*view=getnextunread$
Disallow: /*?s=
Disallow: /*?sort_key
Disallow: /*&s=
Disallow: /index.php?app=core&module=global&section=login&do=deleteCookies
Disallow: /index.php?app=forums&module=extras&section=rating
Disallow: /index.php?app=forums&module=forums&section=markasread
Disallow: /*&do=who
Disallow: /*&section=dname
Disallow: /user/
Disallow: /members/
Disallow: /register/
Disallow: /lostpass/
Disallow: /login/
Disallow: /tags/
Disallow: /statuses/
Disallow: /index.php/user/
Disallow: /index.php/members/
Disallow: /index.php/register/
Disallow: /index.php/lostpass/
Disallow: /index.php/login/
Disallow: /index.php/tags/
Disallow: /index.php/statuses/
Disallow: /index.php?/user/
Disallow: /index.php?/members/
Disallow: /index.php?/register/
Disallow: /index.php?/lostpass/
Disallow: /index.php?/login/
Disallow: /index.php?/tags/

Надо ещё /uploads/ добавить, а то вылезло в ошибках при индексации.

Если я верно понимаю их математику, то 3320-2570=750 Т.е. в теории 750-166 страниц должны попасть в индекс при очередном апе.

[lg29]

Ребят раз тема зашла за роботс.тхт то спрошу следующее то роботс что предоставлен изначально разработчиками сильно дорабатывать нужно? Если немного не поняли про что я то ммммммммм как объяснить лучше то.

Вообщем есть ли какой то роботс который грамотный и все что нужно скрыто от индекса, все что нужно открыто.

Для примера вот мой, что посоветуете что бы открыть и что бы скрыть?

User-agent: Yandex

Disallow: /_______/
Disallow: /cache/
Disallow: /converge_local/
Disallow: /hooks/
Disallow: /ips_kernel/
Disallow: /retail/
Disallow: /public/style_captcha/
Disallow: /index.php?app=core&module=task
Disallow: /index.php?app=core&module=usercp&tab=forums&area=forumsubs
Disallow: /index.php?app=core&module=usercp&tab=forums&area=watch&watch=topic
Disallow: /index.php?app=forums&module=extras§ion=forward
Disallow: /index.php?app=members&module=messaging
Disallow: /index.php?app=members&module=chat
Disallow: /index.php?app=members&module=search
Disallow: /index.php?app=members&module=search&do=active
Disallow: /index.php?&unlockUserAgent=1
Disallow: /*app=core&module=usercp
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=messaging
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=old$
Disallow: /*&view=new$
Disallow: /*&view=getfirst$
Disallow: /*&view=getprevious$
Disallow: /*&view=getnext$
Disallow: /*&view=getlast$
Disallow: /*?s=
Disallow: /*&s=
Disallow: /user/
Disallow: /members/
Disallow: /index.php?app=members
Disallow: /index.php?app=core&module=global§ion=login&do=deleteCookies
Disallow: /index.php?app=forums&module=extras§ion=rating
Disallow: /index.php?app=forums&module=forums§ion=markasread
Disallow: /index.php?app=core&module=search&do=search&search_tags=
Host: _____
Sitemap: ____

[Respected]

Кто как считает. Вот наш роботс:

Disallow: /
Allow: /index.php?app=ipseo&amp
Sitemap: 
Host: 
User-agent: *
Disallow: /admin/
Disallow: /cache/
Disallow: /converge_local/
Disallow: /hooks/
Disallow: /ips_kernel/
Disallow: /retail/
Disallow: /public/style_captcha/
Disallow: /index.php?app=core&module=task
Disallow: /index.php?app=core&module=usercp&tab=forums&area=forumsubs
Disallow: /index.php?app=core&module=usercp&tab=forums&area=watch&watch=topic
Disallow: /index.php?app=forums&module=extras&section=forward
Disallow: /index.php?app=members&module=messaging
Disallow: /index.php?app=members&module=chat
Disallow: /index.php?app=members&module=search
Disallow: /index.php?app=members&module=search&do=active
Disallow: /index.php?&unlockUserAgent=1
Disallow: /*app=core&module=usercp
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=messaging
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=old$
Disallow: /*&view=new$
Disallow: /*&view=getfirst$
Disallow: /*&view=getprevious$
Disallow: /*&view=getnext$
Disallow: /*&view=getlast$
Disallow: /*?s=
Disallow: /*&s=
Disallow: /index.php?app=core&module=global&section=login&do=deleteCookies
Disallow: /index.php?app=forums&module=extras&section=rating
Disallow: /index.php?app=forums&module=forums&section=markasread
Disallow: /index.php?/members/
Disallow: /members/
Disallow: /user/

 

[spoken]

Allow: /index.php?app=ipseo&

Уверены, что это есть у вас? Что-то ipbmafia.ru/index.php?app=ipseo не открывается.