Объявление

Свернуть
Пока нет объявлений.

robots.txt анализ и правка

Свернуть
X
  • Фильтр
  • Время
  • Показать
Очистить всё
новые сообщения

  • robots.txt анализ и правка

    Друзья кто разбирается в роботс файле, нужна помощь в правке. Сайт и на нём есть форум, правильно ли я сделал роботс файл? Сайт на смс дле а форум на phpbb3x

    User-agent: *
    Allow: /uploads/posts/
    Allow: /uploads/fotos/
    Allow: /uploads/files/
    Disallow: /*print
    Disallow: /engine/go.php
    Disallow: /cache/
    Disallow: /cgi-bin/
    Disallow: /page/
    Disallow: /*/page/*
    Disallow: */page/*
    Disallow: */thumbs/*
    Disallow: /*/*/page/*
    Disallow: /language/
    Disallow: /templates/
    Disallow: /backup/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /*do=rules
    Disallow: /banners/
    Disallow: /2010/
    Disallow: /2011/
    Disallow: /2012/
    Disallow: /2013/
    Disallow: /2014/
    Disallow: /tags/
    Disallow: /tags/
    Disallow: /tags/*/
    Disallow: /user/
    Disallow: /engine/
    Disallow: /favorites/
    Disallow: /lastnews/
    Disallow: /newposts/
    Disallow: /catalog/
    Disallow: /addnews.html
    Disallow: /statistics.html
    Disallow: /rules.html
    Disallow: /dle-rules-page.html
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lastcomments
    Disallow: /index.php?do=lastnews
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=search
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=tags
    Disallow: /index.php?do=user
    Disallow: /index.php?subaction=newposts
    Disallow: /*?*
    Disallow: /?p*
    Disallow: /*utm_medium
    Disallow: /*action=mobile
    Disallow: /do=*
    Disallow: /?iframe*
    Disallow: /*html?http*
    Disallow: /*do=*
    Sitemap: мой сайт/sitemap1.xml
    Sitemap: мой сайт/sitemap2.xml

    User-agent: Yandex
    Allow: /uploads/posts/
    Allow: /uploads/fotos/
    Allow: /uploads/files/
    Disallow: /*print
    Disallow: /engine/go.php
    Disallow: /cache/
    Disallow: /cgi-bin/
    Disallow: /page/
    Disallow: /*/page/*
    Disallow: */page/*
    Disallow: */thumbs/*
    Disallow: /*/*/page/*
    Disallow: /language/
    Disallow: /templates/
    Disallow: /backup/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /*do=rules
    Disallow: /banners/
    Disallow: /2010/
    Disallow: /2011/
    Disallow: /2012/
    Disallow: /2013/
    Disallow: /2014/
    Disallow: /tags/
    Disallow: /tags/
    Disallow: /tags/*/
    Disallow: /user/
    Disallow: /engine/
    Disallow: /favorites/
    Disallow: /lastnews/
    Disallow: /newposts/
    Disallow: /catalog/
    Disallow: /addnews.html
    Disallow: /statistics.html
    Disallow: /rules.html
    Disallow: /dle-rules-page.html
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lastcomments
    Disallow: /index.php?do=lastnews
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=search
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=tags
    Disallow: /index.php?do=user
    Disallow: /index.php?subaction=newposts
    Disallow: /*?*
    Disallow: /?p*
    Disallow: /*utm_medium
    Disallow: /*action=mobile
    Disallow: /do=*
    Disallow: /?iframe*
    Disallow: /*html?http*
    Disallow: /*do=*
    Sitemap: мой сайт/sitemap1.xml
    Sitemap: мой сайт/sitemap2.xml

    User-agent: *
    Allow: /download/fotos/
    Allow: /download/video_pinkshell/
    Disallow: /forum/faq.php
    Disallow: /forum/mcp.php
    Disallow: /forum/memberlist.php
    Disallow: /forum/posting.php
    Disallow: /forum/report.php
    Disallow: /forum/search.php
    Disallow: /forum/style.php
    Disallow: /forum/ucp.php
    Disallow: /forum/viewtopic.php?p=*
    Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
    Disallow: /forum/viewtopic.php?f=*&t=*&view=next
    Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
    Sitemap: /forum/sitemap.php
    Clean-param: sid /forum/index.php
    Clean-param: sid /forum/viewforum.php
    Clean-param: sid /forum/viewtopic.php

    User-agent: Yandex
    Allow: /download/fotos/
    Allow: /download/video_pinkshell/
    Disallow: /forum/faq.php
    Disallow: /forum/mcp.php
    Disallow: /forum/memberlist.php
    Disallow: /forum/posting.php
    Disallow: /forum/report.php
    Disallow: /forum/search.php
    Disallow: /forum/style.php
    Disallow: /forum/ucp.php
    Disallow: /forum/viewtopic.php?p=*
    Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
    Disallow: /forum/viewtopic.php?f=*&t=*&view=next
    Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
    Sitemap: /forum/sitemap.php
    Clean-param: sid /forum/index.php
    Clean-param: sid /forum/viewforum.php
    Clean-param: sid /forum/viewtopic.php

    User-agent: Googlebot
    Allow: /download/fotos/
    Allow: /download/video_pinkshell/
    Disallow: /forum/faq.php
    Disallow: /forum/mcp.php
    Disallow: /forum/memberlist.php
    Disallow: /forum/posting.php
    Disallow: /forum/report.php
    Disallow: /forum/search.php
    Disallow: /forum/style.php
    Disallow: /forum/ucp.php
    Disallow: /forum/viewtopic.php?p=*
    Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
    Disallow: /forum/viewtopic.php?f=*&t=*&view=next
    Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
    Host: мой сайт
    Sitemap: /forum/sitemap.php
    Clean-param: sid /forum/index.php
    Clean-param: sid /forum/viewforum.php
    Clean-param: sid /forum/viewtopic.php

  • #2
    Интересует раздел виевтопик, после этого выпали из индекса все страницы, кроме главной. Море перелазил форумов и везде такой вид роботса, пишут мол во избежания дубликатов страниц. ЧТо посоветуете?!

    Комментарий


    • #3
      Не правильно. Слишком много ненужных правил. Можно было бы короче и проще. Плюс ты сам себе навредил.

      Комментарий

      Обработка...
      X
      Яндекс.Метрика