Как да добавим файла robots.txt в Blogger

Продължавайки да оптимизираме блога си ще е добре да помислим и за търсачките. Не бива да пренебрегваме възможността да добавим или променим функцията, която ни предоставя Blogger, а именно файла robots.txt. С негова помощ можем точно да зададем на търсещите роботи правилата за индексиране на блога и ако желаем, да зададем различни параметри за различните търсачки.
Следващата информация е за тези от вас, които вече имат престава за файла robots.txt и неговото съдържание. Останалите могат да потърсят информация от Intarnet.
Добавянето на наш собствен файл robrts.txt в блога на Blogger не е трудно, защото всичко се извършва чрез лентата с инструменти. Основната задача е правилното му съставяне.
За да използваме тази настройка е необходимо:

➤от администраторския панел на нашия блог да влезем в раздела "Настройки";

➤после в раздел "Предпочитания за търсене";

➤където избираме "Персонализиран robots.txt";

➤кликаме върху бутона "Редактиране" и избираме "Да";

➤добавяме текста на предварително подготвения файл в прозореца, който се отваря.

Но основният въпрос остава в това, как правилно да създадем свой собствен файл robots.txt. Как се прави може да се прочете в раздел "Помощ". Но аз ще ви посъветвам как да го направите без да губите времето си. Ще ви дам структурата му. По подразбиране в Blogger има вграден файл robots.txt., който е в следния вид:

User-agent: Mediapartners-Google
Disallow:

User-agent: *

Disallow: /search
Allow: /

Търсещите роботи индексират сайтовете и блоговете по принципа "всичко, което не е забранено е позволено". Поради което има два принципа на записване:

➤Забраняване на всичко в сайта или блога, като разрешаване само за избрани страници;

➤Забраняване на избрани директории;

Кое от двете ще избере всеки от вас решава сам за себе си.

Можете да посочите на всяка търсачка кои ваши настройки да индексира чрез "User-Agent:". Например за търсачката Yandex - "User-Agent: Yandex", за Mail.ru - "User-Agent: Mail.Ru", за  Bing - "User-Agent: Bing ",   за търсачката Yahoo - "User-Agent: Yahoo "  и така нататък.

А ето версията на файла robots.txt. , която се използва в този блог:

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Disallow: /*archive

Allow: /

User-agent: Yandex
Disallow: /search
Disallow: /*archive
Allow: /

User-agent: Mail.Ru
Disallow: /search
Disallow: /*archive
Allow: /

Sitemap: http://www.blogzablogove.com/feeds/posts/default?orderby=updated

Може би на някой ще му хареса и ще му бъде по-удобен. Сега можете да персонализирате необходимото индексиране на вашия блог по всяко време, без да имате никакви затруднения.
Пожелавам успех, ползотворна работа и ако има въпроси, знаете къде на пишете.
Доскоро!

Здраве за всички вас! Не забравяйте да правите добро на други хора!

Ще съм благодарна да оцените моя труд и кликнете върху звездичките по-долу. Или гласувайте за блога на: