Въпрос за robots.txt - Форум
Понеделник, 2017-06-26, 11:53 AM
Главна Регистрация ЧЗВ (FAQ) Вход
Добе дошли, Гост · RSS
[ Ново съобщение · Членове · Правила на форума · Търси · RSS ]
Страница 1 от 11
Форум » УПРАВЛЕНИЕ И НАСТРОЙКИ » Общи въпроси » Въпрос за robots.txt
Въпрос за robots.txt
radiozoДата: Събота, 2013-03-23, 3:40 PM | Message # 1
Лейтенант
Група: Потребители
Съобщения: 52
Награди: 0
Репутация: 0
Статус: Offline
Гледам отчета от обхождането на робота на сайта ми и ми пише че няма достъп до директория: /search и страниците в нея. А имам много тагове. Пише че достъпа на робота до тази директория е отказан в файла robots.txt

Искам да му позволя да индексира всичко! Качих файл robots.txt :

User-agent: *
Allow: /
Disallow: /files/
Disallow: /panel/
Disallow: /admin/

User-agent: Google
Disallow:

Прочетох ЧЗВ че файла robots.txt е деактивиран заради злоупотреби. Въпроса ми е: Файла който съм качил ще работи ли или е безсмислен? и така както съм го написал ще даде ли право на въпросния бот да сканира всичко на сайта?


Безплатна реклама | Каталог Фейсбук страници
 
yetiДата: Събота, 2013-03-23, 7:00 PM | Message # 2
Полковник
Група: Потребители
Съобщения: 154
Награди: 1
Репутация: 2
Статус: Offline
Отиваш на http://линка на сайта ти/robots.txt и ако се покаже това което ти си качил значи всичко е наред.

Гарвана - Метъл магазин
Безплатен каталога за OVO.BG сайтове

Не цъкай
 
Форум » УПРАВЛЕНИЕ И НАСТРОЙКИ » Общи въпроси » Въпрос за robots.txt
Страница 1 от 11
Търси:

Направете безплатен уеб сайт с oVo