<MyRusakov.ru />

Программирование на Java с Нуля до Гуру

Программирование на Java с Нуля до Гуру

Данный курс научит Вас программировать на одном из самых прибыльных языков программирования в мире - Java. Курс состоит из 9-ти разделов, в которых с нуля объясняется и показывается процесс написания программ на Java.

В курсе Вы получите всю необходимую теорию, а также увидите множество практических примеров, в том числе, и из моей личной практики.

Просмотрев данный курс и выполнив упражнения из него, Вы сможете создавать программы любой сложности на языке Java.

Подробнее
Подписка

Подписавшись по E-mail, Вы будете получать уведомления о новых статьях.

Подписка Подписаться

Добавляйтесь ко мне в друзья ВКонтакте! Отзывы о сайте и обо мне оставляйте в моей группе.

Мой аккаунт Мой аккаунт Моя группа
Опрос

Каким движком Вы предпочитаете пользоваться?

Форум сайта MyRusakov.ru

robots.txt
06.07.2013 19:03:52 robots.txt Сообщение #1
Дмитрий184

Дмитрий184

Мастер

Мастер

Дата регистрации:
29.06.2012 08:48:56

Сообщений: 225

Здравствуйте, Михаил!
В файле robots.txt есть запрет на индексацию страницы admin.html

user-agent: *
disallow: /admin

И обнаружилась такая вещь. Поисковик Гугл в поиске обнаруживает страницу www.site.ru/admin.html И пишет так - Описание веб-страницы недоступно из-за ограничений в файле robots.txt.
А можно сделать так, что URL страницы не обнаруживалось в поисковике? Или URL нельзя запретить для поисковика?
Профиль Ответить
07.07.2013 08:57:33 robots.txt Сообщение #2
Admin

Admin

Администратор

Администратор

Дата регистрации:
27.05.2010 21:23:42

Сообщений: 3063

Нельзя. По-хорошему, он и так не должен был отображаться, но поисковые системы на robots.txt внимания обращают почему-то слабо.
Профиль Ответить
07.07.2013 19:52:45 robots.txt Сообщение #3
Дмитрий184

Дмитрий184

Мастер

Мастер

Дата регистрации:
29.06.2012 08:48:56

Сообщений: 225

Спасибо!
Профиль Ответить