Подпишитесь на мой канал на YouTube, где я регулярно публикую новые видео.

Добавляйтесь ко мне в друзья ВКонтакте! Отзывы о сайте и обо мне оставляйте в моей группе.

Мой аккаунт Моя группа

Какая тема Вас интересует больше?

Создание нейросетей на Python для начинающих

Пройдя курс:

- Вы установите нужное ПО

- Вы освоите терминологию

- Вы научитесь создавать нейросети

Также Вы получите множество упражнений и поддержку!

Чтобы получить Видеокурс,
заполните форму

Другие курсы

11 шагов к созданию своей Web-студии

После семинара:

- Вы узнаете главное отличие богатых от бедных.

- Вы увидите разоблачения множества мифов об успешности и о бизнесе.

- Вы получите свой личный финансовый план прямо на семинаре.

- Мы разберём 11 шагов к созданию своей успешной Web-студии.

- Я расскажу о своих личных историях: об успешных и неуспешных бизнесах. Это мой многолетний опыт, которым я поделюсь с Вами.

Записаться

Другие курсы

Тот, который передвигает горы, сначала убирает маленькие камешки.

Конфуций

Форум сайта MyRusakov.ru

06.07.2013 19:03:52 robots.txt Сообщение #1

Дмитрий184

Мастер

Дата регистрации:
29.06.2012 08:48:56

Сообщений: 225

Здравствуйте, Михаил!
В файле robots.txt есть запрет на индексацию страницы admin.html

user-agent: *
disallow: /admin

И обнаружилась такая вещь. Поисковик Гугл в поиске обнаруживает страницу www.site.ru/admin.html И пишет так - Описание веб-страницы недоступно из-за ограничений в файле robots.txt.
А можно сделать так, что URL страницы не обнаруживалось в поисковике? Или URL нельзя запретить для поисковика?

Профиль

07.07.2013 08:57:33 robots.txt Сообщение #2