<MyRusakov.ru />

Создание крупного проекта на Java с нуля

Создание крупного проекта на Java с нуля

Данный курс научит Вас создавать крупные проекты на Java грамотно и быстро. В курсе Вы увидите создание большой и сложной программы на Java абсолютно с нуля.

В начале курса у нас будет только идея, а в конце готовый продукт, который можно использовать в практических целях.

В рамках упражнений курса Вы параллельно со мной будете создавать свою большую программу на Java, что даст Вам необходимую практику, после которой для Вас уже не будет разницы, какого размера создавать программы.

Подробнее
Подписка

Подписавшись по E-mail, Вы будете получать уведомления о новых статьях.

Подписка Подписаться

Добавляйтесь ко мне в друзья ВКонтакте! Отзывы о сайте и обо мне оставляйте в моей группе.

Мой аккаунт Мой аккаунт Моя группа
Опрос

Каким движком Вы предпочитаете пользоваться?

Форум сайта MyRusakov.ru

Настройка robots.txt
24.12.2012 19:04:47 Настройка robots.txt Сообщение #1
RussianPro

RussianPro

Эксперт

Эксперт

Дата регистрации:
14.07.2011 01:32:38

Сообщений: 114

Привязал сайт к Яндексу,а он мне пишет, что в robots.txt запрещена индексация главной страницы сайта. Содержание файла такое:

User-agent: *
Allow: /index.php
Allow: /reviews.php
Allow: /sitemap.xml
Disallow: /
Crawl-delay: 1


В чём может быть ошибка?
Профиль Ответить
24.12.2012 20:59:54 Настройка robots.txt Сообщение #2
Admin

Admin

Администратор

Администратор

Дата регистрации:
27.05.2010 21:23:42

Сообщений: 3063

Disallow надо ставить вверху, чтобы приоритет был более низкий.
Профиль Ответить
25.12.2012 01:24:36 Настройка robots.txt Сообщение #3
RussianPro

RussianPro

Эксперт

Эксперт

Дата регистрации:
14.07.2011 01:32:38

Сообщений: 114

Т.е. те что вверху имеют более низкий приоритет чем те, что снизу? Я почему-то думал наоборот.
Профиль Ответить
22.01.2013 00:24:07 Настройка robots.txt Сообщение #4
kvorubin

kvorubin

Новичок

Новичок

Дата регистрации:
22.01.2013 00:22:21

Сообщений: 8

Disallow: / - запрещает смотреть все страницы на сколько я понял попробовав однажды прописать.
Профиль Ответить
23.01.2013 18:02:41 Настройка robots.txt Сообщение #5
RussianPro

RussianPro

Эксперт

Эксперт

Дата регистрации:
14.07.2011 01:32:38

Сообщений: 114

Яндекс по прежнему не индексирует главную страницу, хотя robots.txt я переписал.
User-agent: *
Disallow: /
Allow: /dostavka007.ru
Allow: /index.php
Allow: /reviews.php
Allow: /sitemap.xml
Crawl-delay: 1
Профиль Ответить
24.01.2013 19:19:59 Настройка robots.txt Сообщение #6
kvorubin

kvorubin

Новичок

Новичок

Дата регистрации:
22.01.2013 00:22:21

Сообщений: 8

Disallow: / попробуйте убрать, я вам писал уже выше

И ещё убедиться, что яндекс видит ваш сайт в виде главного зеркала

вот ссылка от яндекса на информацию http://help.yandex.ru/webmaster/?id=996567


вот информация от туда: (даже не на английском)

User-agent: Yandex
Disallow: / # блокирует доступ ко всему сайту

User-agent: Yandex
Disallow: /cgi-bin # блокирует доступ к страницам
#начинающимся с '/cgi-bin'



А вот в это я не верю (инфо от яндекса)

User-agent: Yandex
Disallow: /
Allow: /catalog
# разрешает скачивать только страницы,
# начинающиеся с '/catalog'


Яндекс машина не стабильная, захотел прочитал и проиндексировал, захотел не прочитал, думаю как взгрустнётся так и сделает.


Поправлю, !скачивать но не читать их )))
Профиль Ответить
29.06.2013 13:44:45 Настройка robots.txt Сообщение #7
midi63

midi63

Продвинутый

Продвинутый

Дата регистрации:
11.05.2013 14:57:31

Сообщений: 77

скажите эта запись имеет место быть?:
User-agent: *
Disallow: /img/
Disallow: /js/
Disallow: /css/
Disallow: /скрытая страница.php/

чет только главная страница индексируется.. можно ли приятать так картинки и все остальное?
Профиль Ответить
06.07.2013 19:23:52 Настройка robots.txt Сообщение #8
Дмитрий184

Дмитрий184

Мастер

Мастер

Дата регистрации:
29.06.2012 08:48:56

Сообщений: 225

Думаю, вполне нормальная запись - картинки можно так прятать. А если яндекс проиндексировал только главную страницу, то причина этого может быть, что поисковик не обязан индексировать весь сайт. Он может проиндексировать одну страницу и все. А может вообще ничего не проиндексировать. Или проиндексирует, но через долгое время.
Профиль Ответить