|
2012-04-23Дата: Понедельник, 23.04.2012, 19:26 | Сообщение # 1 |
Генерал-майор
Группа: Проверенные
Статус: Offline
|
Подскажите пожалуйста, как правельно создать Robots.txt и xml карту ?
Только если можно кратко, ато в сети много написано, и не понятно, что именно надо а что не надо, для простого сайта в виде скажем 3-х страниц ну и страницы фотоальбом
p.s. yandex выдал "Ваш сайт не был проиндексирован из-за запрета в файле robots.txt." хотя я его не содовал, и использовал стандартный шаблон юкоз
| | |
|
|
2012-04-23Дата: Понедельник, 23.04.2012, 19:47 | Сообщение # 2 |
Аццкий кодер
Группа: Администраторы
Статус: Unknown
|
igrok, Quote (igrok) Подскажите пожалуйста, как правельно создать Robots.txt и xml карту ?
robots.txt уже создан, содавать его в ручную не обязательно
Расположен по адресу: http://ваш_сайт.ru/robots.txt
...
Та же ситуация и с картой сайта в xml формате.
Она расположена по адресу:
http://ваш_сайт.ru/sitemap.xml
И для форума:
http://ваш_сайт.ru/sitemap-forum.xml
...
Написанное касается сайтов на юкоз.
...
Quote (igrok) p.s. yandex выдал "Ваш сайт не был проиндексирован из-за запрета в файле robots.txt." хотя я его не содовал, и использовал стандартный шаблон юкоз
При создании сайта вешается запрет на индесацию (для заполнения сайта контентом) на период 30 календарных дней.
По истечении срока запрет снимается автоматически, и сайт открывается дли индексирования.
Досрочно открыть сайт можно оплатив любую услугу.
Quote (Info uCoz) Для нового сайта существует карантин, во время которого никакая регулировка файла robots.txt невозможна. При хорошей посещаемости карантин продлится до двух недель. У малопосещаемых сайтов карантин 30 дней. При оплате какой-либо дополнительной услуги карантин заканчивается немедленно после оплаты.
...
| | |
|
|
2012-04-23Дата: Понедельник, 23.04.2012, 19:52 | Сообщение # 3 |
Генерал-майор
Группа: Проверенные
Статус: Offline
|
Тогда почему его не видно ???? не карты на robots.txt
| | |
|
|
2012-04-23Дата: Понедельник, 23.04.2012, 19:54 | Сообщение # 4 |
Аццкий кодер
Группа: Администраторы
Статус: Unknown
|
igrok, Quote (igrok) Тогда почему его не видно
Он скрыт )
...
Quote (igrok) не карты на robots.txt
А карты ещё нет, раз ваш сайт на карантине)
...
| | |
|
|
2012-04-25Дата: Среда, 25.04.2012, 20:13 | Сообщение # 5 |
Рядовой
Группа: Проверенные
Статус: Offline
|
Здравия всем и продвижения.
Поискал темку про поисковики да что то не нашёл. Данная вроде как более всего (или непосредственно) подходяща. Отсюда вопрос:
Есть сайт на uCoz http://soli.ucoz.ru - как видно бесплатный пока. Интернет обозрение, дайджест, альманах, назовите как хотите. Естественно бОльшая часть контента не уникальна. Вопрос вот в чём, уже пол года наблюдаю (а столько и существует сайт), что народ приходит по одним и тем - же поисковым запросам, хотя материалы разного плана выложены. И что примечательно, запросы все направлены на первый, примерно десяток статей, в порядке добавления. Хотя они просто откровенные копии, но тот же Яндекс в поиске с первых дней, по запросу выдаёт ссылки на них на одной странице, со ссылками на сайты доноры, пробитые и оптимизированные, с пузом и т.д. Вот я и думаю, это uCoz как то "продвигает" т.н. "первую десятку" материалов с моего сайта или наоборот, "закрывает" от поисковиков остальные? Поглядел robot_txt ничего такого не углядел. Оно конечно понятно, что хост бесплатный, но все одно интересно.
Сообщение отредактировал Solis - Среда, 25.04.2012, 20:16 | | |
|
|
2012-04-26Дата: Четверг, 26.04.2012, 03:45 | Сообщение # 6 |
Аццкий кодер
Группа: Администраторы
Статус: Unknown
|
Solis, Quote (Solis) И что примечательно, запросы все направлены на первый, примерно десяток статей, в порядке добавления. Хотя они просто откровенные копии, но тот же Яндекс
Ну, это смотря что за статьи,...
По любому, юКоз точно ничего не продвигает, просто так сложились обстоятельства и ваши откровенные копии оказались выше оригиналов.
...
| | |
|
|
2013-07-21Дата: Воскресенье, 21.07.2013, 21:35 | Сообщение # 7 |
Генерал-майор
Группа: Проверенные
Статус: Offline
|
Вопросик : Стоит ли закрывать в файле robots.txt такую вот строчку : Disallow: /search ? И что если не закрыть для роботов /search ?
| | |
|
|
2013-07-24Дата: Среда, 24.07.2013, 23:55 | Сообщение # 8 |
Лейтенант
Группа: Проверенные
Статус: Offline
|
что если не закрыть для роботов /search ?
Можете и остальные не закрывать. Только помните, что в этом случае робот соберёт весь срач у вас на сайте, который раствориться в аналах общемирового срача и вы вместе с сайтом потеряетесь.
Задача в закрытии индексации состоит в том, чтобы указать роботу, что индексировать, а что нет. Чтобы он выдавал в своём поиске те страницы, которые, как вы считаете, будут интересны людям, они придут к вам на сайт и он им чем то понравится, они занесут его к себе в базу и позже ещё раз придут. И т.д..
А представьте, он в поиске насобирает разные слова, приведёт на них людей, они посмотрят, а тема, куда они попали, совсем о другом, а слова те оказались случайными. Чел матюкнётся и забудет за вас, как о страшном сне.
Кроме этого, в файле роботсе рекомендуется закрыть и другие страницы. Рекомендую поизучать файлы с разных авторитетных сайтов вашего плана. Ну если это Юкоз, то с Юкоза.
Приведу простой пример. Юкоз создаёт страницы дубли (они с вопросиками такими /? после основного адреса идут). Никто не виноват, система такая, но не в этом дело. Проблема в дублях. Дубли кушают ваш сайт, вернее, ту страницу, которую дублируют. Они тоже есть в поиске и человек вместо правильной страницы попадает на страницу дубль. В этом случае забирая себе репутацию по индексу. А часто это главная страница так дублируется, теряя в весе. Плюс к этому поисковики плохо на дубли смотрят (в сообщ. 6 выше, как раз об этом)
Вот о чём подумайте. А создавать его проще простого.
Можете искать в Сети содержание роботс, а можете прямо с этого сайта начать просмотр:
http://likbezz.ru/robots.txt
http://politicon1.at.ua/robots.txt
Далее по аналогии (это о сравнительном просмотре говорю, а о создании чуть ниже скажу)
Расположен по адресу: http://ваш_сайт.ru/robots.txt
Он скрыт )
Правильней сказать, он не скрыт, его там нет, он подгружается системой на автомате когда надо.
Чтобы поставить свой вариант файла роботс, его нужно в блокноте создать, дать имя этому фалу: robots.txt
и загрузить через файловый менеджер на свой сайт в корневую директорию. Дальше он уже будет вам там виден и его можно будет даже в дальнейшем редактировать.
Проверить после загрузки сможете тут: http://webmaster.yandex.ua/robots.xml
Вводите адрес своего файла в верхнее поле.
Нажимаете на кнопку Загрузить. Его содержимое появляется в окне. Ниже есть кнопка Проверить.
Жмёте.
Под этой кнопкой появится текст: циферки и записи, например,
Код 1-14 User-agent: *
Disallow:
...
Host: likbezz.ru
16-17 Sitemap: http://likbezz.ru/sitemap.xml
Sitemap: http://likbezz.ru/sitemap-forum.xml
Если под этими записями не будет зелёных надписей, указываеющих на ошибку, то файл работает.
Если будет, правьте (сначала там, там все правки виртуальны, на вашем файле не отражаются, когда получите результат правильный, тогда в свой настоящий файл его перенесите и ещё раз проверьте).
Сообщение отредактировал Чур - Четверг, 25.07.2013, 00:06 | | |
|
