Продвижение: добавление сайта в поисковики, robots.txt

Грамотная и своевременная раскрутка - это очень хорошо и правильно. И ей обязательно надо заниматься. Но при этом следует четко понимать в какой именно момент её начинать и с чего.
Не буду попусту заниматься морализаторством и надеюсь у вас после вводной статьи в голове и нет таких мыслей, как и желания спустить деньги, время и усилия на раскрутку не  вовремя.

Начинать раскрутку всегда стоит с анализа своего сайта и аудитории. Не всегда хорошая раскрутка - это оккупация поисковой выдачи. SEO  - это всего лишь один из методов продвижения в интернете.

Самое простое и первое, с чего стоит начать в рамках SEO - это добавить сайт в поисковые машины для индексации. Это вовсе не значит, что завтра его проиндексируют, а послезавтра он появится в выдаче на первых позициях. Но сообщить им о сайте уже можно - индексация процесс не самый быстрый, а достижение топовых позиций в серпе (SERP - "search engine results page", страница поисковой выдачи) еще длительнее.
Поисковики обычно узнают о новинках в сети двумя способами - либо индексируя какой-то сайт, находят на нем ссылку на ваш  ресурс и идут проверять, чего ж там такого появилось, либо вебмастер сам, при помощи специальных сервисов сигнализирует, что к нему надо зайти, проиндексировать.
Самый частый вопрос, касающийся раскрутки uCoz-сайтов, это карантин. Карантин - это запрет на индексацию сайта поисковыми ботами. В системе он составляет 30 дней с момента создания сайтов. Причин для его существования несколько: первая, это, то что с введением карантина на  Юкозе перестали создавать в огромных количествах дорвеи - бессмысленные сайты направленные исключительно на SEO-цели. И вторая - это защита от преждевременной индексации пустого сайта: попав на пустой сайт, поисковик индексировал страницы, практически без контента и второй раз заходил на сайт очень-очень не скоро.

Для грамотного общения с поисковиками у каждого вашего сайта существует специальный файл robots.txt. Найти и посмотреть его можно по адресу:

 http://вашсайт.ucoz.ru/robots.txt

В нем описываются правила для поисковых ботов (боты - это инструмент поисковой машины, при помощи которых она собирает информацию о страницах в сети). Подробно о директивах можно прочитать вот тут. Если кратко, то в нем описано какие страницы можно заносить в индекс (для последующей выдачи в результате поисковых запросов), а какие нельзя. "Почему это нельзя?!" -  Можете возмутиться вы,  - "Пусть будет весь мой сайт!" - И окажетесь не правы. На сайте присутствуют служебные страницы, например, такие как вход-выход, регистрация пользователей  и если поисковик будет их запоминать, то может пропустить что-то ценное в свой приход. (Так как заходя на сайт поисковый паук может "уволочь" с собой в индекс только ограниченное кол-во страниц, а не весь сайт).

Robots по умолчанию разработан таким образом, что поисковикам скармливаются только страницы с осмысленным содержимым. И редактировать его не рекомендуется, особенно, если вы не особо понимаете, что делаете.

Для нового сайта robots.txt выглядит вот так:

User-agent: *
Disallow: /



По истечению карантина файл автоматически обновляется и можно начинать любые меры по раскрутке.
Выглядит он вот так (на примере robost.txt для этого блога, светло серым дана расшифровка каждой строчки):

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Sitemap: http://blog.ucoz.ru/sitemap.xml
Sitemap: http://blog.ucoz.ru/sitemap-forum.xml
Sitemap: http://blog.ucoz.ru/sitemap-shop.xml
Всем поисковым ботам
не индесировать страницу обработки ошибок страниц
не индексировать статистику
не индексировать служебную страницу
не индексировать служебную страницу
не индексировать служебную страницу
не индексировать служебную страницу
не индексировать каталог аватаров
не индексировать профиль пользователя
не индексировать страницу "Доступ запрещен"
не индексировать админ-панель
не индексировать страницу входа в админ-панель
не индексировать служебную страницу
не индексировать список информеров
не индексировать миничат
не индексировать страницу в результатами поиска по сайту

адрес карты сайта
адрес отдельной карты сайта для форума
адрес отдельной карты сайта для магазина


Прикрепленный домен не снимает карантина. Если вы уверены, что ваш сайт полностью готов, а прошло только, к примеру, 17 дней после создания - вы можете обратиться в службу поддержки - и если это действительно так, то карантин вам снимут. При оплате услуги, дороже $2 - robots.txt становится доступным для редактирования.

А теперь немного конкретных ссылок:

Для того чтобы добавить сайт в базу Яндекса (по сути, позвать его ботов исследовать ваш сайт) можно пойти по 2-м путям. Первый - простой. Ввести свой URL на странице:




Второй посложнее, но рекомендую вам именно его. Это зарегистрироваться в сервисе  Яндекс.Вебмастер и уже через него добавить сайт на индексацию.
В этом случае вы будете видеть статистику по страницам в индексе и указание на проблемы, если они вдруг возникнут. Так же этот сервис предоставит вам полную статистику (после нехитрой процедуры подтверждения прав на сайт) о точках входа-выхода, позициям в серче, поисковым словам, по которым к вам заходят и еще массу полезных сведений:



Аналогичные сервисы есть и у Google.
Для добавления своего сайта, воспользуйтесь вот этой страницей.




Так же полезно изучить инструментарий для вебмастеров, предоставляемый  Google.

На этом самую первую статью о самых частых вопросах про поисковики предлагаю считать законченной, если что-то осталось непонятным - задавайте вопросы в комментариях.
В следующей статье будет рассказано про sitemap, про добавление частей сайта (блог, форум) в поиск по блогам и про правильную верстку для оптимизации для поисковых машин.
76 комментариев
1 2 »
1 Написал DPolyakov 21 Сентябрь 2010, 23:38
так же в самый конец файла можно добавить параметр host, который укажет роботу-зеркальщику основной домен сайта.

Например, если вы продвигаете ваш сайт без добавления www, то целесообразно добавить следующую строчку:

Code
host: sitename.ru

Естественно sitename.ru нужно заменить на имя своего сайта.
avatar
3 Написал ERUDIT 21 Сентябрь 2010, 23:46
Quote
Например, если вы продвигаете ваш сайт без добавления www, то целесообразно добавить следующую строчку

А чем отличается www.ucoz.ru от ucoz.ru для поисковиков?
Эт 2 разных сайта? wacko

avatar
11 Написал cherep777 22 Сентябрь 2010, 00:55
в общем случае, ДА, это два разных сайта. во всяком случае такое можно сделать.

дело в том что даже на ucoz.ru роботс.тхт сделан неправильно sad обидно, да ...

23 Написал Kron 22 Сентябрь 2010, 23:10
это 2 разных сайта не в общем случае, а лишь до момента склейки доменов поисковыми системами... если не хочется ждать, и кажется, что есть возможность повлиять на поисковые системы быстрее - никто не запрещает писать host в robots, равно как никто не запрещает использовать мета теги и чпу, наивно пологая, что это поможет раскрутить сайт быстрее, чем простое эволюционное, качественное развитие сайта (т.е., когда сил и знаний на качественный контент не хватает, а что-то сделать для сайта хочется, начинают якобы помогать сайту другими средствами (такая человеческая натура)).

Если вам печально и должно быть о чем-то, то лишь о собственной неграмотности и голословности...

29 Написал DPolyakov 23 Сентябрь 2010, 17:32
Kron, но согласись, что робот-зеркальщик может выбрать не тот адрес который нужно. Да и для домена с www и без www тИЦ может быть разным. Так что указывать host все же стоит.

Еще буду рад если появится вот эта возможность: http://forum.ucoz.ru/forum/41-20923-638870-16-1285148579

39 Написал Kron 30 Сентябрь 2010, 09:22
я не очень понимаю о каких роботах-зеркальщиках вы говорите... для рунета важны 2 поисковика, с которых сайт может получать трафик - Яндекс, Гугл. У обоих проблем со склеиванием доменов нет, будь то www поддомен или десяток доменов синонимов. И к моменту когда на сайте будет действительно что индексировать и показывать людям, склейка уже будет произведена...

Другое дело, если хочется г.сайт заполненный копипастами за пару дней раскрутить побыстрее, тогда "вебмастер", который этот "супер-сайт" умудрился еще и по разным хостам натыкать (либо внутри сайта, либо ссылками с других сайтов), тогда есть смысл прописать основной хост в robots.txt

avatar
40 Написал gr-prazdnik 04 Октябрь 2010, 00:16
Коммерческий Сайт после 6 месяцев жизни прямо к сезону продаж пролетел фанерой из за неправильно выбранного яндексом зеркала (с www). Не было ссылок с www, ни внешних ни внутренних. Это у яндекса такое веселое западло....
Почему бы юкосу просто не прописать host за пользователей? Делов то.
43 Написал Guru_G 05 Октябрь 2010, 19:16
И как же сайт "пролетел"? Ведь он все равно индексируется и на Юкозе страницы доступны как по www, так и без него. Сайт может "пролететь", если его перенести на другой двиг (напр., на WP), где www не поддерживается и движок редиректит на страницы без него. Проверено, в таком случае сайт попадает под фильтр. но и при этом можно указать нужный хост и после 2-3 апов выдачи сайт возвращается в индекс (при этом и страницы с www возвращаются, но со временем отпадают).

DPolyakov, как показывает практика, тИЦ равен как для сайта с www, так и без него.

avatar
44 Написал gr-prazdnik 05 Октябрь 2010, 22:59
А за... нужна его индексация по WWW? Полгода работы и нету топа... А 2-3 апа Вы имеете ввиду 3-4 месяца?
Если зайти на адрес с www то роботс в юкосе указывает карту сайта с www. А если без www, то и карта сайта без www. Понимаю, что сделано из лучших побуждений, но зачем так путать и без того бестолкового Яндекса?
Так что правило №1 - сделал сайт, прописал host. От администрации функции не дождемся. У них к hostu предубеждение.
45 Написал Guru_G 06 Октябрь 2010, 10:18
Честно, не понимаю, что в этом страшного. По запросу Яша выдаст все равно нужную страницу и то, есть в урле www или нет, особой роли не играет. А выпадание из топа - это дело регулярное, т.к. алгоритмы постоянно изменяются. Как сказал Крон, продвижение в ПС должно происходить постепенно по мере эволюционирования сайта, а не по четко отработанной схеме за пару месяцев.

З.Ы. Я говорил о 2-3 апдейтах выдачи, а это 1,5-2 недели всего...

avatar
46 Написал gr-prazdnik 08 Октябрь 2010, 11:54
З.Ы. 4 месяца длилась переклейка.
Ну Вы действительно уверенны, что выбор правильного зеркала не влияет на продвижение? biggrin
Тогда вопрос на засыпку: а внутренние ссылки у Вас с www или без?
avatar
53 Написал cherep777 14 Октябрь 2010, 06:41
Зеркальщик яндекса ходит раз в 2-4 месяца, не нужно его путать с серпом.
avatar
52 Написал cherep777 14 Октябрь 2010, 06:33
и к чему ваше хамство, в очередной раз, или думаете, что нахамив и подтерев чьит-то посты, проблема решится сама собой. Вот скин на анализ яндексом роботса с ucoz.ru
http://forex4ua.org/files/robots-ucoz-ru.gif
------------
а два разных сайта, потому что на www можно повесить совсем другой сайт, имея полный доступ к редактированию записей домена. B это уже будет не зеркало, а поддомен...
...
а клеится сайты могут годами (с любым контентом), и если в гуглу достаточно в вебмастере указать основной домен, то для яндекса нужен или hosts или редирект... и редирект на www вы сделали, неплохо-бы сделать и на без www, на выбор...
9 Написал admin3880 22 Сентябрь 2010, 00:37
А если домен такой моймалыш.su как писать в host: xn--80arhbbk8exa.su или host: моймалыш.su
avatar
10 Написал cherep777 22 Сентябрь 2010, 00:52
host: xn--80arhbbk8exa.su
avatar
2 Написал ERUDIT 21 Сентябрь 2010, 23:43
Спасибо! happy

Quote
При оплате услуги, дороже $2 - robots.txt становится доступным для редактирования.

А я и не знал... эт недавно ввели?

С нетерпением жду статьи про правильную верстку для оптимизации для поисковых машин. wink

avatar
4 Написал ironkiss 21 Сентябрь 2010, 23:56
У меня немного странный, как может для некоторых показаться, вопрос, почему в robots.txt стоит запрет на индексацию /search ?
5 Написал Meddy 22 Сентябрь 2010, 00:04
А какой на этой странице полезный контент?
avatar
6 Написал ironkiss 22 Сентябрь 2010, 00:16
например вот: http://ironkiss.ru/search/Кэти Перри/ — чем этот контент не полезен?
7 Написал Meddy 22 Сентябрь 2010, 00:20
Тем, что он же есть на сайте по другим адресам и так, это дубль по сути.
avatar
8 Написал ironkiss 22 Сентябрь 2010, 00:24
ясно, спасибо.
avatar
13 Написал gameflash 22 Сентябрь 2010, 12:49
Дубли насколько я знаю склеиваются и по сути это совсем не страшно. С другой стороны если разрешить теги к индексации с специальных кодов и в robots.txt разрешить поиск, то сайт может приобрести пару НЧ запросов. Я правильно все понял или где-то ошибся?
15 Написал hell 22 Сентябрь 2010, 15:03
Ошибаетесь. URL никак не влияет на ранжирование. По крайней мере в Яндексе.
16 Написал Meddy 22 Сентябрь 2010, 17:06
Честно говоря, я вас не поняла, откуда возьмутся эти HЧ и при чем тут search и некие специальные коды.
avatar
17 Написал gameflash 22 Сентябрь 2010, 18:37
Вот что я имел ввиду:
у меня есть различные категории к примеру "Земля", "Нептун", "Плутон".
А есть теги: "Солнце", "Воздух", "Синий", "4";
Теги в тексте материала не встречаются и поисковики ни как ни привяжут эти слова к сайту.
Так вот раньше сайт индексировался по категориям. Теперь поисковики видят ещё и теги, и люди смогут меня найти не только по названию категорий а и по тегам. Вот что я имел ввиду
18 Написал Meddy 22 Сентябрь 2010, 19:59
Какие именно теги вы имеете в виду? Title? Метатеги?
avatar
21 Написал gameflash 22 Сентябрь 2010, 22:11
$TAGS$
24 Написал Meddy 22 Сентябрь 2010, 23:21
Ясно, а мне казалось что подобные теги должны как-то пересекаться с содержимым статей - иначе какой смысл поисковикам привязывать их к тексту, где релевантность? Ведь вряд ли человек, вводя в поиковике "воздух" планирует прочитать что-то про "Плутон".
25 Написал Kron 22 Сентябрь 2010, 23:23
Первым делом задайте себе вопрос - "Какие результаты я получаю по запросам в поисковых системах?", после этого начните экспериментировать... Вы увидите, что по высокочастотным запросам, например "Программы" "Музыка" и т.п. (обобщениям), вы получите в выдаче ссылки на главные страницы сайтов, которые специализируются в этом направлении. А по запросам "скачать PhotoShop" или другому конкретному запросу, вы попадете на конечную страницу материала... Таким образом получается, что поисковые системы уже давно стали умнее тех, кто пытается свои сайтики раскручивать и выдают результаты так, чтобы пользователю было удобно жить и ориентироваться в информации.

Чем больше помогаешь поисковым системам, тем лучше они относятся к твоему сайту. Как же вы можете помочь поисковой системе? - не пытаться ее обмануть какими-то лишними страницами. Т.е. добавив материал - знайте, что поисковая система отдаст ссылку на этот материал, а не на категорию в которой он находится, не на раздел со списком материалов по определенному тегу, не на топ материалов и не на выдачу модуля search, а именно на конечный материал.

Не суйте палки в колеса поисковых систем и знайте, что юкоз уже сделал тот минимум, который нужен для нормальной оптимизации, дальше осталось только дело за качественным контентом, и поисковые системы будут любить ваш сайт.

avatar
27 Написал gameflash 23 Сентябрь 2010, 12:39
То что контент - самое главное думаю известный факт. Но зачем столь эмоционально описывать то, что можно объяснить в 2х словах. Я задал вопрос, который интересует не только меня, а в ответ получил обвинение в низкокачественном продукте, который я пытаюсь любыми способами раскрутить.
Я думаю эта серия блога под названием "Продвижение" создана для того - чтоб такие пользователи как я получали информацию, а если их что-то интересует задавали вопрос, и получали конкретный ответ. Если я задал вопрос, значит это действительно мне нужно. Это не вопрос из разряда: "А что будет если сделать этот эксперимент?". Возможно моя вина в том, что неправильно сформулировал свой вопрос, не упомянул о быстрых ссылках и о том, что создавать много категорий неудобно, и теги в этом могут помочь.
Уважайте пожалуйста своих пользователей. Спасибо.
28 Написал Meddy 23 Сентябрь 2010, 13:44
gameflash, не обижайтесь. Если кто-то излишне эмоционален - так это только от желания объяснить. happy
avatar
12 Написал Матвеев 22 Сентябрь 2010, 09:36
Яндекс в "Вебмастере" пишет, что мой сайт не проиндексирован, однако исправно находит его страницы и выдает их в поисковой выдаче. Как такое может быть?
14 Написал Kurt 22 Сентябрь 2010, 13:54
Пишет где, какой сайт?

В целом же, если на стороне яндекса есть такого рода несовпадения, есть смысл спрашивать у их поддержки. Они даже отвечают.
Но если подробнее рассказать здесь, может и мы чего скажем.

19 Написал webanet 22 Сентябрь 2010, 21:50
Quote
если разрешить теги к индексации с специальных кодов и в robots.txt разрешить поиск, то сайт может приобрести пару НЧ запросов.

самое частое заблуждение из всех. выдача поиска и теги являются ссылками на материал поискового вида http://ru.wikipedia.org/wiki/%D0%A1%D1%81%D1%8B%D0%BB%D0%BA%D0%B0
вот именно эти узоры *%D0*%A1*%D1%*81%D1*%8B%*D0%BB%*D0%BA%*D0*%B0 могут попасть в выдачу. так как робот как видит - так и прописывает. обратным преобразованием робот заниматься не будет.
и очень многие путают внутреннюю перелинковку и ключевые слова с тегами.
теги - это поиск материалов по частовтречающимся словам, но никак не ключевые слова.
хотелось бы увидеть статью про внутреннюю оптимизацию сайтов, так как она является одним из важнейших аспектов раскрутки
avatar
22 Написал gameflash 22 Сентябрь 2010, 22:17
Как вы объясните вот это
?
Поясню: первый результат на википедию хоть там ссылка именно такого вида %B1%B5...
И второе, теги могут быть на английском языки тогда они будут иметь вид /search/tags
Объясните пожалуйста, что вы имели ввиду
26 Написал archdenis 23 Сентябрь 2010, 00:23
Не плохо бы ссылку скрыть подальше от глаз, а то все комментарии поехали. dry
avatar
20 Написал Ариф 22 Сентябрь 2010, 22:09
Quote
Если вы уверены, что ваш сайт полностью готов, а прошло только, к примеру, 17 дней после создания - вы можете обратиться в службу поддержки - и если это действительно так, то карантин вам снимут

Здравствуйте! Снимите мне пжл карантин с www.muslimblog.ru

у меня прошло не 17 дней, но там написано только "к примеру". В техподдержку (нет, не хочу платную техподдержку, верю в возможность бесплатного счастья обсулживания по моему вопросу) не пишу так как на странице отправки сообщения в техподдержку (в аккаунте) написано вот что:

Quote
На бесплатной основе рассматриваться только запросы связанные с техническими неполадками в системе (баги, ошибки системы). Все остальные вопросы удаляются без ответа, а при повторном нарушении функция бесплатной поддержки отключается.
avatar
30 Написал Sirius0391 24 Сентябрь 2010, 13:24
"В течение ноября этого года Google планирует внести кардинальные изменения в четырех элементах поисковой системы и программы AdSense", - стало известно из неофициального источника THE GOOGLE RUMOR MILL. По утверждению данного источника, они будут направленны на подавление blackhat-SEO, накрутки PR и скликивания AdSense. Но обо всем по-порядку,:
Во-первых, Google PR (PageRank) будет аннулирован. Все данные о тулбарном PageRank будут сброшены и не будут восстанавливаться. Предположительно это будет сделано в середине ноября, с выпуском Google Toolbar версии 4.2, которая будет использовать отныне так называемый VR (visitor rating - рейтинг посетителей). Google VR будет использовать Digg-подобную систему с кнопочками голосования на панели Google Toolbar.
Во-вторых, при клике по объявлению AdSense будет всплывать формочка с предупреждением о том, что данная ссылка является оплаченной, и с вариантами «Перейти» и «Не ходить». И только при согласии серфера будет совершен переход по ссылке.
В-третьих, Google удалит все данные об обратных ссылках и сам оператор link, который помогал их мониторить. Его также не будет ни в Google Analytics, ни в Webmaster Tools.
И, в-четвертых, Google вводит новый оператор «dofollow». Теперь только те ссылки, которые имеют данный оператор, будут индексироваться и приниматься во внимание поисковым ботом.
37 Написал Kurt 25 Сентябрь 2010, 16:01
А теперь, давайте, приведем авторитетный (вероятно, им может быть только сама компания гугл) источник данной информации. Что бы с ней, с этой информацией, можно было как-то считаться, не как с не самым удачным юмором.
avatar
51 Написал cherep777 14 Октябрь 2010, 06:00
Баян [|||||] tongue
avatar
31 Написал JohnPaul 24 Сентябрь 2010, 14:58
Подскажите, пожалуйста, где вводить описание сайта для поисковиков.
Например, если искать мой сайт в yandex, то поисковик дает только ссылку на сайт без описания.http://yandex.ua/yandsearch?text=johnpaul+%D0%BC%D1%83%D0%B7%D1%8B%D0%BA%D0%B0&tld=ua&lr=143
А если еще поставить и регион "Украина" , то его вообще не находит...
Извините, если не по теме, если есть где почитать скиньте пожалуйста ссылку.
Спасибо.
avatar
32 Написал JohnPaul 24 Сентябрь 2010, 14:59
мой сайт www.johnpaul.at.ua и www.ru-johnpaul.at.ua
avatar
33 Написал Igor7778423 24 Сентябрь 2010, 18:00
Почему карантин 30 дней? Почему нельзя сделать его, например, неделю или две - зачем месяц?
35 Написал borschaga 25 Сентябрь 2010, 12:01
Заплати денег и все сразу снимется cool
36 Написал hell 25 Сентябрь 2010, 14:13
Затем, что если Ваш сайт проиндексируют поисковики на 2 день (а он будет естественно ПУСТОЙ), они в следующий раз могут не скоро вернуться к Вам.
34 Написал borschaga 25 Сентябрь 2010, 12:00
Отличная статья для новичка biggrin
38 Написал Ingvarr 27 Сентябрь 2010, 23:56
На самом деле сайт в поисковики добавлять не стоит, а лучше сделать так, чтобы они сами его нашли.
avatar
41 Написал Raphael 04 Октябрь 2010, 10:44
Quote
При оплате услуги, дороже $2 - robots.txt становится доступным для редактирования.

Каким образом он становится доступным? У меня оплачен пакет услуг "Базовый", сейчас вступит в силу пакет "Бизнес", но найти команду,чтобы открыть robots.txt для редактирования, не смог. В файловом менеджере его тоже не видно.
42 Написал Meddy 04 Октябрь 2010, 16:38
Вы можете сами создать файл с именем robost.txt и залить его в корень сайта.
Оптимальное содержимое может быть, как приведенное в примере для блога.
avatar
47 Написал nazimi33 09 Октябрь 2010, 17:04
А объясните пожалуйста, внутри файла robost.txt оставит пустым?
48 Написал Meddy 09 Октябрь 2010, 20:33
Не поняла вашего вопроса.
avatar
49 Написал nazimi33 10 Октябрь 2010, 12:13
Вы написали что, можете сами создать файл с именем robost.txt .Я создал файл с именем robost.txt и загрузил его в сайт через файловый менеджер. И меня интересует содержание файла, что нужно добавлять в этот файл? Сейчас она пустая
50 Написал Meddy 11 Октябрь 2010, 12:56
В статье приведен пример стандартного файла для наилучшей индексации, посмотрите - только адреса sitemaps свои поставтьте, конечно.
54 Написал human6757 05 Ноябрь 2010, 00:59
как добавить в сайт видео картинки фото игры и многое другое
avatar
55 Написал Zeroxa 16 Ноябрь 2010, 16:10
мой сайт существует где- то 5 дней а он полностью готов. когда снимут карантин и что это вообще такое и сколько он длится???
я заносил свой сайт в яндекс но он не проиндексирован пишет (Индексирование сайта запрещено в robots.txt ) Чсто делать???
56 Написал Scorpik427 16 Ноябрь 2010, 19:35
30 дней длится карантин. Можно ещё снять платно, купить любую услугу суммой от 2 баксов.
avatar
57 Написал Kost5841 16 Ноябрь 2010, 23:51
здравствуйте пользователи и администрация юкоз
у меня тут такая вот проблема:
Гугл перестал выдавать по запросам мой сайт в первых местах(да и не найти их)
как бы даже в таком запросе как neosky я был на 2 месте(так как это имя сайта) а сейчас ваше не найду
хотя проиндексированные страницы не исчезли
кто то тута говорил такую вещь: "В течение ноября этого года Google планирует внести кардинальные изменения в четырех элементах поисковой системы"
так возможно такое что они сбили всю статистику по ключевым словам?
или что это может быть?
пару дней такой прикол

а на счёт робота я так понял трогать его смысла нет(улучшения не получить не какого)
И кстати, а есть смысл, если робот.txt ещё создать в корневой папке сайта?
я вот заметил такую штучку по адресу: http://neosky.ru/robots.txt
там написано:
User-agent: Yandex
Disallow:
HOST: www.sky-soft.at.ua

User-agent: *
Disallow:

это значит что в яндексе главный домен www.sky-soft.at.ua ?
что порекомендуете сделать

58 Написал Kosttt 17 Ноябрь 2010, 23:26
всё норм
в гугле все слова вернулись на место
только вот что это было 2 дня
robots.txt исправил и как я понял если я там в конце указал HOST: www.мой сайт.ru
то теперь он будет главным по любому
но остаётся вопрос: если я создаю сейчас в корне сайта robots.txt
а до этого он был по адресу http://вашсайт.ucoz.ru/robots.txt
то как поисковик узнает о приоритете к новому robots.txt
59 Написал Meddy 22 Ноябрь 2010, 11:23
Не уверенна, что поняла ваш вопрос, но по все адресам открывается один и тот же robots.txt
avatar
60 Написал Nikitamaks 30 Ноябрь 2010, 16:10
Спасибо за полезную информацию.
1-20 21-32
Ваш комментарий