Файл sitemap и robots на Тильде

Конструктор сайтов Тильда генерирует sitemap xml и robots txt автоматически. Они помогают роботу поисковой системы обойти и проиндексировать сайт. В итоге страницы ресурса быстрее появятся в выдаче. Поэтому необходимо разобраться с принципами создания, оптимизации и настройки этих файлов.

О том, что такое Sitemap Tilda

Sitemap представляет собой ничто иное, как карту сайта. В файле размещаются ссылки на страницы интернет-проекта. Его цель — своевременно передавать поисковым системам структуру ресурса. Tilda поддерживает два типа сайтмап — в форматах xml и html:

1. Sitemap.xml — создается автоматически. Пользователь его не может добавлять или редактировать. Он не только содержит ссылки, но и транслирует поисковикам дополнительную информацию: дату последнего обновления, периодичность изменения страницы, приоритетность ссылок относительно других URL. Файл поддерживает размещение до 50 тыс. ссылок.
2. Sitemap.html — простая страница формата html, которую можно создать самостоятельно. В ней размещаются ссылки на все страницы сайта. Она необходима для передачи ссылочного веса от одной веб-страницы другой. Ссылка на Sitemap.html указывается в футоре ресурса. По рекомендациям поисковика «Яндекс» лучше размещать в sitemap.html не более 3 тыс. ссылок.

Бывает, что «Яндекс» выдает пользователю предупреждение о том, что сейчас нет используемых роботом файлов sitemap. Если появляется подобная ошибка, скорее всего вы не добавили новые страницы, и поисковик не может их проиндексировать.

Что такое robots.txt в Tilda и его особенности

Robots.txt представляет собой текстовый файл, в котором прописаны параметры индексирования сайта поисковыми системами. Он обеспечивает видимость ресурса и его выдачу при создании поискового запроса. С его помощью пользователь может выполнить настройку, например, запретить индексацию определенных страниц. Для этого используется директива Disallow. Параметр Allow, наоборот, разрешает индексирование отдельных страниц.

Файл размещается в корневом каталоге и создается автоматически. CMS Tilda не позволяет вносить какие-либо изменения в robots.txt. Нельзя настроить директивы user-agent, Disallow, Sitemap, Clean param, Allow, Crawl-Delay. Если нужно скрыть страницу из поиска, необходимо редактировать именно настройки веб-страницы, и Tilda автоматически внесет все нужные изменения в robots.txt.

Пользователю остается отправить файл в поисковые системы с помощью Yandex Webmaster и Google Search Console. Для этого нужно зарегистрироваться в данных сервисах и подтвердить права на домен. Консоль «Тильды» допускает сделать привязку этих сервисов.

Как просматривать robots.txt

Чтобы посмотреть файл, необходимо к основному URL ресурса добавить robots.txt. В адресной строке браузера URL должен иметь следующий вид: https://www.site.my/robots.txt. Откроется страница, где будут указаны параметры индексации для сайта. Файл robots.txt является публичным и открыт для просмотра на любом ресурсе.

Чтобы задать ограничения на индексацию страницы нужно:

1. Зайти в «Настройки» и перейти в раздел «SEO».
2. Выбрать вкладку «Отображение в поисковой выдаче», кликнуть по пункту «Задать специальные значения».
3. Найти и отметить чекбокс «Запретить поисковикам индексировать страницу».

Чтобы изменения вступили в силу, нужно закрыть страницу редактирования настроек. Новые данные будут автоматически внесены в файл robots.txt. Дополнительных манипуляций проводить не надо.

«Тильда» по умолчанию убирает из индексации неканонические страницы (дубли). При создании проекта, ему присваивается собственный URL xxxxx90.tilda.ws. Если пользователь привяжет к ресурсу собственное доменное имя, проект будет доступен сразу по обоим адресам, что негативно влияет на индексирование. В этой ситуации «Тильда» генерирует тег rel=»canonical» со ссылкой на каноническую страницу, которая является основной и подлежит индексации.

Как создать сайтмап на «Тильде»

Чтобы создать Sitemap на Tilda, необходимо придерживаться следующего алгоритма действий:

1. Сгенерировать новую пустую страницу.
2. Через панель управления выбрать «Заголовок», ввести «Карта сайта».
3. В меню «Настройки» установить тег заголовка H1.
4. Во вкладке «Все блоки» выбрать «Список страниц».
5. Найти блок с наименованием «Оглавление IX06».
6. Нажать кнопку «Контент» и отметить чекбоксы с доступными ссылками.
7. Сохранить изменения.
8. Открыть меню «Настройки», расположенное вверху редактора.
9. В пунктах «Заголовок» и «Описание» прописать «Карта сайта html».
10. В пункте «Адрес» указать sitemaphtml (без точек, пробелов и других знаков).
11. Сохранить изменения, опубликовать карту.

Он удобен тем, что можно добавлять ссылки в один клик и редактировать по своему усмотрению. Рекомендуем размещать карту сайта в сквозном блоке (имеющие одинаковый вид и структуру сразу на нескольких страницах). Хорошо для этого подходит хедер (шапка или верхняя область сайта) и футер (подвал или нижняя часть ресурса). Фактор правильности размещения сайтмап влияет на индексацию в поисковой выдаче — у робота будут в доступе абсолютно все страницы.

Главные особенности SEO-оптимизации сайта, созданного в «Тильде»

Чтобы вывести сайт в ТОП поисковой выдачи необходимо провести SEO-оптимизацию ресурса. «Тильда» предлагает пользователям быстрый аудит с помощью встроенного функционала — «SEO-рекомендации». Данный элемент представляет собой чек-лист, по которому можно посмотреть, какие ссылки индексируются или, наоборот, закрыты для поискового робота. Дополнительно через него можно посмотреть наличие или отсутствие тегов, тайтла, дискрипшена и другие ошибки. Чтобы использовать этот инструмент, необходимо:

1. Открыть вкладку «Мои сайты».
2. В правом углу карточки ресурса нажать на три вертикальные точки.
3. Выбрать в контекстном меню раздел SEO.
4. В меню кликнуть по вкладке «SEO-рекомендации».

Отобразится таблица, где появятся рекомендации, требующие участия пользователя.

Что еще нужно сделать для оптимизации ресурса на «Тильде»:

1. Добавить ресурс в поисковик через сервисы «Вебмастер» и Google Search Console.
2. Подключить аналитические системы для мониторинга поведенческого фактора «Яндекс Метрика» и Google Analytics.
3. Подключить SSL-сертификат для безопасного соединения.
4. Создать страницу с кодом 404 при переходе на несуществующую страницу (один из поведенческих факторов, который позволяет задержать пользователя на ресурсе). На ней рекомендуется размещать кнопку «На главную».

Интерфейс Тильды подходит для пользователей, которые не имеют больших навыков в создании интернет-проектов и SEO, поэтому необходимый функционал для этого доступен по умолчанию.

Как установить запрет на индексацию сайта

Запрет рекомендуется устанавливать перед тем, как создавать ресурс. Порядок действий:

1. Зайти в созданные сайты.
2. Нажать на три вертикальные точки в карточке.
3. В главном меню выбрать вкладку SEO.
4. Прокрутить перечень вниз до пункта «Запрет индексации».
5. Отметить чекбокс «Запретить индексировать этот сайт».

Ограничение можно установить через вставку HTML-кода:

1. В меню «Настройки сайта» выбрать раздел «Еще».
2. Найти в доступном перечне параметр «HTML-код для вставки внутрь Head».
3. Щелкнуть по ссылке «Редактировать код».
4. В поле редактирования вставить код <meta name=»robots» content=»noindex, nofollow»>.
5. Нажать «Сохранить».

Рекомендация по запрету на индексацию применима на этапе разработки, так как позволяет исключить из поисковой выдачи технически неготовый ресурс, где еще отсутствуют мета-данные, аналитика, не подключены сертификаты безопасного соединения и не настроено отображение страниц для разных устройств.

Что делать, если в robots.txt в «Тильде» сайт закрыт для индексирования

Подобная ошибка появляется, если установлены ограничения на индексирование ресурса в настройках. Тильда robots txt корректирует самостоятельно, как только пользователь применит новые параметры. Чтобы устранить сбой, нужно:

1. Перейти в «Настройки» и выбрать раздел SEO.
2. В перечне найти параметр «Запрет индексации».
3. Снять отметку в чекбоксе «Запретить поисковикам индексировать этот сайт».
4. Вверху нажать «Сохранить изменения».

Иногда ошибка появляется, если были отредактированы параметры в меню «Ограничить доступ». Например, установлен логин и пароль для доступа к опубликованным страницам. Также ресурс может быть закрыт от индексирования, если просмотр разрешен только с определенных IP-адресов. Нужно зайти в «Настройки сайта» и выбрать вкладку «Ограничить доступ». Необходимо убрать логин и пароль, а также удалить IP-адреса. После этого ошибка должна исчезнуть.

Если создавался личный кабинет, страницы, размещенные в профиле, автоматически исключаются из индексации и к ним нельзя привязать аналитические инструменты. Это связано с правилами безопасности. Пользовательские данные должны быть защищены.

Избавляемся от ошибок sitemap-feeds.xml и sitemap-store.xml на «Тильде»

Ошибки появляются, если подключены «Потоки» и «Товары». Первая функция появилась недавно. Это панель управления, где можно создавать и редактировать посты для блога. Как раз все дело в модуле «Потоки». Из-за него появляется ошибка sitemap-feeds.xml, так как конструктор автоматически создает сайтмап и вносит изменения в robots.txt. Если посмотреть «роботс», то там обнаружится нерабочий sitemap-feeds.xml. Если заглянем в «Потоки» и кликнем по названию поста, откроется таблица с рандомными файлами. Они и являются причиной сбоя. Чтобы решить проблему — удаляем их.

Эти рандомные файлы, которые создает конструктор, появятся только один раз при первом использовании плагина «Потоки». Когда будете делать добавление новых постов, подобного уже происходить не будет. Также допускается полностью взять и деактивировать модуль, если он не нужен: «Настройки» → «Еще» → «Подключаемые модули» → «Удалить потоки и отключить модуль».

Ошибка sitemap-store.xml появляется при первом использовании плагина «Товары». Если зайти в него впервые, там будут находится рандомные файлы, созданные конструктором. Для устранения проблемы нужно удалить элементы. При добавлении новых товаров ошибка уже не появится.

Как правильно добавить новый sitemap из «Тильда» в «Вебмастер»

После создания файла sitemap.html, его нужно внести в Yandex Webmaster. Это поможет поисковому роботу своевременно узнавать о новых страницах и индексировать их. Ссылка быстрее появится в поиске. Добавление файла производится согласно следующему алгоритму:

1. В «Яндекс.Вебмастер» выбираем необходимый ресурс на «Тильде».
2. Открываем в боковом меню вкладку «Индексирование».
3. В подменю нужно перейти в раздел «Переобход страниц».
4. Внизу кликаем по кнопке «Добавить сайт».
5. В пустое поле вставить ссылку на карту сайта.
6. Щелкаем по кнопке «Добавить».

Вам удалось зарегистрировать сайтмап. Поисковой робот обойдет страницу и после этого появится статус задачи. Полный обход будет зависеть от размера сайтмапа. В среднем срок индексирования составляет 3 дня. В разделе «Отправленные страницы» можно кликнуть по кнопке «Отслеживать». Откроется панель мониторинга, где отображаются проиндексированные и рекомендованные к выдаче страницы, последние изменения, проверенные мета-данные, дата переобхода, статус ссылки. В «Яндекс.Вебмастере» установлен лимит — можно добавить только 20 страниц в сутки.

Почему сайт на «Тильде не виден» для поисковиков

Если вы зарегистрировали сайт в поисковых системах «Яндекс» и «Гугл», провели SEO-оптимизацию, но ресурс не отображается при поиске, это не означает, что вы где-то или что-то сделали не так. Продвижение — сложная вещь. Без базовых знаний добиться результата практически невозможно или он будет минимальным. «Тильда», хоть и имеет функционал, который поможет пользователю оптимизировать сайт, не представляет собой мифическое средство, способное решить все проблемы. Это добротный инструмент, но не более. При нужных знаниях (не только в CEO) можно создавать хорошие сайты на «Тильде» с неплохой посещаемостью.

Не малозначимым будет поведенческий фактор, который позволит определить полезность, качество самого ресурса, отдельных страниц. Требуется работать с семантикой, так как это фундамент, позволяющий узнать тематику и охарактеризовать деятельность. Семантика строится на ключевых запросах, которые помогут пользователю попасть на нужный ресурс и искать ответы на вопросы.