Что бот знает о сайте: источники и каталог

Бот отвечает по тому, что прочитал. Откуда он берёт знания, показано в кабинете бота в разделе «Источники». При подключении мы настраиваем источники сами, но их можно добавить, поменять или перечитать в любой момент.

Какие бывают источники

• Страницы сайта (по карте сайта) — для любого движка: 1С-Битрикс, Tilda, OpenCart, InSales, самописного сайта. Бот берёт адреса из sitemap.xml и читает основной текст страниц. Меню, подвал и боковые колонки он пропускает.
• WordPress (напрямую из него) — страницы и записи через REST API WordPress. Текст получается чище, а перечитывание дешевле, чем по карте сайта. Если сайт на WordPress, выбирайте этот источник.
• Каталог товаров (выгрузка YML) — тот же файл, что вы отдаёте Яндекс Маркету. С каталогом бот ищет товары по названию и характеристикам, знает цены и наличие, подбирает под бюджет.
• Статьи кабинета — то, чего на сайте нет. Бот узнаёт их сразу после публикации — подробнее о статьях.

Карта сайта и WordPress читают одни и те же страницы, поэтому одновременно может быть включён только один из двух. Иначе бот находил бы каждую страницу дважды.

Как подключить источник

1. Откройте в кабинете бота раздел «Источники».
2. Нажмите «Найти и подключить» — мы проверим сайт сами: есть ли карта сайта, WordPress и выгрузка товаров, и подключим то, что нашли.
3. Если автоматически ничего не нашлось, нажмите «Подключить вручную», выберите тип источника и впишите адрес: карты сайта (обычно /sitemap.xml или /sitemap_index.xml), REST WordPress (обычно https://ваш-сайт.ru/wp-json) или YML-выгрузки.

Первое чтение занимает от минуты до нескольких — зависит от того, сколько страниц на сайте. Итог появится в списке источников.

Справка или блог на поддомене — это отдельный источник: у каждого домена своя карта сайта.

Каталог товаров

Магазину каталог нужен обязательно. Без него бот знает товары только по страницам: цены и наличие могут отставать на несколько часов, а подбирать по характеристикам он не умеет.

Подключить каталог можно в трёх местах — результат одинаковый:

• в личном кабинете siteko, раздел «ИИ-консультант», блок «Каталог не подключён»;
• в кабинете бота на странице «Подключение» — кнопка «Подключить каталог»;
• в «Источниках» — источник «Каталог товаров (выгрузка YML)».

Ссылка на выгрузку должна быть на домене вашего сайта. Её даёт модуль выгрузки в Яндекс Маркет: в WooCommerce, Битриксе, OpenCart и InSales он свой. Каталог подключаем до 30 000 товаров. Не нашли ссылку — напишите на support@siteko.net, подключим сами.

Каталог входит в тарифы «Старт», «Магазин» и «Бизнес», на пробном периоде работает тоже. На тарифе без каталога подключённая выгрузка сохраняется, но бот её не использует — включится сама, когда смените тариф.

Как часто бот перечитывает сайт

В настройках источника (кнопка «Настроить») поле «Как часто перечитывать»: раз в час, раз в 6 часов, раз в сутки или раз в неделю. Страницы, которые не изменились, заново не скачиваются. Каталог разумно перечитывать так же часто, как его пересобирает ваш сайт, — обычно раз в час.

Поправили что-то срочное — нажмите «Синхронизировать» в карточке источника: бот узнает новое через минуту-другую. Статьи кабинета расписания не ждут.

Как исключить разделы и поправить чтение

В настройках источника по карте сайта есть дополнительные поля. Они нужны, только если бот отвечает не тем: берёт меню вместо текста или лезет в служебные разделы.

• Только эти разделы — читать только адреса, которые начинаются с указанного (например, /catalog/). Пусто — весь сайт.
• Кроме этих разделов — корзина, личный кабинет, архивы и всё, что боту ни к чему (например, /cart/). Запреты из robots.txt учитываются и без этого списка.
• Блок с текстом страницы — CSS-селектор основного содержимого: main, article, #content, .entry-content. Пусто — бот ищет сам.

У источника WordPress можно указать типы записей: по умолчанию бот читает страницы и записи блога, свой тип (например, services) вписывается так, как он называется в адресе REST.

• Не больше страниц за раз — потолок страниц за один проход, по умолчанию 500. Если на сайте больше нужных боту страниц, сузьте источник разделами или напишите нам.

Если источник не прочитался

В карточке источника есть отметка об ошибке и «История синхронизаций» — там видно, что пошло не так. Частые причины:

• «Сайт закрыт от роботов» — robots.txt запрещает обход. Разрешите обход или напишите нам — подскажем, что поправить;
• «На сайте нечего прочитать автоматически» — нет ни карты сайта, ни WordPress. Подключите источник вручную, если знаете адрес карты, или напишите нам;
• выгрузка YML недоступна или отдаёт ошибку — проверьте ссылку в браузере.

Удалить источник можно в его настройках. Бот забудет всё, что знал из него. Статьи кабинета это не затронет.

Частые вопросы

Бот отвечает по старой цене. Каталог перечитывается по расписанию источника. Нажмите «Синхронизировать» у каталога, а если сайт пересобирает выгрузку редко, — настройте её модуль на более частую сборку.

Можно скрыть от бота часть сайта? Да: впишите раздел в «Кроме этих разделов» в настройках источника, затем нажмите «Синхронизировать».

У сайта две языковые версии. Бот читает обе и отвечает по той, что на языке посетителя. Если английская версия на поддомене, её подключают отдельным источником.