Закрыть от индексации CRM систему, но оставить для индексации интернет магазин

Добрый день! Интернет магазин перенесли на основной домен trudovik.com.ua и открыли для индексации https://trudovik.com.ua/robots.txt
Но crm система на поддомене box.trudovik.com.ua/robots.txt тоже открыта для индексации
Как это можно исправить?

Ответы:


Круглов Евгений писал/а:
Добрый день! Интернет магазин перенесли на основной домен trudovik.com.ua и открыли для индексации https://trudovik.com.ua/robots.txt
Но crm система на поддомене box.trudovik.com.ua/robots.txt тоже открыта для индексации
Как это можно исправить?

под каждый хост положить отдельные robots.txt файлы в корень проекта

к примеру вот так:

robots_trudovik.com.ua.txt
robots_box.trudovik.com.ua.txt

в зависимости от хоста с которого вы обращаетесь система будет подтягивать тот или иной файл robots.txt и выдавать при обращении к /robots.txt
15.06.2021, 13:15

Создал два файла robots_trudovik.com.ua.txt и robots_box.trudovik.com.ua.txt по пути /var/www/boxtrudovikcomu/web1/web
Прописал правила для одного открыт к индексации, для другого закрыт. Но если зайти по адресам box.trudovik.com.ua/robots.txt и trudovik.com.ua/robots.txt отображается одинаковое правило закрытия от индексации.
15.06.2021, 13:51

не вижу этих файлов на сервере
17.06.2021, 08:05

Добрый день! Создал файлы по адресу /var/www/boxtrudovikcomu/web1/web
В обоих поставил открытие к индексации, так как нельзя один домен закрыть от индексации
17.06.2021, 10:03


Круглов Евгений писал/а:
Добрый день! Создал файлы по адресу /var/www/boxtrudovikcomu/web1/web
В обоих поставил открытие к индексации, так как нельзя один домен закрыть от индексации

1. нельзя делать файлы из под root

2. нужно теперь прописать на сервере смену project host в зависимости от URL

если хотите я могу настроить это за 1ч все
17.06.2021, 13:37

Вышлите пожалуйста счет
17.06.2021, 13:42

Доработка выполненна
21.06.2021, 09:22

Спасибо!
22.06.2021, 10:55

Чтобы ответить на вопрос - пожалуйста войдите или зарегистрируйтесь