Список вопросов
Как зайти в Даркнет?!
25th January, 01:11
4
0
Как в tkinter из поля ввода Entry получить значение в одну переменную и обновить строку кнопкой, затем получить ещё одно введённое значение и затем сложить их. Ниже пример кода
21st July, 19:00
892
0
Программа, которая создает фейковые сервера в поиске игровых серверов CS 1.6 Steam
21st March, 17:43
948
0
Очень долго работает Update запрос Oracle
27th January, 09:58
912
0
не могу запустить сервер на tomcat HTTP Status 404 – Not Found
21st January, 18:02
905
0
Где можно найти фрилансера для выполнения поступающих задач, на постоянной основе?
2nd December, 09:48
938
0
Разработка мобильной кроссплатформенной военной игры
16th July, 17:57
1724
0
период по дням
25th October, 10:44
3955
0
Пишу скрипты для BAS только на запросах
16th September, 02:42
3720
0
Некорректный скрипт для закрытия блока
14th April, 18:33
4613
0
прокидывать exception в блоках try-catch JAVA
11th March, 21:11
4380
0
Помогите пожалуйста решить задачи
24th November, 23:53
6084
0
Не понимаю почему не открывается детальное описание продукта
11th November, 11:51
4350
0
Нужно решить задачу по программированию на массивы
27th October, 18:01
4395
0
Метода Крамера С++
23rd October, 11:55
4308
0
помогите решить задачу на C++
22nd October, 17:31
4002
0
Помогите решить задачу на python с codeforces
22nd October, 11:11
4492
0
Python с нуля: полное руководство для начинающих
18th June, 13:58
2598
0
Два домена, один сайт?
Просмотров: 351
 
Ответов: 5
Имеется сайт, содержание на нескольких языках. Язык локализации указывается в url: example.com/en, example.com/ru, и т.п.
Домен example.com для русскоговорящей аудитории не слишком запоминаем, поэтому приобретается primer.com (.ru прихватил киберсквоттер). Содержимое example.com и primer.com отличается только парой слов в подвале страниц.
Вопрос: как это правильно сделать, чтобы поисковики не забанили за дублирование контента?
Пример robots.txt
User-agent: *
Host: www.site1.ru
На обоих сайтах вешаете одинаковый robots.txt, или на втором просто делаете
User-agent: Yandex
Disallow: /
для других пауков аналогично.
Host: www.site1.ru
Disallow: /
Чтобы ответить на вопрос вам нужно войти в систему или зарегистрироваться