Как запретить индексацию сайта поисковиками, если это версия сайта для разработки (DEV копия сайта). Очень часто у сайта есть две или три версии в сети ДЕВ и ПРОД (иногда еще и STAGE). ДЕВ версию всегда нужно закрывать от индексации, делается это по-разному. Не редко видел как её закрывают паролем через .htpasswd, однако это не всегда […]