Иван Захаров объясняет, как использовать robots.txt для SEO в 2026 году: настройка, примеры, ошибки и современные рекомендации по управлению краулингом...