Странное содержание robots в вордпрессе, такое нормально?
Недавно начал работать над SEO одного проекра на Wordpress и в файле robots.txt вижу только вот такое:
Это нормально что так мало директив? Кстати программа Screaming Frog SEO Spider почему то не сканирует страницы сайта.
User-agent: *Disallow: /wp-admin/Allow: /wp-admin/admin-ajax.php
Это нормально что так мало директив? Кстати программа Screaming Frog SEO Spider почему то не сканирует страницы сайта.

Смотрите также:

Назван самый интересующий иностранцев вопрос о России
Пользователь Reddit под ником Taken48 поделился изображением карты Европы от портала Landgeist. На ней были указаны
В комментариях запрещаются спам, а также реклама любых товаров и услуг, иных ресурсов.