Современные реалии Яндекса или правильный robots.txt

В связи с последними событиями (как-будто, новый АГС придумали, но циферки просто кончились — реальные АГС — только АГС-17 и АГС-30), а именно новой волной выпадания сайтов из индекса Яндекса, хочу поделиться правильными (на мой взгляд :)) файлами robots.txt для DLE и WordPress.

правильный robots.txt

(далее…)