################################################## # # # www.SEOnational.com # # # ################################################## ################################################## # BOTS # # Line below tells all bots they can crawl site. # ################################################## User-agent: * ################################################## # SITEMAP(S) # # Leave the line below for all sites, # # but update/confirm the sitemap's relative path.# # The sitemap path below is Yoast's. # ################################################## # IMPORTANT: must be full url below, # # not just /sitemap_index.xml # ################################################## Sitemap: https://perelson.com/sitemap_index.xml Sitemap: https://perelson.com/video-sitemap.xml ################################################## # BLOCKING FILES/FOLDERS # # You can ask search engines to not follow # # pages/files/folders by adding relative paths # ################################################## Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Disallow: /_OLD/ Disallow: /careers_OLD-BULLHORN/ Disallow: /careers_test/