#全てのクローラーを対象にする場合 User-agent: * #指定したディレクトリ以下をクロール禁止 Disallow: /beginner/ Disallow: /interview/ Disallow: /joseikin/ Disallow: /marutsubame/ Disallow: /campaign/ #PDF Disallow: /pdf/viewer.html?file=introduction.pdf Disallow: /pdf/viewer.html?file=inspection.pdf Disallow: /pdf/viewer.html?file=introduction.pdf #クロールを許可するディレクトリを指定 #パスが長い方が優先されます。 # Allow: /farm/app/growthHistory/ # User-agent: * # Sitemap: https://academy.drone.rakuten.co.jp/sitemap.xml