http://4-seo.net/news/story/7901/ [レベル: 初〜中級] 管理しているサイトにあなたはrobots.txtを設置していますか？ どんなURLに対するクロールをrobots.txtでブロックしていますか？ GoogleのJohn Mueller（ジョン・ミューラー）氏が 英語版のウェブマスター向けオフィスアワー で、一般的に言える、robots.txtを使う場面と使わない場面について説明しました。 クロールが問題を引き起こすときは間... Wed, 16 Dec 2015 10:48:03 JST ja