Robots.txt 생성자
Allow, Disallow, Sitemap 및 Crawl-delay 지시문으로 유효한 robots.txt 파일을 생성합니다.
Advertisement
생성된 robots.txt
양식을 작성하고 생성을 클릭하면 여기에 robots.txt가 표시됩니다.
Robots.txt 생성자
Robots.txt 생성자는 검색 엔진 크롤러에 크롤링할 페이지와 건너뛸 페이지를 알려주는 유효한 robots.txt 파일을 만듭니다. 사이트에 대한 봇 접근을 제어하고, 프라이빗 디렉토리를 보호하고, 크롤러를 사이트맵으로 안내하는 데 사용하세요.