toolitda / robots.txt 생성기
robots.txt 생성기
검색엔진 수집 허용, 차단 경로, sitemap 위치를 포함한 robots.txt를 생성합니다.
robots.txt 생성기
검색엔진 수집 허용 범위와 sitemap 위치를 정리한 robots.txt 파일 내용을 생성합니다.
기본 설정
사이트 주소를 넣으면 sitemap 위치가 자동으로 채워집니다. 직접 sitemap URL을 입력하면 그 값을 우선 사용합니다.
수집 규칙
모든 페이지 수집을 허용하고 sitemap 위치를 검색엔진에 알려줍니다.
생성된 robots.txt
사이트 루트의 /robots.txt 파일 내용으로 사용할 수 있습니다.
다음 점검 단계
- 1생성된 내용을 사이트 루트의 /robots.txt에 배치합니다.
- 2sitemap.xml이 실제로 열리는지 확인합니다.
- 3SEO 태그 진단/생성기에서 URL 검사를 실행해 robots.txt와 sitemap.xml 상태를 확인합니다.
- 4운영 전에는 전체 차단 규칙이 남아 있지 않은지 다시 확인합니다.