구글 블로그 맞춤 robots.txt 사용 설정 방법

 구글 블로그는 티스토리와 달리 robots.txt 설정을 할 수 있다는 장점이 있습니다. 그러나 워드프레스와 달리 FTP의 루트 디렉토리에 직접 올리는 방식이 아닌 구글 블로그 설정에서 맞춤 robots.txt 사용설정을 할 수 있는 부분을 두고 있습니다. 

구글 블로그 맞춤 robots.txt 사용 설정 방법
구글 블로그 맞춤 robots.txt 사용 설정 방법

 

 
사용설정을 우측으로 토글해서 활성화 시킵니다.
 
맞춤 robots.txt  모습
맞춤 robots.txt 모습


구글 블로그의 robots.txt 기본 세팅

초기 세팅은 보통 아래와 같습니다. 

User-agent: Mediapartners-Google

Disallow: 

Allow:/

User-agent: *

Disallow: /search

Allow: /

Sitemap: https://도메인/sitemap.xml

 

구글 블로그의 맞춤 robots.txt 추가로 세팅해야 할 것

우선 위에 기본적으로 구글 블로그는 기본적으로 search 디렉토리를 차단하고 있습니다. 그러나 tag(레이블)로 메뉴를 만들 경우에는 메뉴에 해당되는 부분은 robots.txt파일에서 허락해줘야 검색엔진에 노출이 됩니다. 이 블로그의 경우 5개의 메뉴가 있으니 그걸 allow 해줍니다. 

 

예시) Allow: /search/label/구글블로그

네이버 검색로봇도 허락할 수 있습니다. 

User-agent: Yeti

Allow:/

다음 검색 로봇도 허락할 수 있습니다.

User-agent:Daum

Allow: /

 
 
--- Copyrights © blogger.techwillgo.com All rights reserved. 컨텐츠 무단 전재, 복사 및 재배포 금지 ---