티스토리 robots.txt 파일과 웹마스터 툴 등록

티스토리 초창기인 2007년부터 이용한 유저이자 삼성전자, 엘지전자 등의 SEO를 수행한 IT 전문가로서 티스토리의 robots.txt은 정말 개선해야 하는 포인트라고 생각하고 있었습니다. 고객센터에 요청도 했고, 그러다가 포기도 하고 그래서 티스토리 대신 워드프레스를 사용하고 있습니다. 하지만 드디어 티스토리도 robots.txt가 생겼네요. 🙌

하지만 조금 살펴보니 아쉽네요. 왜냐하면... 자동생성되는 것은 좋은데 수정이 안 되는 것이죠. 🤢

 

robots.txt란

검색엔진에게 수집할 페이지와 차단할 페이지를 정의해 주고, 더불어 sitemap.xml이 어디에 있는지 알려주는 파일입니다. (제 워드프레스의 글 참고 www.lalalaworld.com/how-to-do-seo-assessment/ , www.lalalaworld.com/기본-seo/ ) 

 

robots.txt는 검색엔진 노출을 위해 반드시 필요한 파일인 것 입니다!

 

아시다시피 요즘 구글 웹마스터툴인 구글서치콘솔(Google Search Console, GSC)처럼 네이버도 Naver Search Advisor(네이버 웹마스터 도구), Kakao도 Daum 웹마스터도구를 내놓았습니다. 

사용자 검색이 음성검색, 질문형 검색, AI 검색 등 다양해 짐에 따라 네이버, 다음도 SEO가 중요해졌고, 결국 기본적인 robots.txt 를 등록하는 것이 중요해졌습니다.

확인 방법은 각자 도메인 주소 뒤에 /robots.txt를 인터넷 주소창에 입력해 보면 됩니다. 예를 들어 제 경우는 lalalabro.tistory.com/robots.txt

 

 

구글 - Google Search Console 에 Robots.txt 등록하기

티스토리에서 자동 생성된 robots.txt를 따로 등록할 필요가 전혀 없습니다. 대신 sitemap.xml을 위의 순서대로 처리하면 됩니다. 티스토리의 경우 sitemap.xml도 자동으로 생성되니 아래 내용대로 진행하면 됩니다.

1. Google Search Console에 가서 왼쪽 메뉴에서 Sitemaps 클릭
2. sitemap.xml 입력
3. Submit(제출) 클릭

참고로 sitemap.xml 확인 방법은 각자 도메인 주소 뒤에 /sitemap.xml를 인터넷 주소창에 입력해 보면 됩니다. 예를 들어 제 경우는 lalalabro.tistory.com/sitemap.xml

 

네이버 - Naver Search Advisor(NSA) 에 Robots.txt 등록하기

네이버 웹마스터툴은 구글(GSC)에 비해 몹시 직관적입니다.

1. 좌측 메뉴에 robots.txt 클릭
2. robots.txt 입력
3. 확인, 끝!

 

Daum - Daum 웹마스터도구

GA로 유입 분석을 하다보면 서비스마다 10~30% 수준으로 Daum 검색유입이 발생합니다. 그렇다보니 Daum 검색최적화를 고려해야 했는데, 얼마전까지도 웹마스터도구가 없었지만 지난 여름 Daum 웹마스터도구가 생겼습니다. 👍

하지만 robots.txt 파일에 코드를 넣어야 하기 때문에 현재 시점의 티스토리로는 사용이 불가능합니다.

아래는 참고삼아 제 다른 사이트(https://www.lalalaworld.com)으로 접속한 화면입니다.

GSC, NSA에 비하면 아직 갈 길이 멀어 보입니다. 하지만 Kakao 검색과 연동하여 더욱 성장할 Daum이기에, 그리고 같이할 티스토리라고 믿기에 Daum 웹마스터도구 역시 더욱 발전할 것 입니다. 😎😘