부업으로 블로그를 시작했는데, 열심히 글을 써도 사람들이 아무도 찾아오지 않는다면 얼마나 답답할까요? 저도 그랬습니다. 밤새워가며 쓴 글이 검색 결과 어디에도 보이지 않을 때, 마치 투명인간이 된 기분이었습니다. 하지만 포기하지 않고 원인을 파고든 끝에, 딱 3가지 실수만 바로잡으니 거짓말처럼 제 글이 검색 결과에 나타나기 시작했습니다. 오늘은 그 좌절의 시간을 딛고 얻은 값진 교훈과 함께, 당신의 소중한 글이 검색에서 누락되는 흔한 실수와 그 해결책을 속 시원하게 알려드릴게요.
내 글이 검색되지 않는 이유, 혹시 이걸 놓치고 있나요?
블로그를 시작하고 한 달 동안 정말 열심히 글을 썼습니다. 하루에 2~3개씩, 매일 꾸준히 올렸죠. 제 나름대로는 독자들이 좋아할 만한 주제를 골라 열심히 자료 조사도 하고, 가독성을 높이기 위해 문단도 나누고 사진도 넣었습니다. 그런데 문제는 방문자 수였습니다. 하루 평균 5명. 그마저도 제 지인들이었습니다. 마치 아무도 없는 사막에 홀로 외치는 기분이었습니다. 대체 뭐가 문제일까 싶어 밤마다 잠도 설쳐가며 원인을 분석하기 시작했습니다. 검색 엔진 최적화(SEO)라는 단어를 처음 접한 것도 이때였습니다. 그동안 제가 글만 열심히 쓰면 사람들이 알아서 찾아와 줄 거라고 막연히 생각했던 거죠. 하지만 검색 엔진은 그렇게 호락호락하지 않다는 것을 뼈저리게 느꼈습니다.
제가 처음 범했던 가장 큰 실수는 바로 ‘색인’에 대한 개념이 전혀 없었다는 것입니다. 색인이란 검색 엔진이 웹사이트의 내용을 파악하고 검색 결과에 노출시키기 위해 정보를 저장하는 과정입니다. 제 글은 아무리 열심히 써도 검색 엔진에 제대로 등록되지 않아, 마치 세상에 존재하지 않는 글처럼 취급받고 있었던 겁니다. 마치 도서관에 책을 썼는데, 서가에 꽂히지 않고 창고에 쌓여 있는 것과 같았죠. 실제로 제가 쓴 50여 개의 글 중에서 검색 엔진에 색인된 글은 단 3개에 불과했습니다. 이 사실을 알고 얼마나 허탈했는지 모릅니다. 시간과 노력을 쏟아부었지만, 결과적으로는 94%의 글이 빛을 보지 못하고 있었던 셈입니다.
이 경험을 통해 저는 두 가지를 절실히 깨달았습니다. 첫째, 아무리 좋은 글이라도 검색 엔진에 색인되지 않으면 무용지물이라는 것입니다. 둘째, 검색 엔진의 작동 방식을 이해하는 것이 블로그 성장의 핵심이라는 것입니다. 이 깨달음은 제 블로그 여정의 방향을 완전히 바꾸어 놓았습니다. 그냥 글을 많이 쓰는 것이 아니라, 검색 엔진이 제 글을 제대로 인식하고 좋아하도록 만드는 방법에 집중하기 시작했습니다.
검색 엔진은 무엇을 싫어할까? 색인 오류의 숨겨진 원인
처음에는 제 글이 왜 검색되지 않는지 전혀 감을 잡지 못했습니다. 혹시 글 내용이 너무 평범해서일까? 아니면 내가 쓴 주제가 인기가 없어서일까? 별의별 생각을 다 했습니다. 하지만 깊이 파고들수록, 문제는 제 글의 ‘내용’보다는 ‘구조’와 ‘기술적인 부분’에 있다는 것을 알게 되었습니다. 검색 엔진, 특히 구글은 웹사이트의 기술적인 완성도를 중요하게 생각한다는 것을 알게 된 거죠.
제가 겪었던 색인 오류의 숨겨진 원인은 크게 세 가지였습니다. 첫째, ‘robots.txt’ 파일 설정 오류였습니다. 이 파일은 검색 엔진 로봇이 웹사이트의 어떤 부분을 크롤링(정보 수집)해도 되는지, 혹은 안 되는지를 알려주는 역할을 합니다. 저는 실수로 이 파일에 제 블로그 전체를 ‘크롤링 금지’하도록 설정해 두었던 것입니다. 마치 문을 굳게 잠가놓고 아무도 들어오지 못하게 막아버린 셈이죠. 이 설정 때문에 구글 로봇은 제 블로그에 접근조차 할 수 없었고, 당연히 제 글은 색인될 수 없었습니다. 이 오류 하나 때문에 한 달 동안 쓴 50여 개의 글이 모두 묻혔던 것입니다.
둘째, ‘noindex’ 메타 태그 설정 오류였습니다. 이 태그는 특정 페이지를 검색 결과에 노출시키지 않도록 검색 엔진에게 지시하는 역할을 합니다. 저는 블로그 초기 설정 과정에서 실수로 이 태그를 모든 페이지에 적용해 놓았습니다. 이것 역시 제 글이 검색 결과에 나타나지 않는 결정적인 원인이었습니다. 마치 열심히 쓴 책의 표지에 ‘이 책은 보지 마세요’라고 써 붙여 놓은 것과 같았죠.
셋째, 사이트맵 제출 오류였습니다. 사이트맵은 웹사이트의 전체 구조를 검색 엔진에게 알려주는 지도와 같은 역할을 합니다. 사이트맵을 제대로 제출하지 않으면 검색 엔진은 제 블로그의 새로운 글이나 변경된 내용을 파악하는 데 어려움을 겪습니다. 저는 사이트맵을 아예 제출하지 않았거나, 잘못된 형식으로 제출했습니다. 이로 인해 검색 엔진은 제 블로그에 어떤 새로운 글이 있는지조차 알 수 없었던 것입니다.
이 세 가지 기술적인 설정 오류 때문에 저는 거의 2개월 동안 낭비했습니다. 시간으로 따지면 하루에 3시간씩, 총 180시간 정도를 글쓰기에 쏟아부었지만, 검색 결과에서는 아무런 성과를 얻지 못했습니다. 정말이지, 이 사실을 알았을 때는 허탈함과 분노가 뒤섞여 아무것도 하고 싶지 않았습니다. 하지만 이대로 포기할 수는 없었죠. 이 문제들을 해결하면 분명 달라질 것이라는 확신이 들었습니다.
이 세 가지 설정이 제대로 되어 있는지 확인하는 것은 당신의 블로그가 검색 엔진에 제대로 색인되도록 하는 첫걸음입니다. 당신의 블로그도 혹시 이 중 하나라도 잘못 설정되어 있지는 않은지 지금 바로 점검해보세요.
구글 서치 콘솔로 내 블로그 색인 오류 100% 잡기
앞서 말씀드린 색인 오류의 원인들을 알게 된 후, 저는 구글 서치 콘솔이라는 도구를 파고들기 시작했습니다. 솔직히 처음에는 이 도구가 너무 어렵고 복잡해 보였습니다. 온통 영어로 되어 있고, 처음 보는 용어들 투성이었죠. 하지만 제 블로그를 살리기 위해서는 반드시 익혀야 했습니다. 마치 길을 잃은 사람이 나침반을 배우는 심정으로, 하루에 2시간씩 꼬박 일주일 동안 서치 콘솔의 각 메뉴를 뜯어보고 관련 자료를 찾아보았습니다.
가장 먼저 제가 했던 것은 robots.txt 파일과 noindex 메타 태그 설정을 확인하는 것이었습니다. 구글 서치 콘솔의 ‘설정’ 메뉴에서 ‘사이트 액세스’ 항목을 보면 robots.txt 파일을 확인됩니다. 저는 이곳에서 제 블로그 전체가 차단되어 있다는 것을 발견하고 즉시 수정했습니다. 또한, ‘색인’ 메뉴에서 ‘페이지’를 클릭하면 어떤 페이지가 색인되었고, 어떤 페이지가 ‘제외됨’으로 표시되는지 확인할 수 있습니다. 여기서 ‘noindex 태그로 인해 제외됨’이라고 표시된 페이지가 있다면, 해당 페이지의 noindex 태그를 제거해야 합니다. 제가 쓴 50여 개의 글 대부분이 이 두 가지 이유로 제외되고 있었던 겁니다.
다음으로 사이트맵을 점검했습니다. 구글 서치 콘솔의 ‘색인’ 메뉴에서 ‘사이트맵’을 클릭하면 현재 제출된 사이트맵 목록을 볼 수 있습니다. 저는 처음에 사이트맵을 제대로 제출하지 않았거나, 오류가 있는 사이트맵을 제출했었습니다. 그래서 제 블로그 플랫폼(저는 티스토리를 사용했습니다)에서 제공하는 올바른 사이트맵 주소를 확인하여 새롭게 제출했습니다. 사이트맵을 제출하고 나면, 검색 엔진이 제 블로그의 새로운 글을 더 빠르고 정확하게 인식하는 데 큰 도움이 됩니다.
이 세 가지 설정을 모두 바로잡고 나서, 저는 구글 서치 콘솔의 ‘URL 검사’ 기능을 활용하여 개별 글의 색인 상태를 확인했습니다. 색인이 안 된 글들을 하나씩 검사하며 어떤 문제가 있는지 파악하고, 필요한 조치를 취했습니다. 예를 들어, robots.txt나 noindex 태그 설정 오류가 있는 글은 해당 설정을 수정한 후 다시 색인 요청을 했습니다.
이 과정을 거치고 약 3일이 지났을 때, 놀라운 변화가 일어났습니다. 제 블로그의 색인되지 않았던 글들이 하나둘씩 검색 결과에 나타나기 시작한 것입니다. 처음에는 단 몇 개의 글이 검색되었지만, 시간이 지날수록 점점 더 많은 글들이 검색 결과에 노출되었습니다. 불과 일주일 만에 제 블로그의 90% 이상이 색인되었고, 검색 유입량도 이전과는 비교할 수 없을 정도로 늘어났습니다. 마치 오랫동안 잠들어 있던 제 글들이 깨어나 세상 밖으로 나온 기분이었습니다.
이 경험을 통해 저는 구글 서치 콘솔이 얼마나 강력하고 필수적인 도구인지 깨달았습니다. 만약 당신의 블로그 글이 검색되지 않아 답답함을 느끼고 있다면, 지금 바로 구글 서치 콘솔에 접속하여 당신의 블로그 상태를 점검해보세요. 이 도구만 제대로 활용해도 당신의 색인 오류는 100% 잡을 수 있습니다.
검색 결과에서 내 글을 다시 볼 수 있게 되는 마법
색인 오류를 잡고 나서 제 블로그는 놀라운 변화를 맞이했습니다. 이전에는 하루 평균 5명에 불과했던 방문자 수가 꾸준히 늘기 시작했고, 어느덧 하루 100명을 넘어서는 날도 생겼습니다. 제가 쓴 글들이 검색 결과에 노출되면서, 제 블로그를 필요로 하는 사람들이 자연스럽게 찾아오기 시작한 것이죠. 마치 꽁꽁 얼어붙었던 강물이 녹아 흐르기 시작하는 것처럼, 제 블로그도 활기를 되찾았습니다.
가장 기뻤던 순간은 제가 쓴 글이 네이버나 구글 검색 결과 상위에 노출되는 것을 직접 확인했을 때였습니다. 제 글이 그냥 검색 엔진에 등록된 것을 넘어, 실제 사람들이 검색하는 키워드에 대해 유용하다고 인정받고 있다는 증거였으니까요. 이렇게 검색 결과에서 제 글을 다시 볼 수 있게 된 것은 마치 마법 같았습니다. 그동안의 좌절과 고생이 눈 녹듯 사라지는 기분이었습니다.
물론, 색인 오류를 잡는 것이 블로그 성장의 전부는 아닙니다. 하지만 이것이 가장 기본적인 토대가 되어야 한다는 것을 뼈저리게 느꼈습니다. 아무리 좋은 콘텐츠를 만들고 양질의 백링크를 확보하더라도, 검색 엔진이 내 글을 인식하지 못하면 아무 소용이 없으니까요. 저는 이 경험을 통해 ‘기술적인 이해’가 콘텐츠만큼이나 중요하다는 것을 배웠습니다.
이 글을 읽고 계신 여러분도 혹시 제 과거처럼 검색 누락 때문에 속상해하고 계신가요? 그렇다면 너무 걱정하지 마세요. 대부분의 문제는 오늘 제가 알려드린 3가지 흔한 실수, 즉 robots.txt 설정 오류, noindex 메타 태그 오류, 사이트맵 제출 오류 중 하나일 가능성이 높습니다. 구글 서치 콘솔을 통해 이 문제들을 꼼꼼히 점검하고 해결한다면, 당신의 소중한 글들도 분명 검색 결과에서 빛을 보게 될 것입니다.
이제 당신의 블로그 글이 검색 결과에서 사라지는 악몽은 끝났습니다. 당신은 어떤 첫걸음을 내딛어 볼 건가요?
※ 이 글은 정보 제공을 목적으로 작성되었습니다. 실제 수익은 개인의 노력, 환경, 시장 상황에 따라 다를 수 있으며 특정 수익을 보장하지 않습니다.