반응형

    티스토리를 시작할 때부터 꾸준히 크롤러 오류가 나타납니다.

     

    크롤러가 뭐길래 자꾸 오류를 내뿜는 것일까요?

     

    꼭 수정해야 하는 것일까요?

     

    크롤러란?

    크롤러는 검색엔진이 웹상의 정보들을 탐색하고 색인하기위해 페이지의 내용을 읽는 프로그램을 뜻합니다.

    이런 프로그램을 로봇, 웹로봇, 웹봇 등으로 부르기도 하죠.

    사람이 직접 일일히 사이트마다 들어가서 어떤 내용이 있는지 검색엔진에 등록하는것은 불가능 하니까요.

    크롤러가 아무 페이지나 다 수집하는 것은 아니고, 수집을 하지 못하도록 거부를 하게되면 크롤러는 그 페이지를 그냥 지나치게됩니다.

     

    크롤러가 왜 중요한가?

    구글 애드센스는 독자적인 크롤러를 사용해서 페이지 내용과 관련이 깊은 광고를 화면에 출력하게 합니다.

    (한국어는 잘 파악하지 못하는 것 같지만..)

    크롤러가 제대로 작동하면 페이지 내용과 관련있는 광고가 나타나고, 이용자는 페이지 내용을 보다가 관련있는 광고에 자연스레 관심을 갖게됩니다.

    광고주에게는 관심있는 사용자에게 광고를 노출시킬 수 있어 좋고, 광고게시자에게는 그만큼 광고 수익이 높아지니 좋은셈이죠.

     

    그러나 크롤러 오류가 나타나면 페이지와 관련 없는 광고가 나타나게 됩니다.

    어느날 부터 CTR(클릭률)이 급격히 떨어졌다면 크롤러 오류가 발생하지 않았는지 점검해보시는게 좋습니다.

    다음은 구글에서 알려주는 크롤러 오류 수정방법입니다.

    https://support.google.com/adsense/answer/2381908?hl=ko&utm_source=aso&utm_medium=link&utm_campaign=ww-ww-et-asfe_#robot

    그러나 이방법은 직접 서버를 수정할 수 있는 설치형블로거들에게 해당되는 내용이고.. 티스토리 블로거는 방법이 없습니다.

     

     

    티스토리에서 크롤러 오류 해결이 가능한가?

    티스토리 이용자는 서버의 robot.txt파일 수정권한이 없기 때문에 근본적으로는 크롤러 오류를 해결할 수 없습니다.

    티스토리에서 크롤러 오류가 발생하는 페이지를 살펴보면 대부분 /tag에서 오류가 발생하니 굳이 수정할 필요도 없어보입니다.

    어떤 블로그에서는 티스토리 스킨 수정이 크롤러 오류의 원인이라고 합니다.(<head>가 수정되면 크롤러가 처음부터 다시 크롤링하기 때문에)

     

    따라서 궁여지책으로 크롤러에게 여기를 크롤링하세요~ 하는 구문을 넣어주어야합니다.


    --<추가>

    사실 효과가 있는지는 잘 모르겠습니다. 크롤러 오류는 일반 이용자가 접근할 수 없는 곳에서 발생하거든요.

    하지만 오류가 발생하는 곳은 광고를 개제하는 곳은 아니므로 크롤러 오류는 그냥 무시하는게 맞는듯 합니다.




    .



    티스토리에서 크롤러 오류 수정법(될지 안될지 모름..)


    1.관리페이지- 꾸미기- HTML/CSS수정에 들어갑니다.

     

    2. skin.html 에서 <body>아래에 다음 구문을 삽입합니다.

    <meta name="robots" content="all" />
    <meta name="robots" content="index,follow">

     

    3. 마찬가지로를 찾아 다음과같이 아래 위에 구문을 추가해줍니다.

                     <!-- google_ad_section_start -->
                        
                    <!-- google_ad_section_end -->

     

     

     

    내용추가:

    이 방법은 별 소용 없는 것 같습니다. 계속 크롤러오류는 발생하네요.

     


     - 티스토리 구글 애드센스 크롤러 오류 원인 및 해결 방법

     

     - 티스토리 구글 애드센스 크롤링 오류 말끔히 해결!


    반응형
    Posted by 뭐하라