Theos Group

Google과 AI에서 귀사의 기업이 얼마나 잘 검색되는가? 무료, 즉시.

전체 보고서를 바로 원하시나요? 확장 스캔 — € 49 →

지식 기반

ClaudeBot: 그것이 무엇인지 그리고 허용해야 하는지 여부

ClaudeBot은 Anthropic이 웹사이트를 수집하여 Claude를 훈련하고 최신 정보를 제공하는 데 사용하는 로봇이며, 허용하는 것이 현명할 수 있지만 신중한 결정이 필요합니다.

ClaudeBot은 정확히 무엇인가

ClaudeBot은 Anthropic의 자동화된 프로그램입니다. 웹사이트를 방문하고 텍스트를 읽으며 해당 텍스트를 두 가지 목적으로 사용합니다. 언어 모델 Claude 훈련 및 현재 사용자가 Claude에게 제시하는 질문에 답변하기. 따라서 사람이 귀사 사이트를 방문하는 것이 아니라 대규모로 페이지를 수집하는 소프트웨어입니다.

Claude는 ChatGPT와 비슷하지만 배후의 회사가 다르고 작동 방식이 다른 Anthropic의 AI 어시스턴트입니다. 누군가 Claude에게 귀사의 산업, 지역 또는 비즈니스 유형에 대해 질문할 때 Claude는 최신 정보를 위해 인터넷을 검색하기로 결정할 수 있습니다. 그것이 발생하고 귀사 사이트가 검색 결과에 나타나면 ClaudeBot이 이전에 또는 그 시점에 귀사 페이지를 읽은 것입니다.

다른 AI 로봇과의 차이점은 동작에 있습니다. Claude는 웹 검색을 사용합니다. 이는 대화 중에 훈련 중에 학습한 것에만 의존하는 대신 능동적으로 웹을 참조할 수 있음을 의미합니다. 동시에 Claude는 인용에 신중합니다. 실제로 사용했을 때도 정보의 출처를 항상 명시하지는 않습니다.

ClaudeBot이 유사한 로봇과 어떻게 다른가

Anthropic이 그러한 로봇을 가진 유일한 회사는 아닙니다. OpenAI는 GPTBot: 그것이 무엇인지 그리고 허용해야 하는지 여부에서 논의하는 것과 유사한 로봇을 가지고 있습니다. 기술은 유사합니다. 둘 다 웹페이지를 읽고 그 텍스트를 AI 어시스턴트에 사용합니다. 차이점은 주로 읽은 후에 발생하는 것에 있으며 그 점에서 ClaudeBot은 특별한 범주입니다.

일부 어시스턴트는 답변할 때 자주 출처 표시 또는 링크를 표시하지만 Claude는 그렇게 일관되게 하지 않습니다. 따라서 Claude가 귀사 정보를 사용한 순간 출처를 명시한다고 단순히 가정할 수 없습니다. 이로 인해 귀사 텍스트가 사용자가 본 답변에 실제로 영향을 미쳤는지 확인하기가 더 어렵습니다.

이는 많은 기업가들이 ChatGPT에 대해서도 제기하는 질문과 일치합니다. 즉 ChatGPT가 귀사 웹사이트를 읽는지 여부와 이를 확인하는 방법입니다(ChatGPT가 귀사 웹사이트를 읽는지 여부와 이를 확인하는 방법에서 설명함). Claude의 경우 인용이 확고한 관행이 아니기 때문에 이 질문에 답하기가 더욱 어렵습니다. 귀사 사이트가 출처였음을 서면으로 더 자주 볼 수 없습니다.

ClaudeBot에 사이트 접근 권한을 부여해야 하는가

일반적인 옳은 답변은 없으며 그렇게 주장하는 모든 사람을 조심하세요. 접근 권한을 부여한다는 것은 귀사의 텍스트가 Claude가 귀사의 산업 또는 서비스 유형에 대한 질문에 답할 때 중요할 수 있음을 의미합니다. 잠재 고객이 Claude를 사용하여 공급업체를 비교할 때 유리할 수 있습니다. 이는 Google 사용 외에 점점 더 자주 발생합니다.

접근을 거부하는 것도 타당한 선택입니다. 일부 회사는 자신의 텍스트, 가격 또는 제품 설명이 그에 대한 보상 없이 AI 모델 훈련에 사용되기를 원하지 않습니다. 이는 기술적 문제가 아니라 원칙적인 고려입니다. 그렇게 결정하는 것에 잘못된 것은 없습니다.

실용적인 중간 방법이 존재합니다. 로봇에 현재 질문에 답변하는 접근 권한을 부여할 수 있지만 장기적으로 모델을 훈련하는 것은 불가능합니다. Anthropic은 로봇에게 허용되고 허용되지 않는 사항을 알려주는 파일인 귀사 사이트의 robots.txt 파일 내에서 이에 대한 별도의 규칙을 제공합니다. 대부분의 중소기업 기업가의 경우 이는 기술 관리자가 한 번에 설정하는 설정입니다.

어떤 선택이 가장 적합한지 직접 파악하고 싶지 않으신가요? 먼저 현재 일어나고 있는 일을 확인하세요. 그것을 알 수 없으면 모든 결정은 추측입니다.

웹 검색이 귀사의 검색 가능성에 무엇을 의미하는가

Claude가 웹 검색을 사용한다는 사실은 그가 훈련 데이터의 구식 지식만 신뢰하는 것이 아니라 대화 중에 적극적으로 검색할 수 있다는 의미입니다. 이는 귀사와 관련이 있습니다. 왜냐하면 귀사 사이트가 읽기 좋고 최신 상태인지 여부가 다시 중요해지기 때문입니다. 6개월 동안 업데이트되지 않은 페이지는 최근 정보를 보여주는 페이지와 다른 인상을 줍니다.

이는 훈련 데이터만 사용하는 어시스턴트와 다르게 작동합니다. 웹 검색의 경우 Claude가 훈련 중에 귀사에 대해 학습한 적이 있는지의 여부보다는 질문 시점에 귀사에 관한 유용한 정보를 찾을 수 있는지의 여부가 중요합니다. 이는 우리가 ChatGPT가 귀사의 기업에 대해 알고 있는 것을 얼마나 자주 새로 고치는지에 대해 논의할 때 다루는 지식 새로 고침 원칙과 유사하며, 각 어시스턴트는 고유한 방식으로 작동합니다.

귀사에게 이는 주로 기본 사항이 정리되어야 함을 의미합니다: 명확한 텍스트, 복잡한 기술적 구성 뒤에 숨겨진 정보 없음, 그리고 평범하게 읽을 수 있어야 하는 것을 차단하지 않는 사이트입니다. 큰 기술적 개입은 거의 필요하지 않습니다. 읽기 좋고 최신 상태의 사이트가 가장 중요한 단계입니다.

인용을 주저하는 것이 문제가 될 수 있는 이유

Claude가 귀사의 정보를 사용하지만 그 출처를 명시하지 않으면 사용자는 귀사의 기업명을 보지 못합니다. 이는 출처를 더 자주 표시하는 어시스턴트에 비해 실질적인 단점입니다. 이로 인해 귀사는 자신의 노력이 보이지 않는다는 느낌을 받을 수 있습니다. 비록 그 노력이 실제로 어떤 말에 영향을 미치더라도 말입니다.

이는 측정을 어렵게 만듭니다. 자주 인용하는 어시스턴트의 경우 약간의 검색 작업으로 귀사의 기업명이 언급되었는지 확인할 수 있습니다. 이는 ChatGPT가 귀사의 기업명을 언급하는지 측정하는 방법에 대해 논의한 내용입니다. Claude의 경우 자신의 테스트 질문을 더 자주 해야 하며 귀사의 이름, 귀사의 서비스 또는 귀사의 특정 접근 방식이 명시적인 출처 표시가 없더라도 답변에 다시 나타나는지 주의 깊게 살펴봐야 합니다.

그럼에도 불구하고 출처 표시에서의 비가시성은 답변에서의 비가시성과 같지 않습니다. Claude가 귀사의 정보를 실제로 사용하되, 인용으로 제시하는 대신 일반 지식으로 제시할 수 있습니다. 이는 귀사가 보기에는 덜 만족스럽지만 답변을 읽는 사용자에 미치는 영향은 여전히 있을 수 있습니다.

구체적으로 할 수 있는 일

먼저 ClaudeBot이 현재 귀사의 사이트에 접근할 수 있는지 확인하십시오. 이는 robots.txt 파일에 있어야 합니다. Claude에 대한 언급이 없으면 로봇은 아마도 환영할 것입니다. 기본 설정이 보통 접근 가능하기 때문입니다. 이를 조정하려면 작은 기술적 변경입니다.

그 다음 Claude에게 귀사의 업계, 귀사의 서비스 또는 귀사의 지역에 관한 몇 가지 테스트 질문을 직접 제출하십시오. 귀사의 기업이 언급되는지 여부뿐만 아니라 정보의 정확성도 확인하십시오. 자신에 관한 부정확하거나 구식의 정보는 종종 단순히 언급되지 않는 것보다 더 큰 문제입니다. 이는 ChatGPT가 귀사의 경쟁사를 언급하고 귀사를 언급하지 않는 이유에 대해 읽을 수 있듯이 다른 어시스턴트에게도 동일하게 적용됩니다.

작은 조정으로 기적을 기대하지 마십시오. Claude에서 보장되게 작동하는 트릭은 없으며 그것을 약속하는 제공자를 의심하십시오. 도움이 되는 것: 명확한 텍스트, 최신 정보, 그리고 기술적으로 방해가 되지 않는 사이트입니다. 이는 다른 AI 어시스턴트 및 일반 검색 엔진에도 도움이 되는 동일한 기초입니다.

자주 묻는 질문

Google에서의 위치에 손상을 주지 않으면서 ClaudeBot을 차단할 수 있습니까?

예. ClaudeBot은 Google과 같은 검색 엔진이 검색 결과에 사용하는 로봇과는 별개의 로봇입니다. robots.txt 파일에서 ClaudeBot을 특별히 차단할 수 있으며 이는 Google이 귀사의 사이트를 처리하는 방식에 영향을 미치지 않습니다. 두 시스템은 서로 독립적으로 작동합니다.

Claude가 내 웹사이트를 사용했는지 확인할 수 있습니까?

항상 직접적인 것은 아닙니다. Claude는 출처 표기에 신중하기 때문입니다. 때로는 간접적으로 알아차릴 수 있습니다. 회사명, 서비스 또는 사이트의 특정 표현이 명시적인 참조 없이 답변에 나타나는 경우입니다. 최선의 방법은 정기적으로 테스트 질문을 하고 내용이 사이트의 내용과 일치하는지 확인하는 것입니다.

ClaudeBot에 접근 권한을 부여하는 것이 ChatGPT에 접근 권한을 부여하는 것과 같습니까?

아니요, 이 둘은 서로 다른 회사의 두 가지 다른 로봇입니다. 한쪽에 대한 접근 권한 설정이 다른 쪽에는 영향을 주지 않습니다. 두 어시스턴트가 모두 사이트를 읽을 수 있도록 하려면 각각 별도로 설정해야 합니다. 예를 들어 GPTBot에 대한 설명을 확인한 후 동일한 robots.txt 파일에서 ClaudeBot에 대해 같은 방식을 반복하면 됩니다.

추가 읽기

귀사의 웹사이트는 어떤 상태인가요?

1분 내에 두 개의 숫자, 무료 — 그리고 아무것도 남길 필요가 없습니다.

Google과 AI에서 귀사의 기업이 얼마나 잘 검색되는가? 무료, 즉시.

전체 보고서를 바로 원하시나요? 확장 스캔 — € 49 →

원인이 무엇인지 알고 싶으신가요?

이 스캔은 현황을 제공합니다. 보고서는 원인과 해결 순서를 제공합니다.

  • 각 결과에 대해 무엇이 잘못되었는지, 무엇을 해야 하는지무료 스캔은 현황을 제공합니다. 보고서는 목록을 제공합니다 — 일반적인 언어로, 무게에 따라 순서대로, 기술적으로 이해할 필요 없이.
  • 하나 대신 네 가지 AI 어시스턴트 모두무료 결과는 한 명의 어시스턴트에 대한 표본입니다. 보고서는 네 명 모두에게 8개의 질문을 제시하므로, 한 명의 어시스턴트에만 문제가 있는지 모두에게 문제가 있는지 알 수 있습니다.
  • 실제로 언급되는 기업들당신이 놓친 고객은 누가 얻나요? 해당 이름은 보고서에 기재되어 있으며, 당신이 없는 곳에서 얼마나 자주 나타나는지 나옵니다.
  • 웹사이트의 더 깊이 있는 측정무료 스캔은 10개 페이지를 검토합니다. 보고서는 50개까지 진행되므로, 고객들이 최종적으로 도달하는 페이지도 포함됩니다.