# 사이트에서 AI 크롤러 차단하기

Source: https://support.wix.com/ko/article/%EC%82%AC%EC%9D%B4%ED%8A%B8%EC%97%90%EC%84%9C-ai-%ED%81%AC%EB%A1%A4%EB%9F%AC-%EC%B0%A8%EB%8B%A8%ED%95%98%EA%B8%B0 (updated 2026-04-23)
Related: Wix developer documentation, https://dev.wix.com/docs/llms.txt; Help Center index, https://support.wix.com/en/llms.txt

사이트에서 AI 크롤러를 차단해 콘텐츠에 액세스하고 사용할 수 있는 사용자를 제어하세요. 이는 자신의 콘텐츠가 승인 없이 LRM(대형 언어 모델)을 학습시키는 데 사용되는 것을 방지하고자 하는 사이트 소유자에게 특히 유용합니다. 예를 들어, 고유한 연구 기사를 가진 사이트 소유자는 AI가 동의 없이 자신의 콘텐츠를 스크랩해 사용하는 것을 원하지 않을 수 있습니다.

---

## Robots.txt 파일을 사용해 AI 크롤러 차단하기

사이트의 Robots.txt 파일에는 검색 엔진의 특정 요청을 허용 또는 거부하기 위한 지침이 포함되어 있습니다. "allow" 명령어는 크롤러에게 팔로우할 수 있는 링크를 알려주고 "disallow" 명령어는 크롤러에게 팔로우할 수 없는 링크를 알려줍니다.

### AI 크롤러를 차단하도록 Robots.txt 파일을 설정하려면:

1. 사이트 대시보드의 [SEO 및 GEO](https://manage.wix.com/my-account/site-selector/?siteType=HtmlWeb&actionUrl=https://www.wix.com/dashboard/%7B%7BmetaSiteId%7D%7D/seo-home?referralInfo=KB-3c4f785a-4597-467a-8279-ceddc7b499e2&title=사이트+선택&buttonText=SEO)로 이동합니다.
2. **도구 및 설정**으로 스크롤합니다.
3. **Robots.txt 파일 에디터**를 클릭합니다.
4. **파일 보기**를 클릭합니다.
5. **Robots.txt 파일** 아래의 입력란을 클릭합니다.
6. **내 Robots.txt 파일입니다** 아래에 다음 지시문을 작성해 Robots.txt 파일 정보를 추가합니다.  
   * User-agent: CCBot  
    Disallow: /  
   * User-agent: GPTBot  
    Disallow: /  
   * User-agent: ChatGPT-User  
    Disallow: /  
   * User-agent: BingAI  
    Disallow: /
7. **변경사항 저장**을 클릭합니다.
8. **저장**을 클릭합니다.

![Robots.txt 파일 편집하기](https://d2x3xhvgiqkx42.cloudfront.net/12345678-1234-1234-1234-1234567890ab/a1c473d0-e600-4b63-ae67-997d73da1139/2025/01/15/861e23a8-75f1-4ebd-b108-ac581c4cb91b/bc4b4d55-4a7f-469d-bf95-f8481eb115a6.png)

> **도움말:** 이 목록에는 알려진 일부 AI 크롤러가 포함되어 있지만, 필요에 따라 언제든지 더 추가할 수 있습니다.

---

## 로봇 메타 태그를 사용해 AI 크롤러 차단하기

메타 태그는 웹 브라우저 및 검색 엔진이 읽을 수 있는 페이지 정보를 포함하는 HTML 코드 조각입니다. 사이트의 로봇 메타 태그를 구성하면 검색 결과에서 HTML이 크롤링되고 색인이 생성되는 방법을 페이지별로 제어할 수 있습니다.

### 메타 태그를 사용해 AI 크롤러를 차단하려면:

**Wix 에디터:**

1. [에디터로 이동합니다.](https://manage.wix.com/account/site-selector/?actionUrl=https%3A%2F%2Fwww.wix.com%2Feditor%2F%7BmetaSiteId%7D%3FeditorSessionId%3D%7Besi%7D%26)
2. 에디터 왼쪽에서 **페이지 및 메뉴**![](https://d2x3xhvgiqkx42.cloudfront.net/12345678-1234-1234-1234-1234567890ab/9432a2ad-f01d-4a3d-ae53-370c37e15e62/2021/11/02/0b84b086-cf99-4826-93e0-9ffff492898a/c4974969-a151-4474-b053-c2dcfe3e00e6.png) 아이콘을 클릭합니다.
3. 해당 페이지 옆 **추가 작업**![](https://d2eyqiy4n03ve6.cloudfront.net/12345678-1234-1234-1234-1234567890ab/2015/08/03/54c69671-fcfc-418c-82e8-b7a49b370cb6.png) 아이콘을 클릭합니다.
4. **SEO 기본**을 클릭합니다.
5. **고급 SEO** 탭을 클릭합니다.
6. **로봇 메타 태그**를 클릭합니다.
7. **nosnippet** 체크상자를 선택해 페이지 콘텐츠가 AI 개요에 대한 직접 입력으로 사용되는 것을 방지합니다.

![nosnippet이 선택된 상태로 에디터의 고급 SEO 설정 탭에 표시되는 로봇 메타 태그 옵션](https://d2x3xhvgiqkx42.cloudfront.net/12345678-1234-1234-1234-1234567890ab/a1c473d0-e600-4b63-ae67-997d73da1139/2025/01/21/db42b353-a888-4428-b037-0e86e47f1dc3/fae341ed-0f96-4a16-b50f-a38c6f177589.png)

1. 사이트를 게시합니다.

**Studio 에디터:**

1. [에디터로 이동합니다.](https://manage.wix.com/account/site-selector/?actionUrl=https%3A%2F%2Fwww.wix.com%2Feditor%2F%7BmetaSiteId%7D%3FeditorSessionId%3D%7Besi%7D%26)
2. 에디터 왼쪽에서 **페이지**![](https://d2x3xhvgiqkx42.cloudfront.net/12345678-1234-1234-1234-1234567890ab/8696077d-830a-4b1e-bd86-9df98f89994a/2023/06/14/321a54e1-ec18-42be-9c2b-b93f3f6c8383/b26db553-6344-412a-b9f6-16f1a76dba92.png) 아이콘을 클릭합니다.
3. 해당 페이지 옆 **추가 작업**![](https://d2x3xhvgiqkx42.cloudfront.net/12345678-1234-1234-1234-1234567890ab/8696077d-830a-4b1e-bd86-9df98f89994a/2023/06/14/0367ea12-5bf2-45e3-a0a0-923a0dc6c805/f45629cf-1966-444f-81e4-7ab7767235f3.png) 아이콘을 클릭합니다.
4. **SEO 기본**을 클릭합니다.
5. **고급 SEO** 탭을 클릭합니다.
6. **로봇 메타 태그**를 클릭합니다.
7. **nosnippet** 체크상자를 선택해 페이지 콘텐츠가 AI 개요에 대한 직접 입력으로 사용되는 것을 방지합니다.

![nosnippet이 선택된 상태로 에디터의 고급 SEO 설정 탭에 표시되는 로봇 메타 태그 옵션](https://d2x3xhvgiqkx42.cloudfront.net/12345678-1234-1234-1234-1234567890ab/a1c473d0-e600-4b63-ae67-997d73da1139/2025/01/21/e405c92c-9348-4311-a6f3-830f5b671759/bcbc887b-23b4-4bfa-9cdb-491e9d5fe8ae.png)

1. 사이트를 게시합니다.

> [Google에서 로봇 메타 태그](https://developers.google.com/search/docs/crawling-indexing/robots-meta-tag?hl=ko)에 대한 자세한 도움말을 확인하세요.

---

## 자주 묻는 질문

아래 질문을 클릭해 사이트에서 AI 크롤러를 차단하는 방법에 대해 자세히 알아보세요.

**모든 크롤러를 차단할 수 있나요?**

Robots.txt 파일에 대부분의 알려진 크롤러를 나열해 차단할 수 있습니다. 하지만, 일부 크롤러는 이러한 지침을 무시할 수 있으므로 완전한 솔루션이 아닙니다.

**승인되지 않은 크롤러를 완전히 차단할 수 있는 방법이 있나요?**

아니요. 일부 크롤러는 Robots.txt 파일을 무시하고 콘텐츠를 스크랩할 수 있습니다.

**크롤러를 차단하면 SEO에 영향을 미치나요?**

특정 AI 크롤러를 차단해도 SEO에 큰 영향을 미치지는 않습니다. 하지만, 항상 사이트의 통계를 검토해 부정적인 영향이 없는지 확인하세요.

**차단할 크롤러를 어떻게 알 수 있나요?**

CCBot, GPTBot, ChatGPT-user 및 BingAI와 같이 알려진 AI 크롤러로 시작해 보세요. 크롤러를 식별하는 만큼 언제든지 추가할 수 있습니다.

**AI 크롤링을 차단한 경우에도 NLWeb을 사용할 수 있나요?**

AI 에이전트가 구조화된 콘텐츠를 크롤링하고 읽으려면 액세스 권한이 필요하므로 robots.txt 파일에서 AI 크롤러를 차단하면 NLWeb 기능이 제한될 수 있습니다. [AI 에이전트 액세스를 위해 NLWeb을 활성화하는 방법에 대한 자세한 도움말을 확인하세요](https://support.wix.com/ko/article/ai-에이전트-액세스를-위한-nlweb-사용-설정하기).
