블로그 목록

가이드

AI 에이전트가 쿠팡·네이버 쇼핑에서 Access Denied로 막혀요: 막는 이유와 공식 경로

AI 에이전트에게 최저가 비교나 장바구니를 맡겼더니 쿠팡 Access Denied, 네이버 쇼핑 접속 제한 화면이 나오는 이유를 정리했어요. 2026년 11월 11일에 직접 받아 본 응답과 robots.txt, 약관 원문, 공식 API와 에이전트 결제 규격, 프록시로 달라지는 것과 아닌 것을 갈라 봐요.

안녕하세요. 한국AI통신에서 한국 모바일 LTE 프록시와 VPN을 준비하고 있어요.

요즘은 AI 에이전트에게 "이 상품 최저가 찾아 줘", "장바구니에 담아 줘"라고 시키는 일이 낯설지 않아요. ChatGPT나 Perplexity Comet 같은 서비스도, 직접 짠 브라우저 자동화도 같은 일을 해요.

그런데 막상 시켜 보면 쇼핑몰 앞에서 멈추는 경우가 많아요. 쿠팡에서는 "Access Denied"가, 네이버 쇼핑에서는 접속이 제한됐다는 화면이 돌아와요. 가격 모니터링 스크립트를 돌리던 분들이 몇 년째 만나 온 바로 그 화면이에요.

이 글에서는 쇼핑몰이 에이전트를 어떻게 대하는지, 쿠팡과 네이버 쇼핑이 실제로 무엇을 돌려주는지, 내 경우가 어느 쪽인지 확인하는 순서, 프록시로 달라지는 것과 아닌 것, 그리고 공식 경로를 차례로 정리해 볼게요.

쇼핑몰은 남의 에이전트를 반기지 않아요

가장 크게 알려진 사례는 Amazon과 Perplexity예요. Amazon은 2025년 11월 4일 공식 입장문에서, 고객을 대신해 구매하는 서드파티 앱은 공개적으로 동작해야 하고 참여 여부에 대한 서비스 제공자의 결정을 존중해야 한다고 밝혔어요. Perplexity에 Comet에서 Amazon을 빼 달라고 여러 차례 요청했다는 내용도 들어 있어요.

Perplexity는 같은 날 반박 글을 냈어요. 사용자의 권한으로, 사용자가 요청할 때만 움직이는 "user agent"는 크롤러나 스크래퍼, 봇과 다르다는 주장이에요. 테크42 보도에 따르면 이 다툼은 소송으로 이어졌고, 법적 다툼은 아직 남아 있어요.

말로만 그런 게 아니에요. 2026년 11월 11일 한 PC에서 amazon.com/robots.txt를 한 번 받아 봤어요. User-agent로 적힌 이름이 100개였고, GPTBot 같은 학습용 크롤러뿐 아니라 ChatGPT-User, Claude-User, Perplexity-User, GoogleAgent-Shopping처럼 사용자 요청으로 움직이는 에이전트 이름에도 Disallow: /가 걸려 있었어요.

왜 사람이 시킨 일인데도 막을까요?

양쪽이 에이전트를 다르게 보기 때문이에요. 에이전트를 만든 쪽은 사용자의 대리인이라고 보고, 쇼핑몰은 자동화된 접속이라고 봐요.

OpenAI의 크롤러 문서도 이 틈을 그대로 적고 있어요. ChatGPT-User는 사용자가 시작한 동작이라 robots.txt 규칙이 적용되지 않을 수 있다고요. 이런 에이전트가 늘면 쇼핑몰은 robots.txt만으로는 부족하다고 보고 서버에서 직접 막게 된다고 볼 수 있어요.

쿠팡과 네이버 쇼핑은 이렇게 응답했어요

같은 날 같은 PC에서 아래 URL에 curl로 GET을 한 번씩 보냈어요. 헤더는 손대지 않았어요. 이 PC 한 대에서 한 번 본 결과일 뿐이고, 다른 회선이나 다른 시각에 어떻게 보이는지는 재지 않았어요.

  1. www.coupang.com/robots.txt는 HTTP 403이었어요. 본문 제목은 "Access Denied", 응답 헤더의 Server는 AkamaiGHost였어요.
  2. search.shopping.naver.com/robots.txt는 HTTP 418이었어요. robots.txt 대신 "쇼핑 서비스 접속이 일시적으로 제한되었습니다."라는 안내 화면이 왔어요.
  3. shopping.naver.com/robots.txt는 200으로 열렸어요.

네이버 쇼핑의 418 화면은 비정상적인 접근이 감지되면 "해당 네트워크의 접속을 일시적으로" 제한한다고 적고, 사유를 네 가지로 들어요. 화면 표기 그대로 옮기면 이래요.

  • 상품 구매, 탐색과 무관한 외부 이벤트를 통한 접속
  • 짧은 시간 내에 너무 많은 요청이 이루어진 IP
  • VPN을 사용하여 접속한 IP
  • 특정 확장 프로그램 이용 시

열린 쪽 robots.txt는 더 분명해요. 맨 위 주석이 AI 학습과 RAG 목적의 접근을 금지한다고 밝히고, GPTBot, ClaudeBot, PerplexityBot 등 10개 이름에 Disallow: /를 걸어요. 네이버 검색 로봇에는 일부 경로를, Googlebot에는 홈 화면 몇 곳만 열어 준 다음, 마지막은 User-agent: *에 Disallow: /예요.

바이라인네트워크는 2026년 4월 국내 이커머스 19곳의 robots.txt를 비교해, 무신사·롯데온·CJ올리브영처럼 AI 크롤러에 문을 연 곳과 네이버·당근처럼 닫은 곳으로 나뉜다고 보도했어요. 쿠팡이 외부 AI의 구매·결제를 제한한다는 내용은 테크42가 다른 보도를 옮겨 전한 것이고, 쿠팡의 공식 발표는 찾지 못했어요.

왜 몇 번 안 했는데도 막힐까요?

인프런 질문 게시판에 같은 경험이 쌓여 있어요. 2023년 4월에는 쿠팡에 여러 번 접속하니 Access Denied가 뜬다는 질문이, 2025년 3월에는 세 번 돌리니 막혔다는 질문이 올라왔어요. 2025년 6월에는 네이버 쇼핑에 requests로 한 번, Selenium으로 한 번 접속했는데 둘 다 접속 제한 페이지만 나온다는 글이 있었고요.

차단 기준은 어느 쪽도 공개하지 않아요. 이번 관측에서도 한 번 보낸 요청에 403과 418이 돌아왔으니, 요청 횟수만으로는 설명되지 않는다고 볼 수 있어요. 그 이상은 밖에서 알 수 없어요.

robots.txt는 약속이지 자물쇠가 아니에요

robots.txt의 표준은 RFC 9309예요. 이 문서는 규칙의 성격을 한 문장으로 못박아요.

These rules are not a form of access authorization.

— RFC 9309

robots.txt는 크롤러에게 지켜 달라고 요청하는 규칙이고, 접근 권한을 주거나 막는 장치가 아니라는 뜻이에요. 실제로 막는 일은 403이나 418을 돌려주는 서버가 해요.

거꾸로 robots.txt에 이름이 없다고 허락받은 것도 아니에요. 허락 여부는 약관이 정해요.

네이버 이용약관은 사전 허락 없이 매크로·봇·스파이더·스크래퍼 같은 자동화된 수단으로 서비스를 이용하는 것을 금지해요. 어뷰징을 막는 기술적 조치를 무력화하려는 행위도 금지하는데, 그 예시로 IP를 지속적으로 바꿔 가며 접속하는 행위와 캡차를 우회하는 행위를 직접 들고 있어요.

쿠팡 이용약관은 이번에 원문을 확인하지 못했어요. 쿠팡에서 자동화를 쓰려면 브라우저로 약관을 직접 읽어 보세요. 어느 쪽이든 법률 판단은 이 글의 범위가 아니에요.

내 경우가 어느 쪽인지 이 순서로 확인해요

에이전트가 "접속할 수 없어요"라고만 답하면 원인을 알 수 없어요. 아래 순서로 보면 어느 갈래인지 가려져요.

  1. 상태 코드와 응답 헤더를 봐요. 공개 URL 하나에 한 번이면 충분해요.
curl -s -o /dev/null -D - https://www.coupang.com/robots.txt

403에 "Access Denied"면 서버 앞단에서 거절한 것이고, 네이버 쇼핑의 418이면 위에 적은 접속 제한 안내예요. 둘 다 사이트가 내린 결정이지 내 코드의 오류가 아니에요.

  1. robots.txt가 열리면 읽어요. 내 에이전트의 이름이나 *에 Disallow: /가 있으면, 사이트가 자동 접근을 원하지 않는다고 밝힌 거예요.

  2. 같은 주소를 사람이 평소 쓰는 브라우저로 열어 봐요. 브라우저에서도 제한 화면이 나오면 네이버 안내문이 말하는 네트워크 단위 제한일 수 있어요. 이때는 화면에 안내된 원클릭 진단과 고객센터가 공식 경로예요.

  3. 에이전트가 어디에서 도는지 확인해요. 클라우드에서 도는 에이전트의 요청은 그 서비스의 서버에서 나가요. 사용자가 바꿀 수 있는 부분이 거의 없어요.

  4. 하려는 일이 조회인지 주문인지 갈라요. 주문과 결제는 로그인, 본인확인, 결제 인증을 거쳐요. 여기서 막히면 접속 경로의 문제가 아니에요.

  5. 필요한 데이터가 공식 API로 나오는지 확인해요. 나온다면 거기서 끝이에요.

프록시로 달라지는 것과 아닌 것이 있어요

프록시가 바꾸는 것은 하나예요. 요청이 나가는 회선이에요. 한국AI통신 프록시(KAT Proxy)라면 프록시를 설정한 브라우저나 프로그램의 요청이 한국 모바일 LTE를 거쳐 나가요.

달라질 수 있는 것은 사이트가 회선을 보고 응답을 다르게 주는 경우예요. 다만 쿠팡과 네이버 쇼핑이 회선에 따라 다르게 응답하는지는 저희가 재 본 적이 없어요. 그래서 회선을 바꾸면 열린다고 말할 수 없어요. 네이버 쇼핑은 제한 사유에 VPN 접속을 직접 적어 두기도 했고요.

프록시로 달라지지 않는 것은 분명해요.

  1. 주문·결제. 로그인, 본인확인, 결제 인증을 거쳐야 하고, 쇼핑몰이 에이전트의 구매를 받을지는 IP와 상관없는 정책이에요.
  2. 에이전트 쪽 제약. 클라우드에서 도는 에이전트는 서비스가 정한 출구로 나가요. 프록시를 붙일 수 없는 구조라면 바꿀 수 있는 게 없어요.
  3. 약관. 금지된 자동 수집은 어느 회선에서 해도 금지예요. 제한을 피하려고 IP를 바꿔 가며 접속하는 것은 네이버 약관이 예시로 든 금지 행위 그대로예요.
  4. 계정 단위 제한. 계정에 걸린 제한은 회선을 바꿔도 따라와요.

그래서 저희는 KAT Proxy를 쿠팡이나 네이버 쇼핑의 수집, 주문 자동화 용도로 권하지 않아요. KAT Proxy는 현재 제공 준비 중이고, 특정 사이트가 열린다고 약속하지 않아요.

공식 경로부터 확인해요

쿠팡은 파트너스 API가 있어요. 가이드에 따르면 최종 승인된 쿠팡 파트너스 회원에게만 제공되고, 모든 요청의 Authorization 헤더에 HMAC 서명을 실어야 해요. 검색 키워드에 대한 검색 결과와 상품 정보를 돌려주는 /products/search는 1분에 최대 50번 호출할 수 있어요.

네이버는 사정이 바뀌었어요. 네이버 API 서비스 이용약관 부칙은 개발자센터 검색 API 가운데 쇼핑·책·학술정보 데이터 제공을 2026년 7월 31일 24시부로 종료하고, 8월 1일부터는 기존 이용자도 쓸 수 없다고 적고 있어요. 개발자센터에는 하루 호출 한도 25,000회라고 적힌 쇼핑 검색 문서가 아직 남아 있지만, 약관 기준으로는 종료된 서비스예요.

같은 약관은 검색 API로 받은 데이터를 AI에 입력하거나 학습, 개선, 평가, 노출에 활용하는 행위도 금지해요. 남은 검색 API가 옮겨 가는 네이버클라우드 NAVER API HUB 문서의 검색 목록에도 쇼핑은 없고, 통계를 주는 쇼핑 인사이트만 있어요. 에이전트에 네이버 검색 결과를 넣을 계획이라면 이 조항부터 읽어 보세요.

에이전트가 정식으로 주문하는 길은 없을까요?

만들어지는 중이에요. OpenAI는 2025년 9월 Stripe와 함께 만든 Agentic Commerce Protocol을 공개하고, 이 규격으로 ChatGPT 안에서 결제하는 Instant Checkout을 시작했어요. 발표 당시 대상은 미국 사용자와 미국 Etsy 판매자, 단일 상품 구매였어요. Google은 같은 달 60곳이 넘는 결제·기술 기업과 함께 Agent Payments Protocol(AP2)을 발표했어요.

식별 쪽도 움직여요. Cloudflare는 HTTP 요청에 서명해 자신을 밝히는 에이전트를 "signed agents"로 따로 분류하기 시작했고, Visa의 Trusted Agent Protocol과 Mastercard의 Agent Pay가 같은 서명 방식(Web Bot Auth)을 바탕으로 한다고 설명해요.

공통점은 에이전트가 숨지 않고 이름을 밝히고, 받을지 말지는 판매자가 정한다는 거예요. 쿠팡과 네이버가 외부 에이전트에 이런 경로를 열었다는 공식 발표는 찾지 못했어요. 네이버가 2026년 2월에 낸 "쇼핑 AI 에이전트"는 네이버플러스 스토어 앱 안에서 쓰는 자체 기능이고, 베타로 나왔어요.

자주 묻는 질문

쿠팡 크롤링에서 Access Denied가 뜨는 이유는 뭔가요?

쿠팡이 차단 기준을 공개하지 않아 정확한 이유는 알 수 없어요. 저희가 확인한 것은 robots.txt 요청 한 번에 403이 왔고, 응답의 Server 헤더가 AkamaiGHost였다는 점까지예요.

네이버 쇼핑 접속 제한은 얼마나 지나면 풀리나요?

안내 화면은 "일시적으로" 제한한다고만 적고 기간은 밝히지 않아요. 정상 이용인데 제한됐다면 화면에 안내된 원클릭 진단이나 네이버쇼핑 고객센터 문의가 공식 경로예요.

한국 IP 프록시를 쓰면 쿠팡·네이버 쇼핑 차단이 풀리나요?

그렇게 말할 근거가 없어요. 회선별로 비교해 잰 자료가 없고, 네이버는 약관에서 IP를 바꿔 가며 접속하는 행위를 금지 예시로 들어요.

네이버 쇼핑 검색 API는 지금도 쓸 수 있나요?

네이버 API 서비스 이용약관 부칙에 따르면 개발자센터의 쇼핑 검색 데이터 제공은 2026년 7월 31일에 종료됐어요. 문서 페이지는 남아 있어요.

AI 에이전트로 쿠팡에서 주문까지 할 수 있나요?

쿠팡이 외부 에이전트의 주문을 받는 공식 경로를 발표한 것은 찾지 못했어요. 주문에는 로그인과 결제 인증이 필요하고, 이것은 접속 회선으로 풀리는 문제가 아니에요.

마치며

AI 에이전트가 쇼핑몰에서 막히는 것은 고장이 아니라 쇼핑몰의 선택인 경우가 많아요. robots.txt와 약관에 그 선택이 적혀 있고, 서버가 403과 418로 집행해요.

그래서 순서는 상태 코드와 robots.txt, 약관을 읽고 공식 API를 찾는 것이 먼저예요. 주문과 결제는 에이전트가 이름을 밝히고 판매자가 받아 주는 규격 쪽에서 길이 만들어지고 있어요.

KAT Proxy는 한국 모바일 LTE를 거치는 HTTP CONNECT · SOCKS5 프록시이고, 현재 제공 준비 중이에요. 한국 회선이 필요한 업무와 연결 구성이 있다면 도입 상담에서 알려 주세요.

참고한 자료

  1. Amazon, Statement about Perplexity (2025-11-04)
  2. Perplexity, Bullying is not innovation (2025-11-04)
  3. OpenAI, Overview of OpenAI Crawlers
  4. RFC 9309, Robots Exclusion Protocol
  5. 네이버 이용약관
  6. 네이버 개발자센터, NAVER API 서비스 이용약관 (2026-10-07 개정 표기)
  7. 네이버 개발자센터, 검색 > 쇼핑
  8. 네이버클라우드, NAVER API HUB 개요
  9. 쿠팡 파트너스, 파트너스 API 가이드
  10. OpenAI, Buy it in ChatGPT: Instant Checkout and the Agentic Commerce Protocol (2025-09-29)
  11. Google Cloud, Powering AI commerce with the new Agent Payments Protocol (AP2) (2025-09-16)
  12. Cloudflare, The age of agents: cryptographically recognizing agent traffic (2025-08-28)
  13. Cloudflare, Securing agentic commerce: helping AI Agents transact with Visa and Mastercard (2025-10-24)
  14. 네이버, 네이버 쇼핑앱 "쇼핑 AI 에이전트" 베타 출시 (2026-02-26)
  15. 바이라인네트워크, AI 크롤러 봇을 보는 이커머스 플랫폼: 적극 열거나, 막거나 (2026-04)
  16. 테크42, AI에게 쇼핑 맡겼더니 접속 차단? (2026-10-19)
  17. 인프런 커뮤니티 질문 850985 (2023-04-20), 1543791 (2025-03-13), 1616692 (2025-06-16)
  18. 한국AI통신 직접 관측 (2026-11-11, 한 PC에서 curl GET 각 1회: www.coupang.com/robots.txt, search.shopping.naver.com/robots.txt, shopping.naver.com/robots.txt, www.amazon.com/robots.txt)

관련 글 더 보기

인스타그램 크롤링이 AWS에서만 막혀요: 429·로그인 리다이렉트·401 원인과 확인 순서

내 PC에서는 되던 인스타그램 크롤링이 AWS 같은 클라우드 서버나 Claude 같은 AI 에이전트에서는 429, 로그인 리다이렉트, 401로 막히는 이유를 공개된 원문으로 정리했어요. 내 경우가 어느 쪽인지 확인하는 순서, Meta의 공식 경로와 자동 수집 약관, 프록시로 달라지는 것과 달라지지 않는 것도 함께 담았어요.

yt-dlp "Sign in to confirm you're not a bot"가 서버에서만 떠요: 원인과 공식 경로

내 PC에서는 되던 yt-dlp가 클라우드 서버나 CI에서만 "Sign in to confirm you're not a bot"을 내는 이유를 yt-dlp 메인테이너의 댓글과 위키 원문으로 정리했어요. 내 경우가 어느 쪽인지 확인하는 순서, YouTube Data API와 약관, 프록시로 달라지는 것과 달라지지 않는 것을 함께 담았어요.

n8n HTTP Request 403 Forbidden: 네이버·Cloudflare에서 막힐 때 원인을 가르는 순서

n8n HTTP Request 노드가 403 Forbidden이나 Cloudflare "Just a moment..." 페이지를 받을 때 원인을 가르는 순서를 정리했어요. n8n Cloud의 요청이 어디서 나가는지, 네이버 뉴스 검색 API의 범위와 한도, 프록시로 달라지는 것과 달라지지 않는 것을 공식 문서 기준으로 담았어요.

Mistral Voxtral 3 정리: 받아쓰기·음성 합성·음성 에이전트 SDK와 한국어, 요금

Mistral이 10월 20일 발표한 Voxtral 3를 정리했어요. 받아쓰기·실시간 받아쓰기·음성 합성 모델과 음성 에이전트 SDK가 무엇을 하는지, 공식 비교 음성을 직접 들어 본 결과, 한국어가 어디까지 확인되는지, 요금과 전화 연결 조건을 담았어요.

모바일 프록시·주거용 프록시·데이터센터 IP는 무엇이 다른가요: IP 종류와 프록시·VPN 고르는 기준

모바일 프록시, 주거용 프록시, 한국 프록시를 찾다 보면 나오는 용어를 RFC와 공식 문서로 정리했어요. IP가 어느 망에 속하는지 구분하는 기준, 모바일망의 CGNAT, HTTP CONNECT·SOCKS5·WireGuard·OpenVPN의 차이를 알 수 있어요. 내 IP가 어느 쪽인지 확인하는 순서도 함께 담았어요.

한국AI통신 AI 전화 API로 시작하기

070 번호 발급부터 AI 음성 통화까지, REST API 몇 줄이면 됩니다.