n8n HTTP Request 403 Forbidden: 네이버·Cloudflare에서 막힐 때 원인을 가르는 순서
n8n HTTP Request 노드가 403 Forbidden이나 Cloudflare "Just a moment..." 페이지를 받을 때 원인을 가르는 순서를 정리했어요. n8n Cloud의 요청이 어디서 나가는지, 네이버 뉴스 검색 API의 범위와 한도, 프록시로 달라지는 것과 달라지지 않는 것을 공식 문서 기준으로 담았어요.
안녕하세요. 한국AI통신에서 한국 모바일 LTE 프록시와 VPN을 준비하고 있어요.
n8n으로 뉴스 요약이나 일일 다이제스트를 만드는 분이 많아요. Schedule Trigger로 시간을 정하고, HTTP Request 노드로 페이지를 가져와 정리하는 구성이죠.
그런데 브라우저에서는 잘 열리던 주소가 워크플로에서는 403 Forbidden으로 돌아오는 일이 있어요. 본문 대신 "Just a moment..."라는 HTML이 들어오기도 하고요.
이 글에서는 실제 질문 세 건, 403의 원인 세 갈래, 내 경우를 확인하는 순서, 네이버 뉴스의 공식 경로, 프록시로 달라지는 것과 달라지지 않는 것을 차례로 정리해 볼게요.
같은 403이어도 사정은 달라요
공개된 질문 세 건을 열어 봤어요.
첫 번째는 인프런 질문이에요(2025-11-19). 네이버에서 스크랩한 기사들의 URL을 하나씩 호출하는데, 특정 URL에서 403 Forbidden이 나면서 워크플로가 멈춘다는 내용이에요. 질문자가 물은 것은 차단을 푸는 방법이 아니라, 그 기사는 건너뛰고 다음 기사부터 이어 가는 방법이었어요.
두 번째는 n8n 커뮤니티 글이에요(2025-09-16). 브라우저에서 부르면 되는 API가 n8n에서는 403과 함께 Cloudflare의 "Just a moment..." 챌린지 페이지를 돌려준다는 내용이에요. 화면에는 "Forbidden – perhaps check your credentials?"라는 문구도 함께 떴다고 해요. 이 글은 남아 있는 답변 없이 자동으로 닫혔어요.
세 번째도 n8n 커뮤니티 글이에요(2026-05-24). 일일 다이제스트에 쓸 업계 블로그 세 곳이 모두 Cloudflare에 막힌다는 질문이었어요. 그런데 답변자가 확인해 보니 세 곳 중 한 곳은 Cloudflare 뒤에 있지 않았고, /feed/ 경로에 피드가 있었어요. 질문자는 그 한 곳을 피드 주소로 읽게 됐다고 적었어요.
세 건 모두 겉으로는 "n8n 403"이지만 막은 주체도, 질문자가 원한 것도 달라요. 그래서 고치기 전에 먼저 갈라 봐야 해요.
왜 브라우저에서는 되고 n8n에서는 안 될까요?
요청이 나가는 곳도, 요청을 보내는 프로그램도 다르기 때문이에요.
먼저 나가는 곳이에요. n8n 문서에 따르면 n8n Cloud의 워크플로가 보내는 요청은 문서에 공개된 IP 주소 목록 가운데 하나에서 나가요. n8n Cloud는 공유 인프라라서 한 주소를 여러 인스턴스가 함께 쓰고, 내 인스턴스만의 주소는 없다고 적혀 있어요.
셀프호스트는 이 문서가 다루지 않아요. n8n을 내 서버에서 돌리는 구성이니, 요청도 그 서버의 네트워크에서 나간다고 볼 수 있어요. 어느 쪽이든 지금 주소는 직접 확인할 수 있어요. n8n 문서가 안내하는 방법은 Manual Trigger와 HTTP Request 노드로 IP를 알려 주는 서비스를 한 번 호출해 보는 거예요.
다음은 보내는 프로그램이에요. HTTP Request 노드는 응답을 받아 돌려주는 HTTP 클라이언트예요. 세 번째 질문의 답변자도 이 노드에는 브라우저 엔진이 없다고 설명했어요. 페이지가 JavaScript를 실행해야 넘어가는 구조라면 여기서 멈춰요.
자기를 밝히는 값도 달라요. n8n 배포 환경변수 문서는 n8n의 기본 User-Agent를 n8n이라고 적고 있어요. N8N_ENFORCE_GLOBAL_USER_AGENT를 켜면 n8n 버전과 n8n.io 주소를 담은 형식으로 바뀌는데, 어느 쪽이든 n8n이 보낸 요청임을 밝히는 값이에요.
403의 원인은 세 갈래로 갈라 봐요
Cloudflare의 챌린지 페이지일까요?
Cloudflare 문서는 챌린지를 방문자가 봇이나 자동화 스크립트가 아니라 사람인지 확인하는 장치라고 설명해요. 브라우저에 몇 가지 검사를 시키고, 통과해야 원래 주소로 보내 줘요. 통과하지 못하면 목적지에 닿을 수 없다고 문서에 적혀 있어요.
같은 문서에는 한계도 적혀 있어요. 챌린지 페이지는 브라우저가 그려서 풀도록 HTML 한 장을 통째로 돌려주는 방식이라, 브라우저가 HTML이 아닌 응답을 기대하는 요청에서는 동작하지 않는다고 해요. API를 부르는 n8n 노드가 JSON 대신 HTML을 받는 두 번째 질문이 이 경우로 볼 수 있어요.
구분하는 방법도 문서에 있어요. 챌린지 페이지 응답에는 종류와 상관없이 cf-mitigated 헤더가 challenge 값으로 붙어요.
사이트가 자동 요청을 거절한 걸까요?
Cloudflare가 아니어도 사이트가 직접 403을 줄 수 있어요. 세 번째 질문의 한 곳이 그랬어요. 질문자는 Cloudflare라고 생각했지만 답변자가 확인한 결과는 달랐어요.
사이트가 무엇을 원하는지는 robots.txt에서 읽을 수 있어요. 2026-11-11에 한 PC에서 한 번씩 열어 보니 news.naver.com, n.news.naver.com, search.naver.com의 robots.txt는 모두 User-agent: *에 Disallow: /로 시작했어요. GPTBot, ClaudeBot 같은 AI 수집 봇도 이름을 적어 따로 막아 두었고요.
다만 RFC 9309는 robots.txt를 이렇게 설명해요.
These rules are not a form of access authorization.
— RFC 9309: Robots Exclusion Protocol
robots.txt는 접근을 막는 장치가 아니라 요청이에요. 403을 만드는 것은 서버의 차단 규칙이고, robots.txt는 그 사이트가 자동 요청을 어떻게 받아들이는지 알려 주는 표지예요.
인증이 빠진 걸까요?
n8n 문서는 "Forbidden - perhaps check your credentials" 오류를 노드가 인증 실패를 뜻하는 403을 받았을 때 표시되는 것으로 설명해요. 해결책으로는 API 키나 계정의 권한과 scope를 고치거나, 키를 새로 발급하는 방법을 들어요.
그런데 두 번째 질문에서는 챌린지 페이지를 받았는데도 같은 문구가 보였어요. 문구만 보고 인증 문제로 단정하면 안 되고, 응답 본문과 헤더를 함께 봐야 해요.
내 경우가 어느 쪽인지 확인하는 순서예요
- 응답 전체를 봐요. HTTP Request 노드는 기본으로 본문만 돌려줘요. Add Option의 Response에서 Include Response Headers and Status를 켜면 상태 코드와 헤더까지 볼 수 있어요.
cf-mitigated헤더를 찾아요. 값이challenge면 Cloudflare 챌린지예요. 본문이 "Just a moment..." HTML인지도 같이 봐요. 이 갈래는 설정을 바꿔서 풀 일이 아니에요. 4번으로 넘어가요.- 헤더가 없고 API를 부르는 중이라면 인증부터 봐요. 키가 맞는지, 그 키에 이 작업을 할 권한이 있는지 확인해요.
- 웹 페이지를 가져오는 중이라면 그 사이트의 robots.txt와 약관을 읽고, 공식 API나 피드가 있는지 찾아요. 네이버 뉴스라면 다음 절의 검색 API예요.
- n8n이 어느 주소에서 나가는지 확인해요. 내가 운영하거나 계약한 서비스가 IP로 접근을 제한한다면 이 주소를 허용 목록에 넣어야 해요.
2번의 헤더는 터미널에서도 확인할 수 있어요. 아래 명령은 본문은 버리고 상태 줄과 cf-mitigated, server 헤더만 보여 줘요. 주소는 확인할 주소로 바꿔요.
curl -s -o /dev/null -D - "https://example.com/" | grep -i -E "^HTTP|^cf-mitigated|^server"
이 명령은 n8n이 아니라 내 PC에서 나가요. 출구 주소도 프로그램도 다르니 n8n에서 받은 응답과 다를 수 있어요. 워크플로가 실제로 받은 응답은 1번처럼 노드에서 확인해요.
5번에서 n8n Cloud를 쓴다면 알아 둘 것이 있어요. n8n 문서는 주소 목록 전체를 허용 목록에 넣기를 권해요. 인스턴스는 보통 같은 주소를 유지하지만 사전 안내 없이 바뀔 수 있다고 적혀 있거든요. 주소를 여러 인스턴스가 함께 쓰니 IP 허용만으로 끝내지 말고 인증도 함께 걸라는 안내도 있어요.
네이버 뉴스는 검색 API가 공식 경로예요
네이버 개발자 센터의 뉴스 검색 API는 네이버 검색의 뉴스 검색 결과를 XML이나 JSON으로 돌려줘요. 애플리케이션을 등록해 받은 클라이언트 아이디와 시크릿을 요청 헤더에 넣으면 돼요. 문서는 이것을 비로그인 방식 오픈 API라고 불러요.
문서에 나온 호출은 이런 모양이에요. n8n에서는 HTTP Request 노드에 같은 주소와 헤더 두 개를 넣으면 돼요.
curl "https://openapi.naver.com/v1/search/news.json?query=%EC%A3%BC%EC%8B%9D&display=10&start=1&sort=sim" \
-H "X-Naver-Client-Id: {클라이언트 아이디}" \
-H "X-Naver-Client-Secret: {클라이언트 시크릿}"
문서에 적힌 범위는 이래요.
- 검색 API의 하루 호출 한도는 25,000회예요.
display는 한 번에 받을 결과 수로, 기본 10에 최대 100이에요.start는 검색 시작 위치로, 기본 1에 최대 1000이에요.- 결과 항목에는 제목(
title), 기사 원문 URL(originallink), 네이버 뉴스 URL(link), 요약(description), 시각(pubDate)이 들어 있어요.
응답 필드 목록에 기사 본문 전체는 없어요. description은 기사 내용을 요약한 짧은 구절이에요. 제목, 요약, 링크로 충분한 다이제스트라면 API만으로 끝나요.
본문이 필요해서 originallink를 여는 순간부터는 네이버가 아니라 각 언론사 사이트를 상대하게 돼요. 사이트마다 정책이 다르니 일부 주소만 403이 나는 일도 생길 수 있어요.
네이버 약관은 자동 수집을 어떻게 다룰까요?
약관은 한 번 읽어 두는 게 좋아요. 네이버 이용약관(시행일자 2026년 10월 1일)은 사전 허락 없이 자동화된 수단으로 게시물 등을 수집하는 것을 해서는 안 되는 일로 적고 있어요. 같은 문장에서 어뷰징을 막기 위한 기술적 조치를 무력화하려는 행위도 금지하는데, 그 예로 IP를 지속적으로 바꿔 가며 접속하는 행위와 캡차를 우회하는 행위를 들어요.
NAVER API 서비스 이용약관에도 볼 조항이 있어요. API 허용량을 늘리려고 같은 애플리케이션에서 클라이언트 아이디 여러 개를 쓰는 것을 금지해요. 한도가 모자라면 아이디를 늘릴 게 아니라 호출 횟수를 줄여야 해요.
내 워크플로가 어디까지 해당하는지는 저희가 판단할 수 없어요. 원문을 직접 확인해 주세요.
네이버 말고 다른 사이트는요?
피드가 있는지 먼저 찾아요. 세 번째 질문에서 한 곳이 풀린 것도 피드였어요. n8n의 RSS Read 노드는 URL만 넣으면 인터넷에 공개된 RSS 피드를 읽어 와요.
일부 주소만 막힐 때는 워크플로가 멈추지 않게 해요
첫 번째 질문이 이 경우예요. 여러 주소를 차례로 부르다 하나가 403이면 워크플로 전체가 멈춰요. n8n에는 이걸 다루는 설정이 두 곳에 있어요.
노드의 Settings 탭에는 On Error 설정이 있고, 선택지는 Stop Workflow, Continue, Continue (using error output) 세 가지예요. n8n 문서에 따르면 Stop Workflow는 오류가 나면 워크플로 전체를 멈추고, Continue (using error output)은 워크플로를 계속 실행하면서 오류 정보를 다음 노드로 넘겨요. 인프런 답변에서 강사가 안내한 것도 이 설정이에요. 질문자는 이 방법으로 403이 나도 멈추지 않게 됐다고 적었어요.
Add Option의 Response에 있는 Never Error는 2xx가 아닌 응답도 성공으로 돌려줘요. 이때는 Include Response Headers and Status를 같이 켜고, 뒤에서 상태 코드로 갈라야 실패한 주소를 놓치지 않아요.
요청이 너무 많아서 나는 오류는 403이 아니라 429예요. n8n 문서는 429에 Batching과 Retry on Fail을 안내해요. Batching은 Items per Batch와 Batch Interval (ms)로 요청을 묶고 간격을 두는 옵션이에요.
프록시로 달라지는 것과 달라지지 않는 것을 갈라요
n8n에서 프록시를 거는 자리는 문서에 두 곳이 나와요. HTTP Request 노드의 Proxy 옵션은 그 노드의 요청에 쓸 HTTP 프록시를 지정해요. 셀프호스트에서는 HTTP_PROXY, HTTPS_PROXY, ALL_PROXY 환경변수로 노드들의 요청 전체에 걸 수 있고, 노드의 Proxy 옵션이 환경변수보다 우선해요.
프록시가 바꾸는 것은 하나예요. 상대 서버가 보는 출구 주소가 프록시의 주소로 바뀌어요.
바뀌지 않는 것은 더 많아요.
- Cloudflare 챌린지는 브라우저가 검사를 통과해야 풀려요. 주소만 바꾼 HTTP Request 노드는 여전히 브라우저가 아니에요. Cloudflare 문서에 따르면 챌린지는 사이트 운영자가 만든 규칙에서 나와요. 프록시로 통과시킬 대상이 아니라 운영자가 세워 둔 문이에요.
- robots.txt와 약관은 어느 주소에서 접속하든 같아요.
- 인증 실패로 난 403은 키와 권한을 고쳐야 풀려요.
- 429는 요청 간격을 벌려야 풀려요.
그러면 출구 주소가 의미 있는 경우는 언제일까요. 내가 운영하는 서비스가 한국에서 접속했을 때 어떻게 응답하는지 워크플로로 점검해야 하는데, n8n은 해외 서버에 있는 경우를 생각해 볼 수 있어요. 출구의 위치 자체가 확인 대상일 때예요.
네이버 뉴스는 여기에 해당하지 않아요. 공식 경로인 검색 API가 있고, 약관은 자동 수집과 IP를 바꿔 가며 접속하는 행위를 직접 다루고 있어요.
한국AI통신 프록시(KAT Proxy)는 한국 모바일 LTE를 거치는 HTTP CONNECT · SOCKS5 프록시로, 현재 제공 준비 중이에요. 이 프록시를 쓰면 특정 사이트가 열린다고 약속하지 않아요. 차단 기준은 사이트가 정하고, 공개하지 않는 경우가 대부분이에요. 모바일 LTE는 다시 연결할 때 IP가 바뀔 수 있다는 점도 미리 알아 두세요.
자주 묻는 질문
n8n 403 forbidden은 왜 나오나요?
크게 세 가지예요. Cloudflare 같은 보안 서비스의 챌린지, 사이트의 자동 요청 차단, 인증 실패예요. Include Response Headers and Status를 켜고 응답 헤더와 본문을 보면 어느 쪽인지 가를 수 있어요.
n8n에서 Cloudflare "Just a moment"를 통과할 수 있나요?
HTTP Request 노드로는 안 돼요. 챌린지는 브라우저가 검사를 마쳐야 풀리는데 이 노드는 브라우저가 아니에요. 공식 API나 피드를 찾거나, 내가 계약한 서비스라면 운영자에게 요청하는 게 맞는 길이에요.
n8n Cloud의 IP는 고정인가요?
n8n 문서는 인스턴스가 보통 같은 주소를 유지하지만 사전 안내 없이 바뀔 수 있다고 적고 있어요. 주소는 여러 인스턴스가 함께 써요.
n8n에서 403이 나도 워크플로를 계속 돌릴 수 있나요?
네. 노드 Settings의 On Error를 Continue (using error output)으로 바꾸거나, Response 옵션의 Never Error를 켜면 돼요. 막힌 주소는 건너뛰는 것이지 열리는 것은 아니에요.
n8n에 프록시를 걸면 네이버 뉴스 403이 풀리나요?
그렇게 말할 수 없어요. 프록시는 출구 주소만 바꿔요. 네이버 뉴스는 뉴스 검색 API가 공식 경로이고, 네이버 이용약관은 자동화된 수집과 IP를 계속 바꾸는 접속을 금지 행위로 적고 있어요.
마치며
n8n의 403은 한 가지 문제가 아니에요. 응답 헤더와 본문을 열어 챌린지인지, 사이트의 차단인지, 인증인지 먼저 가르면 다음에 할 일이 정해져요.
네이버 뉴스처럼 공식 API가 있는 곳은 API로, 피드가 있는 곳은 RSS Read 노드로 읽는 것이 먼저예요. 프록시는 출구의 위치가 확인 대상일 때만 의미가 있고, 챌린지나 약관을 바꿔 주지 않아요.
한국에서 나가는 출구가 필요한 업무가 있다면 KAT Proxy 도입 상담에서 필요한 데이터 양과 연결 구성을 알려 주세요. 가격과 개통 일정은 상담에서 안내해요.
참고한 자료
- 인프런 커뮤니티, 네이버 뉴스 스크랩 - 403 Forbidden (2025-11-19)
- n8n Community, HTTP Request blocked by Cloudflare (403 Forbidden – Just a moment page) (2025-09-16)
- n8n Community, How do you scrape Cloudflare-protected websites in n8n? (2026-05-24)
- n8n Docs, Find your IP addresses
- n8n Docs, HTTP Request node
- n8n Docs, HTTP Request node common issues
- n8n Docs, Work with nodes
- n8n Docs, Deployment environment variables
- n8n Docs, RSS Read
- Cloudflare Docs, Challenges (2026-04-15 갱신)
- Cloudflare Docs, Interstitial Challenge Pages (2026-10-20 갱신)
- Cloudflare Docs, Detect a Challenge Page response (2026-05-05 갱신)
- 네이버 개발자 센터, 검색 > 뉴스
- 네이버, 네이버 이용약관 (시행일자 2026-10-01)
- 네이버 개발자 센터, NAVER API 서비스 이용약관
- IETF, RFC 9309: Robots Exclusion Protocol (2022-09)
- 한국AI통신 직접 관측 (2026-11-11, news.naver.com · n.news.naver.com · search.naver.com 의 robots.txt, 한 PC에서 각 1회)
관련 글 더 보기
해외 리전 서버에서만 403이 날 때: AWS·Vercel·GitHub Actions에서 원인을 가르는 순서
로컬에서는 되던 코드가 AWS·GCP·Vercel·GitHub Actions에 올리면 403이나 연결 끊김을 만날 때가 있어요. 공개된 사례가 어디까지 확인해 주는지 원문으로 따져 보고, 원인 후보를 지역, IP 종류, 요청 형태로 나눠 내 요청이 어디서 나가는지 확인하는 순서를 정리했어요.
yt-dlp "Sign in to confirm you're not a bot"가 서버에서만 떠요: 원인과 공식 경로
내 PC에서는 되던 yt-dlp가 클라우드 서버나 CI에서만 "Sign in to confirm you're not a bot"을 내는 이유를 yt-dlp 메인테이너의 댓글과 위키 원문으로 정리했어요. 내 경우가 어느 쪽인지 확인하는 순서, YouTube Data API와 약관, 프록시로 달라지는 것과 달라지지 않는 것을 함께 담았어요.
인스타그램 크롤링이 AWS에서만 막혀요: 429·로그인 리다이렉트·401 원인과 확인 순서
내 PC에서는 되던 인스타그램 크롤링이 AWS 같은 클라우드 서버나 Claude 같은 AI 에이전트에서는 429, 로그인 리다이렉트, 401로 막히는 이유를 공개된 원문으로 정리했어요. 내 경우가 어느 쪽인지 확인하는 순서, Meta의 공식 경로와 자동 수집 약관, 프록시로 달라지는 것과 달라지지 않는 것도 함께 담았어요.
AI 에이전트가 쿠팡·네이버 쇼핑에서 Access Denied로 막혀요: 막는 이유와 공식 경로
AI 에이전트에게 최저가 비교나 장바구니를 맡겼더니 쿠팡 Access Denied, 네이버 쇼핑 접속 제한 화면이 나오는 이유를 정리했어요. 2026년 11월 11일에 직접 받아 본 응답과 robots.txt, 약관 원문, 공식 API와 에이전트 결제 규격, 프록시로 달라지는 것과 아닌 것을 갈라 봐요.
모바일 프록시·주거용 프록시·데이터센터 IP는 무엇이 다른가요: IP 종류와 프록시·VPN 고르는 기준
모바일 프록시, 주거용 프록시, 한국 프록시를 찾다 보면 나오는 용어를 RFC와 공식 문서로 정리했어요. IP가 어느 망에 속하는지 구분하는 기준, 모바일망의 CGNAT, HTTP CONNECT·SOCKS5·WireGuard·OpenVPN의 차이를 알 수 있어요. 내 IP가 어느 쪽인지 확인하는 순서도 함께 담았어요.