본문으로 건너뛰기
유환호 의뢰하기

홈 / 인사이트

프로필을 어디에 올려야 AI가 읽나 — 플랫폼 16곳의 robots.txt를 직접 확인한 결과

작성 유환호 (Hwanho Yoo) · 최종 확인 · 출처 5건

한눈에 답변

AI 검색이 사람이나 업체를 추천할 때 쓰는 문서는 그 AI의 검색봇이 읽을 수 있는 곳에 있어야 한다. 2026년 10월 15일 플랫폼 16곳의 robots.txt를 확인한 결과, 링크드인·GitHub·유튜브·브런치·숨고·크몽·이랜서·프리모아·탈잉·클래스101·인프런은 ChatGPT 검색봇(OAI-SearchBot)을 막지 않았다. 네이버 블로그는 AI 학습과 검색 결합 답변(RAG) 목적의 봇 접근을 금지한다고 적고 OAI-SearchBot·Claude-SearchBot·PerplexityBot을 막았다. 당근은 전체를 막되 지역 프로필과 전문가 경로만 열어 두었다. robots.txt에서 허용됐다는 것은 읽을 수 있다는 뜻일 뿐, 색인되거나 인용된다는 뜻은 아니다.

왜 이걸 확인하나

ChatGPT·Claude·Perplexity 같은 AI 검색은 질문을 받으면 각자의 검색봇이 모은 문서에서 답을 만듭니다. OpenAI는 OAI-SearchBot을 막은 사이트는 ChatGPT 검색 답변에 표시되지 않는다고 밝힙니다. 그래서 프로필이나 소개 글을 어디에 올리느냐에 따라 AI가 그 글을 읽을 수 있는지가 갈립니다.

AI 검색이 인용한 출처의 81.9%가 브랜드 자체 사이트가 아닌 제3자 문서였다는 연구(Chen 외, 2025)도 있습니다. 자기 사이트 밖에 올리는 프로필이 중요한 이유입니다. 다만 올린 곳을 AI가 읽지 못하면 소용이 없습니다.

확인한 방법

2026년 10월 15일, 각 플랫폼의 robots.txt를 받아 대표 경로(프로필·글·상품 페이지)에 대해 아래 봇이 접근할 수 있는지 판정했습니다.

  • OAI-SearchBot: ChatGPT 검색 답변용
  • Claude-SearchBot: Claude 검색용
  • PerplexityBot: Perplexity 검색용
  • bingbot: 빙 검색 (Copilot과 여러 AI 서비스의 검색 기반)

대표 경로는 각 플랫폼의 공개 주소 형식을 보고 고른 것입니다. 실제 프로필 주소 형식이 다르면 결과가 다를 수 있습니다.

결과

플랫폼확인한 경로ChatGPT 검색봇Claude 검색봇PerplexityBing메모
링크드인프로필·글허용허용차단허용ChatGPT-User는 차단. 프로필 공개 설정 필요
GitHub프로필허용허용허용허용
유튜브영상·채널허용허용허용허용
브런치글허용허용허용허용학습용 봇(GPTBot·ClaudeBot 등)만 차단
네이버 블로그글차단차단차단허용“AI 학습·RAG 목적 봇 접근 금지” 명시
당근지역 프로필·전문가경로만 허용경로만 허용경로만 허용허용전체 차단 + 두 경로만 허용
숨고고수 프로필허용허용허용허용
크몽서비스허용허용허용허용
이랜서프리랜서허용허용허용허용
프리모아목록허용허용허용허용
탈잉강의허용허용허용허용
클래스101강의허용허용허용허용
인프런사용자허용허용허용허용
잡코리아공고허용허용허용허용이력서는 로그인해야 보임
사람인공고허용허용허용허용이력서는 로그인해야 보임
구글 지도장소차단차단차단차단구글 자체 AI용

네이버 블로그 robots.txt의 첫머리 문장은 이랬습니다.

“BOT ACCESS FOR THE PURPOSES OF AI TRAINING AND RETRIEVAL-AUGMENTED GENERATION (RAG) IS STRICTLY PROHIBITED.”

당근은 OAI-SearchBot 등에 Disallow: /를 두면서 /kr/local-profile/과 /kr/expert/를 Allow로 열었습니다. robots.txt 표준(RFC 9309)은 경로가 더 길게 일치하는 규칙을 우선하므로 이 두 경로는 읽을 수 있습니다. 이 사이트가 작업한 트이다학원 남악점이 2026년 10월 13일 ChatGPT ‘남악 학원 추천해줘’에서 첫 추천됐을 때 출처 표시가 당근이었던 것과도 맞습니다.

읽는 법 — 허용이 끝이 아니다

  1. 허용 = 읽어도 된다는 표시일 뿐입니다. 그 뒤에 색인되고, 그 질문의 검색 결과에 들어야 답변 후보가 됩니다.
  2. 로그인해야 보이는 페이지는 읽히지 않습니다. 잡코리아·사람인의 이력서, 비공개로 둔 링크드인 프로필이 그렇습니다.
  3. robots.txt는 바뀝니다. 이 표는 2026년 10월 15일 기준입니다. 중요한 곳은 올리기 전에 다시 확인하세요.
  4. 엔진마다 다릅니다. 링크드인처럼 ChatGPT는 열고 Perplexity는 막는 곳이 있습니다.

그래서 어디에 올리나

  • 사람(전문가) 프로필: 링크드인(전체 공개), GitHub, 유튜브 채널 소개
  • 글: 브런치나 자기 홈페이지. 네이버 블로그는 네이버 AI 브리핑용으로 함께 쓰되, ChatGPT용으로는 다른 곳에도 같은 내용을 둡니다.
  • 지역 가게·서비스: 당근 비즈프로필(지역 프로필·전문가 경로), 숨고
  • 서비스 판매·강의: 크몽, 이랜서, 탈잉, 인프런

어디에 올리든 이름, 직함, 대표 사이트 주소를 똑같이 씁니다. 표기가 갈라지면 AI가 같은 사람으로 묶지 못합니다. AI가 전문가를 고르는 조건은 AI에게 ‘AI 상위노출 전문가’를 물으면 누가 나오나에 정리했습니다.

이 글을 쓴 사람

AI 상위노출 일을 하는 유환호가 자기 프로필을 올릴 곳을 고르면서 직접 확인한 기록입니다. 특정 플랫폼과 이해관계는 없습니다.

자주 묻는 질문

네이버 블로그에 쓴 글은 ChatGPT가 못 읽나요?
2026년 10월 15일 blog.naver.com과 m.blog.naver.com의 robots.txt는 OAI-SearchBot·Claude-SearchBot·PerplexityBot·GPTBot 등을 막고 있었습니다. ChatGPT 검색 답변의 출처가 되기는 어렵다는 뜻입니다. 사용자가 대화 중 링크를 직접 열게 하는 ChatGPT-User는 막혀 있지 않았지만, 이것은 검색 답변의 후보를 모으는 봇이 아닙니다. 네이버 블로그는 네이버 AI 브리핑용으로 보고, 같은 내용을 AI 검색봇이 읽을 수 있는 곳에도 두는 것이 좋습니다.
링크드인은 AI가 읽나요?
2026년 10월 15일 링크드인 robots.txt는 프로필(/in/)과 글(/pulse/) 경로에서 OAI-SearchBot과 Claude-SearchBot을 막지 않았고, bingbot도 허용했습니다. 반면 PerplexityBot과 ChatGPT-User는 막혀 있었습니다. 공개 범위를 '전체 공개'로 두지 않으면 robots.txt와 상관없이 읽히지 않습니다.
당근 프로필은 ChatGPT가 읽나요?
당근(daangn.com) robots.txt는 OAI-SearchBot·Claude-SearchBot·PerplexityBot 등에 대해 사이트 전체를 막으면서 지역 프로필(/kr/local-profile/)과 전문가(/kr/expert/) 경로만 허용했습니다. 표준 규칙(RFC 9309)에서는 더 긴 경로 규칙이 우선하므로 이 두 경로는 읽을 수 있습니다. 이 사이트가 작업한 학원이 ChatGPT 답변에서 첫 추천됐을 때 출처 표시가 당근이었던 것도 이와 맞습니다.
robots.txt에서 허용되면 AI 답변에 나오나요?
아닙니다. robots.txt는 '읽어도 된다'는 표시일 뿐입니다. 그 뒤에 색인되고, 질문의 검색 결과에 들고, 답변에 쓰일 만한 내용이어야 합니다. 또 로그인해야 보이는 페이지(잡코리아·사람인의 이력서 등)는 robots.txt가 열려 있어도 봇이 내용을 볼 수 없습니다.

출처

아래 출처는 전부 원문을 열어 확인한 것입니다. 확인 날짜: 2026-10-15

  1. [1] Overview of OpenAI Crawlers OpenAI 개발자 문서 · 공식 문서
  2. [2] RFC 9309: Robots Exclusion Protocol IETF (2022) · 공식 문서
  3. [3] robots.txt 설정하기 네이버 서치어드바이저 · 공식 문서
  4. [4] Generative Engine Optimization: How to Dominate AI Search Chen 외 (2025) · 논문
  5. [5] 플랫폼 robots.txt 확인 기록 (2026-10-15) hwano-ai.com · 자체 기록

같은 주제의 다른 글

우리 사이트가 어느 단계에서 막혀 있는지 확인받고 싶다면 사이트 주소와 고객이 물을 법한 질문 두세 개를 보내 주세요. 연락하기 →

→

사이트 둘러보기