중복 콘텐츠(duplicate content)는 같거나 실질적으로 매우 비슷한 내용이 웹의 둘 이상 URL에 존재하는 상태로, 한 사이트 안에서도 여러 사이트 사이에서도 생긴다.
구글은 이 상태를 “표준화” 문제로 다룬다. “표준화는 콘텐츠를 대표하는 표준 URL을 선택하는 프로세스”이고, 구글은 “중복 삭제라고도 하는 표준화 절차를 사용해 검색결과에 중복 콘텐츠 중 하나의 버전만 표시”한다 (Google 검색 센터, URL 표준화란 무엇인가요?). 중복 자체는 처벌 대상이 아니지만, 어떤 URL이 대표인지 구글이 잘못 고르면 순위와 트래픽이 흩어진다.
받지 않는다. 구글 문서는 “사이트에 일부 콘텐츠가 중복인 상태는 정상이며 Google의 스팸 정책을 위반하지 않습니다”라고 명시한다 (Google 검색 센터, URL 표준화란 무엇인가요?). 한국 구글 “중복 콘텐츠” 1페이지의 용어 문서들이 “페널티 오해 바로잡기” 같은 절을 따로 둘 만큼, 페널티 신화는 오래 살아남은 질문이다.
웹 자체가 중복투성이다. 구글의 맷 커츠는 2013년 “웹 콘텐츠의 25%에서 30% 사이가 중복”이라고 밝혔고 (Search Engine Land, Google’s Matt Cutts: 25-30% Of The Web’s Content Is Duplicate Content, 2013-12-16), 게리 일리스는 2022년 11월 싱가포르 Search Central Live에서 “인터넷의 60%가 중복”이라는 슬라이드를 띄웠다 (Search Engine Roundtable, Google Says 60% Of The Internet Is Duplicate, 2022-11-25). 웹의 절반 이상을 처벌할 수는 없다.
구글이 하는 일은 처벌이 아니라 선택이다. 존 뮬러는 2021년 “중복에 부정적 점수가 붙는 것이 아니라, 같은 정보가 여러 페이지에 있으면 그중 가장 잘 맞는 페이지를 찾으려 한다”고 설명했다 (Search Engine Journal, Google: Duplicate Content is Not a Negative Ranking Factor, 2021-01-31).
예외는 조작 의도가 있을 때다. 구글 스팸 정책은 “검색 순위를 조작하기 위해 자동화된 수단을 통해 다른 사이트의 콘텐츠를 가져와 호스팅하는 행위”를 스크래핑으로 규정하고, 동의어만 바꿔 재게시하는 것도 여기에 넣는다 (Google 검색 센터, Google 웹 검색의 스팸 정책). 내 사이트의 URL 변형과 남의 글 복사는 전혀 다른 문제다.
대부분 글을 두 번 써서가 아니라, 같은 글에 주소가 여러 개 붙어서 생긴다. 구글이 문서에서 드는 원인은 다섯 가지다.
| 원인 | 구글 문서의 예 | 흔한 형태 |
|---|---|---|
| 지역별 변형 | hreflang으로 미국과 영국 URL을 구분하지만 같은 언어의 같은 콘텐츠 | /us/, /uk/ |
| 기기 변형 | 모바일 버전과 데스크톱 버전이 따로 있는 경우 | m.example.com |
| 프로토콜 변형 | HTTP 버전과 HTTPS 버전이 둘 다 있는 경우 | http://, https://, www 유무 |
| 사이트 기능 | 카테고리 페이지의 정렬과 필터 | ?sort=price, ?page=2, 세션 ID, UTM |
| 실수로 인한 변형 | 데모 버전이 크롤러에 열려 있는 경우 | 스테이징 서버, 인쇄용 페이지 |
여기에 태그 페이지와 카테고리 페이지가 본문 전체를 실어 나르는 경우, 쇼핑몰이 제조사 제품 설명을 그대로 붙인 경우, 다른 사이트에 글을 재게시(신디케이션)한 경우가 더해진다. 마지막 둘은 사이트 사이의 중복이라 어느 쪽이 원본인지를 구글이 골라야 한다.
2026년 9월 15일 서치폴라리스 도메인에 위 변형을 직접 요청해 봤다. http와 www 주소는 https 비www로 301 리디렉션됐고, 슬래시 없는 위키 URL은 슬래시 있는 URL로 리디렉션됐으며, UTM 파라미터가 붙은 URL은 캐노니컬 태그가 원래 URL을 가리켰다. 변형 자체는 어느 사이트에나 있고, 처리가 돼 있느냐가 다를 뿐이다.
페널티 대신 세 가지 비용이 생긴다. 구글 문서가 직접 드는 것은 사용자 혼란과 실적 추적의 어려움이고, 나머지는 신호 분산과 크롤링 낭비다.
첫째, 대표 URL을 구글이 고른다. 구글은 “동일해 보이거나 주된 콘텐츠가 서로 매우 유사한 페이지를 여러 개 발견하면 클러스터링”한 뒤 “객관적으로 가장 완전하며 검색 사용자에게 유용한 페이지를 선택”해 표준으로 삼는다 (Google 검색 센터, URL 표준화란 무엇인가요?). 내가 원하는 URL이 아닐 수 있다.
둘째, 링크 신호가 나뉜다. 같은 글에 백링크가 URL 두 개로 갈라져 들어오면 한 URL에 모였을 힘이 반으로 준다. 같은 사이트의 서로 다른 글이 같은 키워드를 두고 경쟁하는 키워드 카니발라이제이션과 원인은 다르지만 결과는 비슷하다.
셋째, 크롤링이 낭비된다. 구글은 “표준 페이지가 가장 정기적으로 크롤링되며, 중복 페이지는 사이트의 크롤링 부담을 줄이기 위해 이보다 적게 크롤링”한다고 밝힌다. 중복 URL이 수천 개인 대형 사이트에서는 새 페이지의 색인이 늦어지는 형태로 나타난다.
구글 서치콘솔의 페이지 색인 보고서에서 “사용자가 선택한 표준이 없는 중복 페이지”와 “Google이 사용자와 다른 표준을 선택함” 항목을 보는 것이 가장 정확하다. 구글이 실제로 어떤 URL을 묶어 어느 쪽을 대표로 골랐는지 그대로 보여 준다.
2번 방법을 서치폴라리스에 적용해 봤다. 2026년 8월 18일부터 9월 14일까지 서치콘솔에 노출된 URL은 141개였고, 정규화하면 140개로 줄었다. 합쳐진 한 쌍은 끝 슬래시만 다른 /blog/sov와 /blog/sov/였고, 이 둘은 현재 /wiki/sov/로 301 리디렉션돼 있다. 나머지 37개는 같은 페이지의 헤딩 앵커(#)가 붙은 URL이라 구글이 애초에 한 페이지로 취급한다.
대표 URL 하나를 정하고, 나머지 URL이 그쪽을 가리키게 만드는 것이다. 구글은 신호의 세기 순으로 리디렉션, rel=“canonical”, 사이트맵 포함을 꼽는다.
| 상황 | 처방 | 설명 |
|---|---|---|
| http와 https, www와 비www | 301 리디렉션 | 가장 강한 신호. 서버 설정 한 줄로 사이트 전체를 해결 |
| 정렬, 필터, UTM 등 파라미터 URL | 캐노니컬 태그로 원래 URL 지정 | 페이지는 그대로 두고 대표만 알린다 |
| 모바일 전용 주소 | 반응형으로 통합하거나 캐노니컬과 alternate로 연결 | 구글은 모바일 우선 색인이므로 통합이 낫다 |
| 같은 언어의 지역별 페이지 | 캐노니컬과 hreflang을 함께 | 구글은 “표준화와 hreflang를 모두 사용”하라고 안내한다 |
| 내용이 거의 같은 글 두 편 | 한 편으로 합치고 옛 URL을 301 리디렉션 | 링크 신호를 한 URL로 모은다 |
| 다른 사이트에 재게시한 글 | 재게시본에 원본을 가리키는 캐노니컬을 요청하거나 링크로 출처 표기 | 구글이 원본을 대표로 고르게 돕는다 |
| 태그, 검색 결과, 스테이징 페이지 | noindex 또는 robots.txt 차단 | 색인할 가치가 없는 변형 |
캐노니컬은 힌트라서 구글이 다른 URL을 대표로 고를 수 있다. 확실히 하나로 합쳐야 하면 리디렉션이 답이고, 사이트 안의 내부 링크와 사이트맵도 전부 대표 URL만 가리키게 맞춘다.
다르다. 유튜브의 “중복 콘텐츠”는 다른 사람의 영상을 재사용한 채널의 수익 창출을 막는 유튜브 파트너 프로그램 정책이고, SEO의 중복 콘텐츠는 같은 글이 여러 URL에 있을 때 구글이 대표 URL을 고르는 문제다. 구글 자동완성에서 “중복 콘텐츠” 다음에 “유튜브”와 “인스타”가 먼저 뜨는 이유가 이 동음이의다.
구글 서치콘솔의 페이지 색인 보고서가 무료이고 구글이 실제로 판단한 결과를 보여 주므로 가장 정확하다. 사이트 사이의 복사 여부는 본문 한 문장을 따옴표로 검색하면 확인할 수 있고, Copyscape나 Siteliner 같은 검사기는 이 과정을 자동화한 것이다.
페널티는 없지만 순위는 어렵다. 같은 문구가 수백 개 쇼핑몰에 있으면 구글은 그중 가장 완전하고 유용한 페이지 하나를 고르고, 나머지는 검색 결과에서 보기 어렵다. 규격 정보는 그대로 두되 사용 후기, 비교, 사진 같은 고유한 내용을 더해야 대표로 선택될 가능성이 생긴다.
서치폴라리스가 AI 검색 가시성을 진단하고 GEO 실행까지 대행합니다.