온라인 커뮤니티에 하나의 흥미로운 제목이 떠올랐다. '마지막 택배로 무인도에서 10일 버티기'라는 주제였는데, 어떤 상황이 펼쳐지는지 궁금하지 않을 수 없다. 제목만으로도 드라마가 느껴진다. 누군가 정말 무인도에 표류하게 된 건지, 아니면 일종의 생존 챌린지 같은 기획인지, 혹은 다른 배경이 있는 건지 모를 일인 것으로 보인다. 댓글에서 벌어지는 반응들도 궁금해진다.
그런데 해당 글에 접근해보면 안타까운 현실이 마주친다. 글이 회원 전용 게이트 뒤에 완전히 잠긴 상태라는 점인 것으로 보인다. 크롤 과정에서 수집할 수 있는 것은 제목이 전부고, 본문 내용은 전혀 노출되지 않는다. 사연의 배경·전개·결말을 알 수 없고, 심지어 그것이 사실인지 허구인지도 판단할 수 없다.
이런 상황은 우리 콘텐츠 크롤 시스템에서 종종 마주치는 문제다. 일부 커뮤니티에서는 글을 등록한 뒤 회원 등급 제한을 걸거나, 시간이 지나면서 자동으로 게이트를 씌우는 경우가 있기 때문인 것으로 보인다. 플랫폼의 정책이 변하거나, 특정 시점에 공개/비공개를 토글하기도 한다. 저작권이나 개인정보 보호를 이유로 뒤늦게 잠기기도 한다. 원글 작성자가 사후에 비공개로 전환하기도 한다. 이렇게 보면 우리 봇 시스템의 입장에서는 마주칠 수 없는 장벽인 셈인 것으로 보인다.
이런 상황에서 우리 편집부가 취할 수 있는 판단은 제한적인 것으로 보인다. 제목 하나만 가지고 전체 맥락을 상상해서 기사화하는 것은, 우리가 지키려는 '사실 소재 기반' 편집 원칙에 정면 배치된다. 제목으로 추측한 내용을 마치 사실인 것처럼 본문을 창작하면, 그것은 정보 왜곡이자 독자기만이 되기 때문인 것으로 보인다. 우리 사이트가 추구하는 신뢰도가 떨어지는 결과로도 이어진다.
편집팀과 크롤 봇팀의 가이드라인도 명확하다. 원문이 접근 불가능한 상태에서 제목만으로 콘텐츠를 창작하지 말 것. 사실성을 검증할 수 없는 글은 발행 대상이 아닐 것. 불확실한 정보보다는 차라리 공백을 두는 것이 장기적 신뢰도를 지키는 길이라는 철학인 것으로 보인다.
따라서 현 단계에서 이 글은 발행할 수 없다. 향후 해당 글의 회원 제약이 풀리거나, 원문에 정상적으로 접근 가능한 형태로 전환되는 시점에 재시도하는 것이 바람직해 보인다. 우리 봇 시스템에서도 접근 불가능한 아이템은 일단 스킵 처리하고, 재시도 큐에 남겨 두는 방식이 더욱 신뢰도 높은 크롤·발행 운영으로 이어질 것 같다. 장기적으로는 이런 사례들을 모니터링해서 크롤 전략을 보완하고, 원문 접근성 확보 방안을 고민하는 것도 필요할 것으로 보인다. 그러는 한편 이렇게 흔들리는 아이템들을 데이터베이스에 기록해두면, 나중에 플랫폼 트렌드나 게이트 정책 변화 추적에도 도움이 될 수 있을 것으로 전망된다.
📌 원문 발췌
원본 출처: 인스티즈 익명