1.
Geeknews를 통해 접속 글입니다. Walrus에 실린 Google Search Is Dying. What Comes Next Is Worse입니다. 급 관심을 가진 이유는 아래입니다.
As AI eats the web, the internet’s collective memory is disappearing
집단 기억(Collective Memory)라는 표현때문입니다. 되돌아보면 전통적인 웹은 인터넷을 통한 집단적인 기억라는 표현이 꼭 맞습니다. 우리 사회가 가지는 관심과 무척 다릅니다. 해외로 눈을 돌리면 아래 글에서도 나오는 Internet Archive와 같은 프로젝트들이 여럿있습니다. 인터넷 초기에는 아날로그 저작물을 디지탈로 복원하거나 저자하는 프로젝트들이 주류였지만 몇 십년의 시간이 지나면서 디지탈로 만들어진 지식들을 저장하는 프로젝트들이 늘어났습니다. 이런 프로젝트들이 어려움을 겪고 있고 AI로 이해 미래는 더 불명확해집니다.
이런 환경에서 쓴 글입니다.
알고 보니 많은 사람들이 구글에 해가 언제 지는지 물어보는 것으로 나타났습니다. 알아두면 좋은 사실입니다. 해질녘 시간을 대략적으로 파악해 두면 자전거 타기, 바비큐 파티, 혹은 타이밍을 완벽하게 맞춘 무도회 초대 등을 계획하는 데 도움이 될 수 있습니다. 해질녘은 2분 30초에서 4분 정도만 지속되며, 적도와의 거리에 따라 달라지기 때문에 정확한 시간을 파악하기 까다로운 현상입니다.
최근 일몰을 즐기는 사람들은 구글의 새로운 AI 요약 기능이 시간을 임의로 만들어내기 시작했다는 사실을 알아차렸습니다. 콜로라도스프링스에 사는 한 페이스북 사용자는 “야외에 프로젝터를 설치하고 해가 지기를 기다리고 있었는데, 놀랍게도 나는 그저 과거에 살고 있었던 셈이었습니다. AI가 일몰이 이미 끝났다고 알려주었거든요”라고 썼습니다. 사소한 실수이자, 심지어 우스꽝스럽기까지 한 일입니다. 하지만 이러한 사례들은 더 큰 문제를 시사합니다. 바로 세계를 주도하는 검색 엔진이 이제 기본적인 사실조차 제대로 파악하지 못하고 있다는 점입니다. 정확한 답을 제공함으로써 명성을 쌓아온 이 회사는, 한 기술 전문가가 지적했듯이, “경쟁력을 잃었다”고 할 수 있습니다.
그럼에도 우리는 인터넷이 모든 것을 알고 있을 거라고 계속 기대하기 때문에 구글 검색을 멈추지 않습니다. 그 고집스러운 희망은 정보 접근에 관한 거의 모든 논쟁의 토대가 됩니다. 검색 결과가 나빠지면 우리는 구글이 ‘망가졌다’고 투덜거립니다. AI가 허황된 결과를 내놓으면 모델이 ‘허술하다’고 말합니다. 허위 정보가 퍼지면 우리는 진실이 여전히 ‘어딘가에’ 존재하며, 우리가 더 나은 검색어를 조합하기만을 참을성 있게 기다리고 있다고 스스로를 위로합니다. 웹이 AI의 엉터리 정보로 오염되어 가는데도, 우리는 이것이 단지 기술적 문제일 뿐이라고 믿으며 검색 팁을 공유한다.
하지만 한때 ‘진실’을 저장해 두었던 인프라가 무너지고 있어서 온라인에서 ‘진실’을 찾기가 더 어려워진다면 어떨까? 그중 일부는 자연스러운 노후화 때문이다. 링크 부패로 인해 매일 수많은 페이지가 사라진다. 코딩 오류로 인해 미국 헌법의 핵심 조항들이 잠시 미국 의회 도서관 웹사이트에서 사라지기도 했습니다. 하지만 구글은 우리와 원본 자료 사이에 오류가 잦은 AI를 끼워 넣음으로써, 원본 페이지가 존재하더라도 사실상 찾을 수 없게 만들었습니다. 한편, 이러한 오염은 이제 상류로 확산되고 있습니다. 404 미디어(404 Media)의 보도에 따르면, 일부 기업들이 AI 검색이 생성하는 답변에 영향을 미치기 위해 레딧(Reddit)에 콘텐츠를 심어놓고 있으며, 이로 인해 해당 시스템이 요약 내용을 추출하는 공개 기록이 오염되고 있습니다.
문화 유산 자료가 실시간으로 붕괴되고 있다. 이렇게 훼손된 디지털 공간은 문화적 주권에 대한 더 폭넓은 이해를 요구한다. 현재 이 논쟁은 주로 넷플릭스, 유튜브, 스포티파이 같은 외국 거대 플랫폼들이 캐나다 콘텐츠를 지원해야 하는지에 대한 싸움으로 규정되고 있다. 이러한 격렬한 논의는 더 근본적인 질문, 즉 ‘누가 우리의 문화적 기록을 보존하고, 현재뿐만 아니라 후손들을 위해 그 접근을 통제할 것인가’라는 문제를 회피하고 있다.
검색은 더 이상 안정적인 지식 체계를 향한 중립적인 관문인 척할 수 없다. 웹은 온라인에서 무엇이 남고 누가 그것을 볼지를 결정하는 중개자들을 중심으로 항상 조직되어 왔지만, 오늘날 인터넷의 아카이브 기능은 매우 다르며 종종 상충하는 우선순위를 가진 이해관계자들의 끊임없는 압박 속에서 무너지고 있다. 적어도 도서 금지는 눈에 띄게 이루어진다. 악당도 있고, 교육위원회 회의도 있으며, 선정적인 헤드라인도 있다. 반면 디지털 삭제는 더 교묘하며, 어떤 면에서는 훨씬 더 파괴적이다. 금지된 책은 여전히 찾을 수 있다. 하지만 삭제된 웹 페이지는 그 존재 자체를 눈치채는 사람이 거의 없을 정도로 완전히 사라져 버릴 수 있다.
여론조사 분석, 정치, 경제, 스포츠 블로그를 주로 다루던 미국 웹사이트 ‘FiveThirtyEight’의 사례를 살펴보자. 월트 디즈니 컴퍼니는 자회사를 통해 10년 넘게 이 블로그를 소유해 왔다. 설립자인 네이트 실버는 2023년에 떠났고, 2025년 3월이 되자 남아 있던 직원들까지 모두 해고되었다. 디즈니는 이 사이트가 더 이상 활성 자산이 아니라고 판단하자—새로운 기사도 없고 의미 있는 광고 수익도 없으니—아카이브 전체를 단번에 삭제해 버렸다.
이러한 정보 복원 위기는 세계에서 가장 중요한 자원봉사자 운영 공공 지식 자원 중 하나인 위키백과(Wikipedia)까지 미쳤다. 수년 동안 검색 엔진은 수십억 명의 방문자를 위키백과 페이지로 유도했다. 하지만 이제 AI 시스템은 검색 결과를 제시할 때 위키백과의 콘텐츠를 직접 수집하고 흡수함으로써, 사용자가 링크를 클릭할 필요성을 없애버렸다. 위키백과는 스스로의 몰락을 초래하는 인프라가 되어버렸다. 트래픽 감소는 이 백과사전을 유지하기 위해 필요한 관심과 기부금이 더 이상 안정적으로 유입되지 않음을 의미한다.
인터넷 아카이브(Internet Archive)에 일어나고 있는 일 역시 우려스럽기 그지없습니다. 비영리 디지털 도서관인 이곳은 오디오 녹음부터 역사적 문서, 도서에 이르기까지, 그렇지 않으면 사라질 수도 있는 자료들을 수집하여 공개합니다. 이곳은 다양한 시점의 웹 페이지를 수천억 건이나 캡처해 둔 서비스인 ‘웨이백 머신(Wayback Machine)’으로 가장 잘 알려져 있습니다. 언론인, 연구자, 역사학자, 변호사, 그리고 일반 대중은 이 서비스를 이용해 삭제된 페이지를 복원하고, 과거의 발언을 확인하며, 온라인 콘텐츠의 변경 사항을 기록합니다. ‘웨이백 머신’은 웹에서 오류 방지 백업 메모리에 가장 가까운 존재입니다.
그러나 이 프로젝트 전체는 끊임없이 늘어나는 정보 저장소를 색인화하고 저장해야 하는 기술적 부담으로 인해 어려움을 겪고 있을 뿐만 아니라, 사이버 공격과 막대한 비용이 드는 소송으로 인해 큰 타격을 받고 있다. 출판사들이 인터넷 아카이브의 디지털 대여 프로그램을 ‘무단 복제’라고 주장하며 소송에서 승소한 이후, 언론사들은 아카이브된 페이지가 AI 기업들에게 저작권이 있는 자료의 간접적인 출처가 될 수 있다는 우려로 ‘웨이백 머신’의 크롤러 접근을 차단하기 시작했다. 이러한 새로운 제한 사항들은 아카이브가 포괄적인 안전망 역할을 수행하는 능력을 점점 더 제한하고 있습니다.
인스타그램 스토리나 왓츠앱 상태 업데이트와 같은 일시적인 형식의 사용이 증가함에 따라, 문화적·사회적·정치적 소통의 상당 부분이 애초에 보존되지도 않게 되었다. 사회 차원에서 볼 때, 우리는 검색 결과가 형편없어도 어떻게든 버틸 수 있고, 해질녘에 키스할 약속을 잡을 다른 방법을 찾아낼 수 있을 것이다. 하지만 우리의 집단적 기억을 보존하고 되살릴 수 없다면, 주권을 추구할 수 없다.
당분간은 여전히 구글을 통해 다른 국가 정부들이 구글에 대한 대안을 어떻게 구축하고 있는지 알아볼 수 있습니다. 프랑스는 외국 플랫폼을 기술 주권과 국가 사이버 보안 모두에 대한 위협으로 간주하게 되었습니다. 2018년 말, 프랑스 국민의회와 국방부는 선견지명을 발휘해 유럽에서 호스팅되는 프랑스 서비스인 ‘Qwant’를 도입하기 시작했습니다. Qwant는 다른 운영 모델을 따릅니다. 검색 데이터를 저장하지 않고, 개인정보를 판매하지 않으며, 사용자의 검색 기록을 기반으로 한 타겟 광고를 사용하지 않습니다. 720명의 선출 의원과 수천 명의 행정 직원을 보유한 유럽의회도 이 서비스로 전환했는데, 이는 정보 검색 자체가 그 자체로 전략적 자산이라는 인식이 확산되고 있음을 반영합니다.
빅테크 기업들과의 사소한 결별 하나하나가 가능성의 문을 더 활짝 열어줍니다. 프랑스는 이제 공무원들에게 정부 내부 소통 시 WhatsApp이나 Signal과 같은 외국 플랫폼을 대체하는 자국산 메신저 앱인 ‘Tchap’을 사용하도록 의무화하고 있습니다. 유럽 각국 정부도 실리콘밸리로부터의 탈피 움직임에 동참하여, 수십만 대의 업무용 컴퓨터에서 마이크로소프트 제품을 오픈소스 대안으로 교체하고 있다. 유럽연합 집행위원회는 최근 스웨덴 스타트업이 만든 새로운 독립 소셜 사이트인 ‘W Social’에 가입하겠다고 발표했다. 덴마크의 디지털화 담당 장관인 캐롤라인 스테이지 올센(Caroline Stage Olsen)은 다음과 같이 말했다. “오늘날 너무 많은 공공 디지털 인프라가 극소수의 외국 공급업체에 얽매여 있다. 이는 우리를 취약하게 만든다.”
이러한 대립 분위기는 일부 국가들로 하여금 한 걸음 더 나아가게 만들고 있다. 획기적인 선례가 될 수 있는 판결에서, 독일 법원은 최근 구글의 AI 요약 기능이 생성한 허위 진술에 대해 구글에 책임을 물었다. 이 사건은 구글의 AI가 두 출판사를 사기성 사업 관행과 잘못 연결 지은 데서 비롯되었다. 법원은 검색 엔진이 정보를 추출하여 자체적인 표현으로 재구성하기 때문에, 단순히 사용자에게 공개 기록을 중립적으로 안내하는 것을 넘어선 행위를 하고 있다고 판단했다. 이는 완전히 새로운 차원의 콘텐츠를 창작하는 것이며, 이에 따라 편집상의 책임도 따르게 된다. 해외 기술 기업들이 더 이상 정보의 수동적인 전달자라고 주장할 수 없게 된다면, 정부는 이들 기업을 규제하는 데 있어 더 큰 재량권을 갖게 될 수 있다.
구글은 이 판결에 항소 중이지만, 핵심은 분명해졌다. 정보 경제를 관리하는 일은 더 이상 예산이 부족한 기관들의 부수적인 과제가 될 수 없다. 위키백과가 기적과도 같은 존재라면, 웨이백 머신은 없어서는 안 될 필수 요소다. 그럼에도 우리는 자원봉사만으로는 공공 인터넷을 지탱할 수 있다는 척을 그만둬야 한다. 우리는 다른 분야에서는 이러한 의무를 더 명확히 이해하고 있다. 결국, 도로는 차량 공유 기업이 관리하지 않으며, 결제 앱이 통화 정책을 결정하지도 않고, 클라우드 서비스 제공업체가 국가 안보 체계를 좌지우지하지도 않는다(적어도 아직은 아니다). 그러나 우리는 디지털 의존성을 관리하는 데 있어 놀라울 정도로 안일한 태도를 보여왔다.
구글의 수석 경제학자가 승인한 AI 전략을 가진 국가가, 국가의 일상적인 정책 업무를 광고 회사를 통해 처리하는 방식을 중단하기로 결정할 것이라고 상상하기는 어렵다. 개인정보 보호를 기본 설정으로 전환한다면, 캐나다는 불필요한 데이터 유출을 줄일 수 있을 뿐만 아니라, 공공 기관이 검색을 단순한 ‘무료’ 소비자 서비스가 아닌 디지털 주권의 핵심 인프러스트럭처로 취급하고 있음을 보여줄 수 있을 것이다.
정보에는 경제적 가치가 있다. 개별 검색이 평범해 보일지라도, 이를 종합해 보면 사회와 시민에 대한 상당히 민감한 통찰을 얻을 수 있다. 정부가 무형 경제를 실질적으로 관리하는 데 진지하게 임하고자 한다면, 먼저 정보가 오래 보존되고 검색 가능하도록 하는 조건을 정비해야 한다. 우리가 완전히 백지 상태에서 시작하는 것은 아닙니다. 이미 이러한 공익 아키텍처의 일부가 존재합니다. 연방 웹 기록 및 기타 역사적 정보를 보존하는 ‘캐나다 국립도서관 및 기록보관소(Library and Archives Canada)’와, 본 기관과 협력하여 캐나다 대학들에 데이터 백업을 호스팅하는 ‘인터넷 아카이브 캐나다(Internet Archive Canada)’가 바로 그것입니다.
캐나다는 과거에도 이와 같은 디지털 인프라를 구축한 바 있습니다. CANARIE(원래 명칭은 ‘연구·산업·교육 진흥을 위한 캐나다 네트워크’)는 대학, 연구자, 혁신가들을 위한 국가 연구 및 교육 네트워크 구축을 지원했습니다. 1990년대에는 SchoolNet과 커뮤니티 접속 프로그램(Community Access Program)을 통해 인터넷 접속이 당연시되기 훨씬 전에 학교와 도서관에 인터넷을 제공했습니다. 사이먼 프레이저 대학교(Simon Fraser University)의 퍼블릭 나우ledge 프로젝트(Public Knowledge Project)는 2002년부터 ‘오픈 저널 시스템(Open Journal Systems)’을 세상에 선보이며, 수천 개의 학술지가 주요 상업 플랫폼의 지배에서 벗어나 출판할 수 있도록 도왔습니다. 메이플뮤직(MapleMusic)은 스트리밍이 문화적 발견을 잠식하기 전에 캐나다 음악을 위한 온라인 시장을 구축했습니다. 이 프로젝트들은 우리가 되살려야 할 전제를 공유하고 있습니다. 즉, 캐나다는 민간 플랫폼이 우리의 디지털 생활을 조직하고 통제하기를 기다릴 필요가 없다는 것입니다.
‘구글과의 옛 거래’—‘당신의 호기심을 우리에게 주면, 우리가 세상을 보여드리겠습니다’—는 이제 저물어 가고 있습니다. 그 다음에 떠오를 것은 더 기이하고 훨씬 더 인위적인 것일 수도 있습니다. 즉, 기계가 무작위로 기억하고 중개자들이 수익화하는 인터넷 말입니다. 아니면 더 견고한 무언가가 될 수도 있습니다. 즉, 인프라로 취급되는 공공 인터넷으로, 역사적 기억이 수익성이 있어서가 아니라 그것이 우리 것이기 때문에 보존되는 인터넷 말입니다.
공공 지식의 미래는 단순히 무엇이 존재하는지에만 달려 있는 것이 아니라, 그것을 보존할 주도권과 동기를 가진 주체가 누구인지에 달려 있습니다. 심지어 이 기사조차도 영원히 온라인에 남아 있지는 않을 것입니다. 과연 그래야 할까요?
2.
아래는 아주 개인적인 기록입니다. 역시 Geeknews를 통해 접한 사이트인데 AI를 만든 여러 논문을 소개합니다. 30 Papers입니다. AI기술에 큰 영향을 준 논문을 자의적으로 모아 소개하는 곳입니다. 이중 가장 오랜 자료가 Machine Super Intelligence
Shane Legg가 쓴 책입니다. 아마도 지능을 측정하는 수학적 모형을 다루었기때문이 아닐까 합니다.
1. Nature and Measurement of Intelligence
Explores various historical and psychological definitions of intelligence to identify recurring features and fundamental concepts across different perspectives. The summary highlights common themes among these foundational definitions, specifically focusing on an individual’s capacity to adapt to new environments, learn from experience, and solve complex problems effectively.
2. Universal Artificial Intelligence
Introduces specialized mathematical notations for probability measures and conditional probabilities used to analyze binary sequences. Explains how these concepts are applied to sequence prediction tasks by framing them as inductive inference problems evaluated using Bayes’ rule.
