인터넷에서 검색 자체를 상징할 정도로 Google은 검색시장에서 큰 점유율을 자랑하고 있습니다. 그런 상황에 경종을 울리는 기술자에 의해 설립된 Knuckleheads' Club이 "Google이 특권을 쥐고 있다"고 지적합니다.

Google's Got A Secret - Knuckleheads' Club
https://knuckleheads.club/

Google's Got A Secret - Knuckleheads' Club

Search Engines Depend On Crawling The Web Search engines depend on a process called web crawling. Crawling the web is where you program a bunch of computers to go across the Internet and save copies of everything that they find there. These copies are then

knuckleheads.club


Google Dominates Thanks to an Unrivaled View of the Web - The New York Times
https://www.nytimes.com/2020/12/14/technology/how-google-dominates.html

Google Dominates Thanks to an Unrivaled View of the Web

As regulators seek ways to curb the company’s power, there is more focus on the vast index — hundreds of billions of web pages — behind its search engine.

www.nytimes.com


"Google에 대항하다니 바보( Knucklehead ) 같은 짓'이라는 의미를 담아 명명된 Knuckleheads' Club에 따르면, 모든 검색엔진은 웹상의 문서나 이미지 등을 주기적으로 검색하고 자동으로 데이터베이스화하는 크롤링이라는 시스템에 의존한다고 합니다. 검색엔진은 크롤링으로 모든 사이트의 복사본을 만들어 둠으로써 사용자의 검색에 빠르게 반응할 수 있습니다.


크롤링은 사이트에 액세스하여 이루어지기 때문에 수많은 검색엔진이 끊임없이 크롤링을 하면 대역을 압박하거나 서버에 부담이 됩니다. 따라서 사이트의 관리자는 크롤링을 허용할 검색엔진의 수를 좁혀두지 않으면 안 됩니다. 이에 따라 일부 검색엔진, 특히 Google에게만 크롤링을 허용하는 경우가 완성된다는 것. 이것이 Knuckleheads' Club이 지적하는 'Google의 특권'입니다.

이에 대해 Knuckleheads' Club은 "Google만 대대적으로 크롤링이 가능한 현상황은 Google이 나쁜 것도 불법인 것도 아니지만, 매우 문제입니다. Google에 패배한 경쟁사들은 입을 모아 Google이 얼마나 우위에 있는지에 대해 토로합니다. 이것은 분명히 시장의 실패이기 때문에 Google의 독점상태를 타파하기 위해서는 각국 정부가 개입을 해야 한다고 우리는 생각하고 있습니다"라고 말합니다.


Knuckleheads' Club의 창시자인 자크 마릴 씨가 이 문제를 알게 된 것은, 음악 스트리밍서비스 Bandcamp에서 일하던 때의 일이었습니다. Bandcamp의 운영에는 Google 검색에서 많은 사람을 유치할 필요가 있었기 때문에 Google의 크롤러가 어떤 문제를 일으킬 때마다 마릴 씨는 그 문제의 해결하느라 분주하게 움직여야 했습니다. 그러나 다른 검색엔진 크롤러가 문제를 일으킨 경우, Bandcamp는 크롤러를 차단해 버리고 있었습니다.

이러한 검색시장의 현상황에 의문을 품게 되었던 마릴 씨는 Google과 직접 관련되지 않는 다른 기술기업으로 전직하는 한편, Google의 문제를 정리한 보고서를 작성하여 미국 의회에 제출하고 반독점소위원회 조사관과 면담하는 등의 활동을 시작하게 되었습니다.

그리고 2020년에는 Knuckleheads' Club을 설립하여 Google의 독점에 관한 조사 및 정책제언을 본격적으로 실시하고 있다고 합니다. 마릴 씨는 자신의 활동을 다룬 The New York Times의 인터뷰에서 "Google은 사회에서 큰 힘을 가지기에 이르렀습니다. 그 힘은 민주적으로, 즉 작은 목소리의 힘으로 제어되어야 한다고 생각합니다"라고 말합니다.

Posted by 말총머리
,