시음도 않고 와인 품질 어떻게 알았을까? “데이터 분석해봐 답 나오잖아”

【 슈퍼 크런처 】 이언 에어즈 지음 북하우스 펴냄

#1. 겨울 강수량이 10㎜ 늘어날수록 와인의 기대가격은 0.00117달러 올라간다. 반면 수확기 강수량과 가격은 반비례한다. 수치분석가(넘버 크런처) 올리 이셴펠터의 와인 품질 계산법은 처음 몇년간 와인비평가들의 비난을 받았다.

시음하지 않고 와인 품질을 말하는 것은 영화감독과 주연의 이름만으로 영화를 평가하는 것과 같다는 이유다. 그러나 모두가 ‘훌륭한 빈티지’라고 주장한 1986년산 포도주를 ‘끔찍한 것’으로 평결하고, 1989년과 1990년산 보르도와인은 비평가들이 맛도 보기 전에 ‘세기의 와인’으로 꼽은 그의 공식은 결국 맞아떨어졌다.

#2. 야구전문작가 빌 제임스는 선수를 관찰하는 것만으로 선수의 재능을 판단할 수 있다는 야구전문가들의 견해에 도전장을 내밀었다. 타율이 3할인 타자와 2할 7푼 5리의 타자의 안타수 차이는 2주당 1개. 육안으로 확인할 수 없다는 것이다. 따라서 출루율에 중점을 두고 특히 볼넷을 많이 얻어내는 선수에게 높은 점수를 주는 식으로 득점에 대한 타자의 기여도를 구체적으로 평가하는 의사결정이 필요하다.

이런 분석 방식은 오클랜드 애슬레틱스의 괄목할 성장과 보스턴 레드삭스의 86년만의 월드시리즈 우승에 영향을 미쳤다.

와인평론가의 혀와 코, 스카우트 담당자의 명확한 눈보다 더 정확하게 미래를 예측하는 공식, 이것을 만들어내는 사람이 ‘슈퍼 크런처(Super Cruncher)’다.

●영화흥행·다이어트 성패도 예측

뉴욕타임스 ‘괴짜경제학’의 공동칼럼니스트인 이언 에어즈 예일대 교수는 ‘슈퍼 크런처’(안진환 옮김, 북하우스 펴냄)에서 기업, 공공기관 등에서 광범위하게 활약하며 미래 예측의 파워 그룹으로 부상한 슈퍼 크런처를 낱낱이 파헤친다.

슈퍼 크런처는 대규모 데이터를 분석해 서로 무관해 보이는 일들 사이의 상관관계를 발견하는 새로운 부류의 수치분석가를 말한다.

아마존닷컴이 ‘다빈치코드’를 구입한 고객에게 ‘성혈과 성배’를 추천하고, 판도라닷컴은 브루스 스프링스턴을 입력하면 이 가수의 노래뿐만 아니라 유사한 음악을 제안한다.

인터넷에서 열어본 기사의 특정한 코드를 읽어 관심기사 목록을 보여 주고, 영화의 감독이나 주연배우의 인지도에 관계없이 시나리오만으로 영화제작자보다 훨씬 더 정확하게 흥행작을 예측하기도 한다. 국내외 기업에서 각종 마케팅 전략을 주도하고, 공공정책을 실험하는 데도 중요한 역할을 한다.

테라바이트(1024기가바이트)나 페타바이트(1024테라바이트)에 이르는 슈퍼 크런처의 데이터는 전문가의 경험이나 직관과 맞바꿀 수 없는 절대적인 ‘진실’이 된다.

저자는 슈퍼 크런처는 일상생활에도 적용가능하다고 말한다. 다이어트의 경우 각각 성공과 실패 확률이 높은 방법을 통계적으로 분석하고, 적정 수준의 감독과 참견을 덧붙여 성공률을 높인다. 임부의 나이와 키, 임신 전 체중이나 대학교육 등의 요소로 정확한 출산일을 예측하는 식이다.

●전문가 경험·직관 넘어서는 분석가들

에어즈 교수는 “슈퍼 크런칭이 기세를 올리고 있다고 해서 직관이 종말을 고한다거나 실무경험이 중요하지 않게 된다는 뜻은 아니다. 또한 조악한 슈퍼 크런칭의 남발도 경계해야 한다.”고 강조한다.

그는 “슈퍼 크런칭은 직관과 경험이 데이터에 입각한 의사결정과 상호작용하며 진화한다.”면서 “통계적 능력과 감각적 자질을 동시에 갖추는 사람들이 최고로 대접받는 새로운 시대가 도래할 것으로 보는 게 옳다.”고 설명했다. 1만 5000원.

최여경기자