루키의 보석함

"본 글은 2014년 2월 14일 지디넷코리아에 기고한 칼럼입니다." 최근 금융권에서 개인정보가 대량으로 유출돼 사회적으로 큰 이슈가 되고 있다. 비록 해킹을 통한 정보 유출이 아니었지만 개인정보 보호에 대한 중요성이 높아지는 계기가 됐다. 빅데이터 분석과 관련해서도 개인정보 보호 측면이 매우 중요하다. 많은 데이터를 처리하다 보면 개인 정보가 포함될 가능성이 높기 때문이다. 특히 고객 데이터를 분석해서 개별 고객에게 맞춤형 서비스로 제공한다고 가정해 보자. 고객은 기업이 제공하는 세심한 서비스에 감동할 수도 있지만, 반대로 자신의 정보가 노출됐다는 생각에 불편해 질수도 있다. 그렇다면 빅데이터 분석에서 개인정보보호는 어떻게 접근해야할까? 먼저 빅데이터를 처리하는 플랫폼에 보안 관련 요소들을 추가해야 한..

"본 글은 2014년 1월 9일 지디넷코리아에 기고한 칼럼입니다." "집에 책이 많으면 아이의 학교 성적이 좋은가?"와 같은 질문을 던지면 통계학에서 쓰이는 회귀 분석은 적절한 대답을 내놓지 않는다. 하지만 그와 약간 다른 질문에는 답을 해줄 수 있다. 예를 들면 다음과 같은 질문이다. "집에 책이 많은 아이는 집에 책이 전혀 없는 아이보다 공부를 더 잘하는 경향이 있는가?" 스티븐 레빗(Steven Levitt)이 쓴 "괴짜 경제학"에 나오는 이야기이다. 두 질문의 차이는 무엇일까? 전자는 원인과 결과를 묻는 인과관계(Causality)에 대한 질문이다. 후자는 둘 사이의 관련이 있는지를 알고자 하는 상관관계(Correlation)를 나타낸다. 분석을 통해 상관관계를 쉽게 찾을 수 있으므로 두번째 질문..

괴짜 경제학 (개정증보판) - 스티븐 레빗 외 지음, 안진환 옮김/웅진지식하우스(웅진닷컴) 미니 서평 윤리학은 이상세계를 반영하고, 경제학은 현실 세계를 반영한다. 괴짜 경제학을 살펴보면 사회적 통념에 대해 기존의 방식과 다르게 관찰하고 분석하는 것을 주로 이야기하고 있습니다. 교사의 부정행위를 확인하기 위해 1993년에서 2000년까지 연간 학년당 약 3만 명의 학생들이 제출한 70만 장의 답안지, 그리고 거의 1억 개 이상의 답을 비교 분석한다든지 스모 선수와 승률을 분석하기 위해 1989년 1월에서 2000년 1월까지 일본에서 가장 훌륭한 스모 선수들이 치렀던 모든 공식 경기의 결과, 즉 281명의 스모 선수들 사이에 있었던 약 3만 2,000건의 시합에 대한 데이터를 확인합니다. 요즘 말하는 빅데..

지난 11월 21일 삼성동 EMC 이펙트 데이 행사장에서 코스콤이 "빅데이터로 주가를 예측하다"라는 주제로 연초부터 진행해 온 주가예측분석 플랫폼과 활용 경험을 제시했다. 빅데이터 분석의 다양한 활용 분야 중 하나로 주식을 주목하고 있는 것이다. 기사에 따르면, 소셜 데이터를 통한 분석도 진행중이라고 한다. 기존 주식 데이터의 분석에 외부 환경을 고려한 소셜 데이터 분석은 좋은 아이디어라고 본다. 그리고 코스콤의 주가분석지수 'K-SMD12'는 국내외 증시 동향과 감성분석을 바탕으로 5일 미만의 단기예측을, 'K-SMD26'는 통계청 지표를 활용해 1개월, 6개월 이후 등 중기예측에 쓰인다고 한다. 하지만 위 제품을 검색해봐도 기사 내용 이외에는 나타나지 않아 실제 활용을 해볼 수 없다는 점과 더불어, ..

일리아스 통독: 2013.05.20 ~ 2013.12.08 일리아스는 호메로스의 대서사시 중 하나로 트로이 전쟁 중 일부를 다루고 있으며 전체적인 서사는 다음과 같습니다. 펠레우스의 아들 아킬레우스와 인간들의 왕 아가멤논의 논쟁 때문에 트로이 전쟁에 참여하지 않게 되고, 계속되는 전쟁 중에 서서히 아카이오이족이 밀리면서 아킬레우스를 대신해 전장에 나선 파트로클로스가 트로이의 영웅 헥토르에게 죽임을 당하고 이에 분노한 아킬레우스가 헥토르에게 복수를 한 후, 트로이 왕 프리아모스가 아들 헥토르의 시신을 찾아와 장례를 치루는 것으로 끝이 납니다. 어릴 적 트로이 전쟁을 동화책으로 재미있게 읽었었기 때문에 처음부터 흥미를 가지고 읽기 시작했는데요. 수많은 신과 영웅들, 그리고 다양한 수식어와 웅변하는 듯한 문체..

"본 글은 2013년 12월 5일 지디넷코리아에 기고한 칼럼입니다." 빅데이터 분석에 관심이 높아짐에 따라 '플라이 블라인드'(Fly Blind)라는 표현을 많이 사용한다. 앞이 안 보이는 채로 비행한다는 것이데, 비즈니스에선 데이터 분석 보단 단순히 직관에 의존해 업무을 처리하는 걸 뜻한다. 좋은 시나리오 작가와 유명 배우들 그리고 훌륭한 감독을 선정해 블록버스터 영화를 만든 다음, 충분한 시장조사와 사전 분석 없이 대박을 기대하면서 전 세계에 상영하는 것과 비슷하다 할 수 있다. 반면 빅데이터 분석은 주로 TV 시트콤에 비유된다. 시트콤은 시청자들의 피드백에 따라 시나리오나 인물 캐릭터가 변화한다. 매회 시청률 등을 분석해서 다음 회에 반영하는 방식이 쓰인다. 이게 바로 분석적인 접근이다. 처음 빅데..

린 스타트업 - 애시 모리아 지음, 위선주 옮김, 최환진 감수/한빛미디어(한빛아카데미) 미니 서평 반증 가능한 가설 = [구체적이고 반복 가능한 행동]을 하면 [측정 가능한 예상 결과]를 얻을 것이다. 에릭리스의 린 스타트업이 지속가능한 사업을 수행하기 위한 방법을 이야기 하고 있다면, 애시 모리아의 이 책은 실제 현업에서 어떻게 적용할 수 있는지를 단계별로 보여주고 있습니다. 이 책을 쓰는 과정이나 클라우드파이어라는 서비스를 만드는 과정을 통해 이야기함으로써 보다 쉽게 이해할 수 있었네요. 특히 비즈니스 모델을 위한 Nine Blocks를 기반으로 만든 린 캔버스는 바로 현업에 적용하기에도 유용한 듯 합니다. 이러한 린 캔버스는 실제 http://www.leanstack.com에 가면 무료로 활용할 수..

"본 글은 2013년 11월 12일 지디넷코리아에 기고한 칼럼입니다." 최근 빅데이터 분석에서 실시간(real-time) 처리에 대한 요구가 늘었다. 주요 빅데이터 기술로 널리 사용하는 하둡(Hadoop)은 배치 처리에 기반해, 하둡 맵리듀스 동작 시간을 최대한 줄일 수는 있어도 실시간 처리에는 한계가 있다. 빅데이터 분석은 그동안 처리하지 못했던 많은 데이터에서 의미있는 정보를 추출해 내는 것이므로 필자는 처음에만 해도 실시간 처리는 큰 의미가 없을 것으로 판단했던게 사실이다. 그러나 데이터 분석 컨설팅을 진행하면서 실시간 처리에 대한 요구가 꽤 높다는 것을 알게 됐다. 예를 들어, 새로운 모바일 앱을 출시했을 때 사용자 증가 추이를 바로 확인하거나 광고 프로모션을 진행한다면 실시간으로 광고 효과를 알..

10월 30일 ~ 31일 사이에 삼성동 코엑스 인터콘티넨탈에서 진행된 GMV 2013에 참석했습니다. 글로벌 포럼, 전시회, 1:1 바이어 상담 등으로 진행되었는데요. 국내 뿐 아니라 해외 업체들의 반응을 확인할 수 있고, 글로벌 서비스를 위한 협의를 할 수 있는 좋은 기회였던 것 같습니다. 예전에는 주로 전시회 부스를 준비해서 참석했었는데.. 이번에는 1:1 바이어 상담을 중심으로 진행했습니다. 전시회 부스는 많은 사람들에게 보여줄 수 있다는 장점이 있지만 깊이있는 논의가 부족한 면이 있었는데, 1:1 미팅은 약 한시간 동안 미리 선정된 업체와 자유롭게 협의를 할 수 있어서 좋았습니다. 미국의 Sprint, 중국의 Vivo/Sohu.com/Insta Investment, 일본의 Hitachi, 콜롬비아..

지난 23일 산업통상자원부 기술표준원 주최로 "Open Cloud & Open Standard" 컨퍼런스가 열렸습니다. 최근 이슈인 오픈 스택(Open Stack)의 Tom Fifield가 오픈 클라우드 및 표준화 사례에 대해 발표하고, 래드햇(Redhat)도 최신의 오픈 소스 기반 클라우드를 소개했네요. 컨퍼런스 마지막 세션으로 클라우드를 활용한 모바일 분석 플랫폼으로 핑그래프(Fingra.ph) 발표를 했습니다. 현재까지의 Fingra.ph 진행 과정과 향후 SAAS 플랫폼으로 발전할 방향에 대해서 공유하는 자리였습니다. 참석한 많은 분들이 격려해주고 글로벌로 성장하는 Fingra.ph를 응원해 주셔서 감사했습니다.