루키의 보석함

"본 글은 2013년 11월 12일 지디넷코리아에 기고한 칼럼입니다." 최근 빅데이터 분석에서 실시간(real-time) 처리에 대한 요구가 늘었다. 주요 빅데이터 기술로 널리 사용하는 하둡(Hadoop)은 배치 처리에 기반해, 하둡 맵리듀스 동작 시간을 최대한 줄일 수는 있어도 실시간 처리에는 한계가 있다. 빅데이터 분석은 그동안 처리하지 못했던 많은 데이터에서 의미있는 정보를 추출해 내는 것이므로 필자는 처음에만 해도 실시간 처리는 큰 의미가 없을 것으로 판단했던게 사실이다. 그러나 데이터 분석 컨설팅을 진행하면서 실시간 처리에 대한 요구가 꽤 높다는 것을 알게 됐다. 예를 들어, 새로운 모바일 앱을 출시했을 때 사용자 증가 추이를 바로 확인하거나 광고 프로모션을 진행한다면 실시간으로 광고 효과를 알..

린 캔버스에 대해서 다룬 비즈니스 모델을 위한 Nine Block에 대해 설명한 적이 있습니다. 또한 에릭 리스의 린 스타트업을 읽어보면, 지속가능한 비즈니스를 위해 만들기-측정-학습의 중요성을 이야기 하고 있죠. 결국 애자일 방법론처럼 빠른 개발을 하고, 고객의 피드백을 받아서 현재 사업 계획을 유지할지 다른 방향으로 전환할지를 끊임없이 고민해야 하는데요. 이럴때 기존 수십여장의 사업계획서는 한눈에 파악하기도 어렵고, 한번 수정하는데에도 많은 시간이 소요된다는 문제가 있습니다. 그래서 린 캔버스를 다시 살펴봤습니다. 애시모리아는 린 캔버스를 작성하는데 20분 이상을 걸리지 않아야 한다고 이야기 하고 있습니다. 사업계획서 역시 빠르게 만들고, 주변 사람들 그리고 고객들을 통해서 계속 검증하고 수정해 나가..

우분투에 R을 설치하기 위해 간단하게 apt-get을 사용하면 됩니다. $ sudo apt-get update $ sudo apt-get install r-base $ R 쉘에서 R을 입력하면 R 콘솔이 나타나게 됩니다. 기본적으로 R은 수많은 패키지를 사용할 수 있다는 장점이 있습니다. R 콘솔에서 다음과 같은 명령어로 필요한 패키지를 추가로 설치할 수 있습니다. > install.pakages("RMySQL") 그런데 패키지에 따라서 다음과 같은 오류 메시지가 나올 수 있는데요. Warning in install.packages : package ‘gplots’ is not available (for R version 2.14.1) 이때는 R 콘솔에서 쉘로 나가서 apt-get으로 찾아서 설치하면 됩..

두 변수 간의 통계적인 관계 측정 방식으로 사용하는 상관관계 측정으로 피어슨 상관계수, 스피어만 상관계수 등이 있다고 합니다. 피어슨 상관계수는 두 변수 X와 Y가 함께 변하는지와 따로 변하는지의 비율로 계산하는 것으로 가장 많이 사용된다고 합니다. X와 Y가 완전히 동일하면 +1, 완전히 다르면 0, 반대방향으로 동일하면 -1 값을 가진다고 하네요. 스피어만 상관계수는 자료의 값 대신 순위(랭킹)을 기준으로 상관관계를 계산하는 방식이라고 합니다. 이 값은 -1과 1 사이의 값을 가지는데, 두 변수의 순위가 완전히 일치하면 +1, 완전히 반대면 -1이 된다고 합니다. 스피어만 상관계수와 같이 순위를 기준으로 값을 측정하는 캔달의 타우도 있다고 하네요. 이번에 살펴볼 R 예제는 기온과 기압과 같은 시계열 ..

10월 30일 ~ 31일 사이에 삼성동 코엑스 인터콘티넨탈에서 진행된 GMV 2013에 참석했습니다. 글로벌 포럼, 전시회, 1:1 바이어 상담 등으로 진행되었는데요. 국내 뿐 아니라 해외 업체들의 반응을 확인할 수 있고, 글로벌 서비스를 위한 협의를 할 수 있는 좋은 기회였던 것 같습니다. 예전에는 주로 전시회 부스를 준비해서 참석했었는데.. 이번에는 1:1 바이어 상담을 중심으로 진행했습니다. 전시회 부스는 많은 사람들에게 보여줄 수 있다는 장점이 있지만 깊이있는 논의가 부족한 면이 있었는데, 1:1 미팅은 약 한시간 동안 미리 선정된 업체와 자유롭게 협의를 할 수 있어서 좋았습니다. 미국의 Sprint, 중국의 Vivo/Sohu.com/Insta Investment, 일본의 Hitachi, 콜롬비아..

현재 빅데이터 관련 기술로 Hadoop이 주로 활용되고 있습니다. 그러나 최근 실시간 처리에 대한 요구가 늘어나면서 점차 In-Memory 기술에 대한 관심도 증가하고 있습니다. 과거 실시간 처리를 위한 OLTP로서 데이터베이스를 주로 사용했지만, 빅데이터 환경에서는 빠르게 생성되는 데이터 스트림을 처리하기 위해서 새로운 접근법이 필요한 것이죠. 빅데이터 분석 기술에 대한 정리 에서도 Hadoop이외의 다른 기술들을 살펴보면서, 구글에서는 Dremel을 통해 짧은 시간내에 수많은 데이터를 처리하기도 한다고 이야기했었습니다. 처리하는 영역은 조금씩 다르지만 실시간이라는 이슈를 위해 주로 사용되는 기술들에 대해서 정리해 보도록 하겠습니다. Redis Redis는 "Remote dictionary System..

지난 23일 산업통상자원부 기술표준원 주최로 "Open Cloud & Open Standard" 컨퍼런스가 열렸습니다. 최근 이슈인 오픈 스택(Open Stack)의 Tom Fifield가 오픈 클라우드 및 표준화 사례에 대해 발표하고, 래드햇(Redhat)도 최신의 오픈 소스 기반 클라우드를 소개했네요. 컨퍼런스 마지막 세션으로 클라우드를 활용한 모바일 분석 플랫폼으로 핑그래프(Fingra.ph) 발표를 했습니다. 현재까지의 Fingra.ph 진행 과정과 향후 SAAS 플랫폼으로 발전할 방향에 대해서 공유하는 자리였습니다. 참석한 많은 분들이 격려해주고 글로벌로 성장하는 Fingra.ph를 응원해 주셔서 감사했습니다.

17 ~ 18일 세종대에서 열린 스마트게임데이즈에 참석했습니다. 중국을 비롯한 해외 바이어들이 함께 참석해 발표도 하고 특히 게임을 비롯한 각종 플랫폼 업체들과 보다 깊이있는 비즈니스 논의를 할 수 있었던 것이 좋았습니다. 저희도 Fingra.ph를 기반으로 부스도 만들고 함께 이야기하는 자리를 가졌네요. 개인적으로 이러한 네트워크를 통한 비즈니스 간 융합을 이끌어 낼 수 있는 행사들이 많이 진행되었으면 합니다.

지난주 DEVIEW 2013을 다녀왔습니다. 구글, 링크드인, 넷플릭스에서 일하는 한국 개발자들이 자신의 업무를 바탕으로 세션을 발표하고, 현재 뜨고 있는 기술들이 실제 현업에서 어떻게 활용되고 있는지에 대한 이야기들이 좋았네요. DEVIEW 2013을 보면서 이와 같은 개발자 컨퍼런스가 더 많아지고 확대되면 좋겠다는 생각을 했네요. 행사 내용은 DEVIEW 2013 홈페이지를 참고하시고, 현장에서 찍은 사진들을 올려봅니다. 그리고 행사에서 나눠준 노트와 볼펜.. 이쁘네요. 중간에 롯데호텔에서 드라마 촬영을 하는 것 같더군요. 무슨 드라마인지는 모르겠지만 여배우는 알겠네요.. ^^

린 스타트업 - 에릭 리스 지음, 이창수.송우일 옮김/인사이트 미니 서평 스타트업은 독특한 아이디어를 바탕으로 열정과 패기로 사업을 진행해 나갑니다. 모두들 성공을 꿈꾸지만 약 32%가 창업 후 3~5년 사이에 사업을 그만둔다고 합니다. 10년 이상 하는 경우도 24.6%로 4명 중 1명만 살아남게 되는 것이죠. 정말 괜찮은 사업 아이템인 것 같아 큰 마음 먹고 시작했는데, 스타트업들은 왜 실패할 확률이 더 높은 걸까요? 에릭 리스의 린 스타트업에서는 여기에 대한 해답을 제시해줍니다. 물론 린 스타트업을 따라 했다고 반드시 성공을 보장받는 것은 아닙니다. 다만, 린 스타트업을 활용하면 지속 가능한 사업을 할 수 있는 기초가 된다는 것입니다. 이러한 근거는 바로 불확실성을 인정하고, 만들기-측정-학습의 순..