빅데이터(Big Data)란 무엇인가? 기업의 실용적 접근

빅데이터란 단순 정보인지, 수집만을 말하는 것인지 정의와 관련해서대부분 혼란을 겪고 있습니다. 빅 데이터라는 용어을 잘 설명할 수 있는 문구가 분산되어 있는데요. 데이터의 규모 확대, 새로운 유형의 데이터 분석, 실시간 분석에 대한 요구라는 단어들이 나오더군요. 이런 빅데이터를특징 짓는 내용들을 조합해 보면 3가지 차원을 의미하는 3V와일맥상통하는데요. 3V란 규모(volume), 다양성(variety), 속도(velocity)를 의미합니다! 3V는 빅데이터의 핵심적인 특징을 포함하고 있지만 여기에 정확성(veracity)라는네 번째의 차원을 하나 더 고려해야 됩니다. 수많은 데이터들, 특정유형의 데이터가 포함하고 있는 불확실성에 대한 인식 제고의 중요성이 필요하기 때문이지요.

4V란?

규모(Volume)

단순히 말하자면 데이터의 양입니다. 기업들이 의사결정을 하기 위해활용하는 데이터의 양인데요. 데이터의 규모는 그럼 어떻게 생각해야 될까요? [대규모]는 어느정도가 대규모의 데이터가 될까요? ㅎ 산업별, 지역별로 차이가 많지만 보통 PT(petabytes) or ZT(zetabytes)보다 적은 규모로 언급됩니다. 그러나 대규모의 기준이 이렇다!라고 단정지을 수는 없습니다. 확실한건 오늘보다 내일이 더 커지고 있다라는 점이죠 ㅎ

다양성(variety)

빅데이터의 다양한 형태와 소스를 말하는데요. 다양성은 정형, 반정형, 비정형 데이터를 전부 포함해서 복잡하고 다양한 형태의 데이터를수집/관리해야 됩니다. 비즈니스내에서 전통/비전통적으로 접근되고 수집되는 복합적인 데이터가 필요합니다. 최근에소셜콜라보레이션(social collaboration)이라는 협업으로 인해, 텍스트, 웹데이터, 문서, 트위터, 페이스북 메시지, 동영상스트림, 로그데이터 등 수많은 형태의 데이터가 생산되고 있습니다.

속도(velocity)

데이터의 이동, 생산, 처리, 분석되는 속도는 지속적으로 빠르게 진행되고 있습니다. 데이터가 생산/수집되는 시간과 데이터에 접근할 수 잇는 시점 사이의 격차가 짧아져야 한다는 얘기죠! 최근 실시간으로 진행되는 마케팅과 같은 업무 프로세스에서는 속도의 중요성은 두번 말할 필요 없겠죠?

정확성(veracity)

데이터의 불확실성. 아무리 최고의 데이터 수집 기법을 사용해도 고객의미래 의사결정, 날씨, 경제와 같은 본질적으로 불확실성이내재된 데이터는 제거할 수 없습니다. 그렇기에 불확실성에 대해 인식을 하고 경영진의 정확한 대비가 필요합니다.

일반적으로 빅데이터라고 생각하면 내 개인 사생활 전체가 도구로 사용될 지 모른다는 불안감이 있습니다. 일부 대중매체의 보도가 과장된 면이 없진 않죠. 하지만 기업들이현재 빅데이터의 도입 단계에 있다는 사실은 맞습니다. 로컬 시장이든,글로벌 시장이든 기업들이 경쟁 우위를 차지하는데 필요한 데이터와 소스, 전문 기술과 활용 방법을 자연스럽게 발전시켜 나가는 과정인 '빅 데이터 도입(bigdata adoption)'은 '실제'입니다.

빅데이터를 활용하여 고객 중심적인 고객 미래 예측 분석 및 의사결정 분석 기능적인 목표로 내부 업무 효율 관리및 위험요소 관리 등 적용할 수 있는 범위는 '생각'을 넘어설 수 있습니다. 이런 빅데이터를 위해서 강력한 분석 능력이 이제는 필요한 시기가 됐습니다. 정형/비정형 데이터를 이용할 수 있는 고급 분석 역량을 모두 키우시길바랍니다!