2장_1절 빅데이터의 이해

1. 빅데이터의 정의

1) 관점에 따른 정의

- 맥킨지(2011); 일반적인 데이터베이스 소프트웨어로 저장, 관리, 분석할 수 있는 범위를 초과하는 규모의 데이터

> 데이터 규모에 중점을 둔 정의

- IDC(2011); 다양한 종류의 대규모 데이터로부터 저렴한 비용으로 가치를 추출하고 데이터의 초고속 수집, 발굴, 분석을 지원하도록 고안된 차세대 기술 및 아키텍처

> 분석 비용 및 기술에 초점을 둔 정의

- 가트너 그룹(Gartner Group) 더그 래니(Doug Laney)의 3V

Volume 규모 : 데이터의 규모 측면

Variety 형태 : 데이터의 유형과 소스 측면

Velocity 속도 : 데이터의 수집과 처리 측면

3V에 가치 Value, 시각화 Visualization, 정확성 Veracity 등을 포함한 4V의 개념이 생성되고 있음

 

2) 빅데이터 정의의 범주 및 효과

- 데이터의 변화; 규모(Volume), 형태(Variety), 속도(Velocity)

- 기술 변화; 데이터 처리, 저장, 분석기술 및 아키텍처, 클라우밍 컴퓨팅 활용

- 인재, 조직 변화; Data Scientist 같은 새로운 인재 필요, 데이터 중심 조직

> 기존 방식으로는 얻을 수 없는 통찰 및 가치 창출, 사업 방식, 시장, 사회, 정부 등에서 변화와 혁신 주도

 

2. 출현 배경과 변화

- 산업계의 출현 배경 : 고객 데이터 축척, 보유를 통해 데이터에 숨어있는 가치를 발굴

- 학계의 출현 배경 : 거대 데이터를 다루는 학문 분야가 늘어나면서 필요한 기술 아키텍처 및 통계 도구의 발전

- 기술발전으로 인한 출현 배경 : 관련 기술(저장 기술, 인터넷 보급, 클라우드 컴퓨팅, 모바일 혁명)의 발달

 

3. 빅데이터에 거는 기대의 비유적 표현

- 산업혁명의 석탄, 철

- 21세기의 원유

- 렌즈

- 플랫폼; '공동 활용의 목적으로 구축된 유무형의 구조물'로써의 다양한 서드파티 비즈니스에 활용되면서 플랫폼 역할을 할 것이로 전망된다 ex) 카카오톡, 페이스북 등

 

4. 빅데이터가 만들어내는 본질적인 변화

- 사전처리 > 사후처리

- 표본조사 > 전수조사

- 질 > 양

- 인과관계 > 상관관계