본문 바로가기

자격증/데이터분석준전문가(ADsP)

ADsP [1과목] 2-1 빅데이터의 이해

1. 빅데이터의 정의

1) 관점에 따른 정의

Mckinsey(2011) IDC(2011) 가트너 그룹(Gartner Group)
더그 래니(Doug Laney)의 3V
일반적인 데이터베이스 소프트 웨어로
저장, 관리 분석할 수 있는 범위를
초과하는 규모의 데이터
다양한 종류의 대규모 데이터로부터
저렴한 비용으로 가치를 추출하고,
데이터의 초고속 수집, 발굴,분석을
지원하도록 고앙된 차세대 기술 및 아키텍처
- Volume : 데이터의 규모 측면
- Variety : 데이터의 유형과 소스 측면
- Velocity : 데이터의 수집과 처리 측면
데이터 규모에 중점을 둔 정의 분석 비용 및 기술에 초점을 둔 정의

2) 빅데이터 정의의 범주 및 효과

데이터 변화 :

  • 규모(Volume)
  • 형태(Variety)
  • 속도(Velocity)

기술 변화 :

  • 데이터 처리, 저장, 분석기술 및 아키텍쳐
  • 클라우드 컴퓨팅 활용

인재, 조직 변화

  • Data Scientist같은 새로운 인재 필요
  • 데이터 중심 조직

"기존 방식으로는 얻을 수 없는 통찰 및 가치 창출, 사업방식, 시장, 사회, 정부 등에서 변화와 혁신 주도."

2. 출현 배경과 변화

  • 산업계의 출현배경 : 고객 데이터 축척, 보유를 통해 데이터에 숨어있는 가치를 발굴
  • 학계의 출현배경 : 거대 데이터를 다루는 학문 분야가 늘어나면서 필요한 기술 아키텍쳐 및 통계 도구의 발전
  • 기술발전으로 인한 출현 배경 : 관련기술(저장 기술, 인터넷 보급, 클라우드 컴퓨팅, 모바일 혁명)의 발달

3. 빅데이터에 거는 기대의 비유적 표현

  •  산업혁명의 석탄과 철, 21세기의 원유, 렌즈, 플랫폼

4. 빅데이터가 만들어 내는 본질적인 변화

  • 사전처리  -> 사후처리, 표본조사 -> 전수조사, 질 -> 양, 인과관계 -> 상관관계