1. 빅데이터 특징

(1) 빅데이터(Big Data) 개념

• 막대한 양(수십 테라바이트 이상)의 정형 및 비정형 데이터
• 데이터로부터 가치를 추출하고 결과를 분석하는 기술의 의미로도 통용

(2) DIKW 피라미드

: 데이터에서 가치를 찾는 피라미드 구조

 

 

 

(3) 빅데이터가 부각 받게 된 이유 ⭐

• 인터넷 확산
• 5G 등 무선 인터넷 발달
• SNS 발달
• 스마트 디바이스 생태계 생성
• 위 4가지 이유로 인해 막대한 양의 데이터 축적
• *Cloud 컴퓨팅 기술 발달

 

(4) 빅데이터 특징

• 규모(Volume), 다양성(Variety), 속도(Velocity), / 신뢰성(Veracity), 가치(Value), / 정확성(Validity), 휘발성(Volatility) 
• 📌 4V : 규모(Volume), 다양성(Variety), 속도(Velocity), 가치(Value)

(5) 빅데이터 유형

• 정형
  • 정형화된 스키마 구조(고정된 형태), DBMS에 내용이 저장될 수 있는 구조
  • 고정된 필드(속성)에 저장된 데이터
  • (예) 관계형 데이터베이스; Oracle, MS-SQL 등
• 반정형
  • 데이터 내부의 데이터 구조에 대한 메타 정보가 포함된 구조
  • 고정된 필드에 저장되어 있지는 않지만, 메타데이터나 데이터 스키마 정보를 포함하는 데이터
  • (예) XML, HTML, JSON 등
• 비정형
  • 수집 데이터 각각이 데이터 객체로 구분
  • 고정 필드 및 메타데이터(스키마 포함)가 정의되지 않음
  • Crawler, API, RSS 등의 수집 기술을 활용
  • (예) 텍스트 문서, 이진 파일, 이미지, 동영상 등

 

(6) 지식의 구분

• 암묵지 - 내면화, 공통화
• 형식지 - 표출화, 연결화