빅데이터란? (개념, 장점, 활용 방안, RISK, 극복 방안)

내용 학습 경로

과학정보통신부 블로그에서 블록체인을 소개하는 게시글을 보고 관련 내용을 학습했습니다.

 

빅데이터의 개념과 장점

빅데이터란 규모가 매우 크고 다양한 종류의 데이터 집합을 의미합니다.

 

빅데이터는 주로 "3V"로 설명되는 특징을 가지고 있습니다.

1. Volume(양): 매우 큰 양의 데이터

2. Velocity(속도): 실시간으로 생성되고 유통 속도 또한 매우 빠른 데이터 (ex. 소셜 미디어에서 실시간 트윗)

3. Variety(다양성): 기존의 구조화된 정형데이터(테이블 형태의 데이터베이스)는 물론 사진, 동영상 등의 비정형 데이터가 포함된 데이터

 

빅데이터의 주요 장점 몇 가지를 소개하겠습니다.

1. 고객 서비스 개선

빅데이터를 활용하여 고객의 행동과 선호도를 이해하고 개인화된 서비스를 제공할 수 있습니다.

 

2. 위험 관리

금융, 보안, 건강 관리 등 다양한 분야에서 빅데이터를 사용해 위험을 감지하고 예방하는데 활용합니다.

 

빅데이터의 활용 방안

구글은 검색 내역을 활용하여 인플루엔자 유행을 확인하고 있습니다.

사람들이 자신이나 가족이 아프면 가장 먼저 그에 관한 정보를 검색하기 때문입니다.

구글은 의료기관보다 2주 먼저 인플루엔자 유행을 예측할 수 있었습니다.

 

제시한 활용 방안에서의 RISK 및 극복 방안

예측 시스템은 불확실성을 가질 수 있으며, 정확한 예측이 항상 보장되지 않습니다.

 

이러한 문제를 극복하기 위해 두 가지 방법을 생각했습니다.

1. 확률적 예측

불확실성을 고려한 확률적 예측 모델을 개발하고 신뢰구간과 신뢰도를 제공합니다.

 

2. 실시간 모니터링

실시간 모니터링을 통해 예측 모델을 지속적으로 감시하고 모델의 성능을 평가하여 모델의 정확성을 향상시킵니다.

 

🔗 참고

빅데이터에 대해서 당신이 알아야 할 것들

[알쓸 IT잡] 빅데이터(Big Data)란?