빅데이터와 비정형 데이터 핵심 정리

• 정형 데이터는 정해진 규칙에 따라 저장되어 의미를 파악하기 쉽고 비정형 데이터는 그렇지 않다.
• 비정형 데이터 분석은 Variety, Velocity, Veracity, Value를 바탕으로 의사결정의 질을 높인다.
• 빅데이터 활용은 수요 예측과 상품 개발, 인적자원 관리 등 기업경영 전반을 바꾼다.

정형 데이터와 비정형 데이터

• 정형 데이터는 정해진 규칙에 의거해 데이터베이스에 삽입되어 의미를 파악하기 쉽다.
• 정형 데이터의 예로 구매 고객의 나이, 지역, 성별 등이 있다.
• 비정형 데이터는 정해진 규칙이 없어 의미를 파악하기 어렵다.
• 비정형 데이터의 예로 서술형 설문조사, 인터뷰, SNS 등이 있고 분석에 많은 시간이 든다.

비정형 데이터 분석 사례

• 굿닥은 병원 관련 검색어와 위치 정보를 활용해 주변 병원을 알려 준다.
• 카카오메이커스는 다품종 소량생산 전략에 맞춰 수요와 가격, 운송 데이터를 빠르게 분석했다.
• 유튜브는 재생되는 동영상의 특징을 바탕으로 관심 있을 만한 상품을 광고한다.
• 무작위 광고가 아닌 수요가 있을 대상을 겨냥해 광고주의 이윤을 높인다.

기업경영의 변화

• 수요 예측과 생성, 그에 따른 효율적 공급이 가능해진다.
• 검색어, 위치, 연령대, 성별, 트렌드를 분석해 새 상품을 개발하거나 기존 상품을 개량한다.
• 정형 데이터만으로 어려웠던 분석을 빠르게 수행해 인적자원 관리의 효율이 높아진다.
• 데이터 수집, 전처리, 저장과 관리, 분석, 가시화의 단계를 거쳐 지식을 발굴한다.

정형 데이터와 비정형 데이터 비교

비정형 데이터 분석 사례

핵심 개념

• 빅데이터 — 기존 방식으로 처리하기 어려운 대규모의 다양한 데이터
• 정형 데이터 — 정해진 규칙과 구조에 따라 저장된 데이터
• 비정형 데이터 — 형식이 정해지지 않은 텍스트, 영상, SNS 등의 데이터
• Variety — 데이터 유형의 다양성
• Velocity — 데이터가 생성되고 처리되는 속도
• Veracity — 데이터의 정확성과 신뢰성

자주 묻는 질문

• Q. 정형 데이터와 비정형 데이터는 어떻게 구분하나요?
  A. 정해진 규칙에 따라 데이터베이스에 저장되어 의미 파악이 쉬우면 정형 데이터, 규칙이 없어 의미 파악이 어려우면 비정형 데이터로 구분한다.
• Q. 비정형 데이터 활용 사례로 무엇을 들었나요?
  A. 검색어와 위치를 활용하는 굿닥, 수요 예측으로 다품종 소량생산을 하는 카카오메이커스, 시청 영상 기반 맞춤 광고를 하는 유튜브를 들었다.
• Q. 빅데이터가 기업경영을 어떻게 바꾸나요?
  A. 수요 예측과 효율적 공급이 가능해지고 새로운 상품 개발과 수요 창출, 효율적인 인적자원 관리가 가능해져 기업전략과 조직구조에 긍정적 영향을 준다.
• Q. 빅데이터에서 지식을 얻는 단계는 무엇인가요?
  A. 관련 데이터 소스에서 데이터를 찾아 수집하고, 필터링과 가공의 전처리를 거쳐 저장하고 관리한 뒤, 분석을 통해 의미 있는 지식을 발굴하고 가시화한다.

정리

빅데이터를 제대로 분석하면 의미 있는 지식을 도출해 다양한 가치를 창출하고 자원 절감과 범죄 예방, 미래 예측에 활용할 수 있다고 정리한다. 데이터의 양과 종류가 급격히 늘어 행동과 위치, SNS 속 생각까지 분석할 수 있게 되었으므로, 비정형 데이터 활용은 경영의사결정과 기업전략 수립 과정에 큰 변화를 가져올 것으로 본다.