|
|
|
|
데이터 시대: 15) 빅데이터의 종류 - 정형 빅데이터 vs 비정형 빅데이터
|
|
2026년 08월 14일(금) 17:38 [주간문경] 
|
|
|
| 
| | | ↑↑ 지홍기
영남대학교 명예교수
전)국가녹색성장위원회 위원
전)한국물학술단체연합회 회장 | ⓒ 주간문경 | |
◆데이터의 구조적 구분
현대 사회에서 생성되는 데이터는 그 형태와 구조에 따라 크게 두 가지로 나뉜다. 하나는 일정한 형식과 구조를 갖춘 “정형 데이터(structured data)”이고, 다른 하나는 일정한 형식 없이 다양한 형태로 존재하는 “비정형 데이터(unstructured data)”이다. 이러한 구분은 데이터의 저장, 관리, 분석 방법에 큰 영향을 미친다.
◆정형 데이터란?
정형 데이터는 행(row)과 열(column)로 구성된 표 형태의 데이터로, 미리 정의된 스키마(schema)에 따라 저장된다. 예를 들어, 고객의 이름, 전화번호, 주소 등이 엑셀(Excel) 시트나 관계형 데이터베이스(RDBMS, Relational Database Management System)에 저장되는 방식이다.
이러한 데이터는 구조화된 질의 언어(SQL, Structured Query Language)를 통해 쉽게 검색, 수정, 분석할 수 있다. 따라서 정형 데이터는 텍스트, 이미지, 영상 등 다양한 형태의 데이터 저장이 어렵다는 단점이 있으나, 정형 데이터의 장점은 다음과 같다.
정확성: 데이터가 명확한 형식으로 저장되어 있어 오류가 적다.
효율성: 빠른 검색과 분석이 가능하다.
일관성: 데이터의 형식이 일정하여 관리가 용이하다.
◆비정형 데이터란?
비정형 데이터는 일정한 형식이나 구조 없이 저장되는 데이터로, 텍스트, 이미지, 오디오, 비디오 등 다양한 형태를 포함한다. 예를 들어, 소셜 미디어(SNS, Social Networking Service)에 올라오는 게시글, 유튜브(YouTube) 영상, 이메일 본문 등이 이에 해당한다.
이러한 데이터는 전통적인 관계형 데이터베이스로는 저장하거나 분석하기 어렵다. 그러므로 비정형 데이터를 저장하고 분석하기 위해서는 NoSQL(Not Only SQL) 데이터베이스나 데이터 레이크(data lake)와 같은 새로운 기술이 필요하다.
비정형 데이터의 특징은 다음과 같다:
다양성: 텍스트, 이미지, 오디오 등 다양한 형태로 존재한다.
방대함: 생성되는 양이 매우 많고 빠르다.
복잡성: 구조가 없거나 복잡하여 분석이 어렵다.
| 
| | ⓒ 주간문경 | |
◆정형 데이터와 비정형 데이터의 비교(정형/비정형)
일반적으로 다음은 정형 데이터와 비정형 데이터에 대한 비교를 다음과 같이 설명할 수 있다.
형식: 정형 데이터는 표 형태(행과 열)로 구조화된 데이터.
비정형 데이터는 고정된 형식 없이 자유로운 형태의 데이터(텍스트, 이미지, 영상 등).
저장 방식: 정형 데이터는 관계형 데이터베이스(RDBMS, 예: MySQL, Oracle) 등에 저장.
비정형 데이터는 파일 시스템, NoSQL, 클라우드 저장소 등에 저장.
분석 용이성: 정형 데이터는 구조화되어 있어 쿼리(SQL)로 손쉽게 분석 가능.
비정형 데이터는 사전 전처리(텍스트 마이닝, 이미지 인식 등) 후 분석 가능. 분석 난이도 높음.
사례: 정형 데이터는 인사기록표, 재무제표, 고객정보표 등.
비정형 데이터는 이메일, SNS 게시물, 영상·음성 파일, 설문 응답 서술형 등.
따라서 정형 데이터는 구조화되어 있어 분석이 용이하지만, 다양한 형태의 데이터를 포함하기 어렵다. 반면, 비정형 데이터는 다양한 형태의 데이터를 포함할 수 있지만, 분석이 복잡하고 어려울 수 있다.
◆결론
데이터 시대에는 정형 데이터와 비정형 데이터를 모두 효과적으로 활용하는 것이 중요하다. 정형 데이터는 기존의 분석 방법으로 처리할 수 있지만, 비정형 데이터는 새로운 기술과 접근 방식이 필요하다. 따라서 두 가지 데이터를 적절히 조합하여 활용하는 것이 데이터 기반 의사결정의 핵심이다.
#지홍기칼럼 #데이터시대 #빅데이터종류 #정형빅데이터 #비정형빅데이터
|
|
|
|
주간문경 기자 
“주간문경을 읽으면 문경이 보인다.”
- Copyrights ⓒ주간문경.
무단 전재 및 재배포 금지 -
|
|
|
|
 주간문경
기사목록 | 기사제공 : 주간문경
|
|
|
|
|
|
|
|
|
|
실시간
많이본
뉴스
|
|
|
|
|
|
종합
커뮤니티
