|
|
|
|
데이터 시대: 3) 데이터의 종류 - 반정형 데이터(Semi-structured Data)
|
|
2026년 04월 17일(금) 17:41 [주간문경] 
|
|
|
| 
| | | ↑↑ 지홍기
영남대학교 명예교수
전)국가녹색성장위원회 위원
전)한국물학술단체연합회 회장 | ⓒ 주간문경 | |
반정형 데이터의 개념
반정형 데이터는 정형 데이터와 비정형 데이터 사이에 위치한 데이터 형태다. 엄격한 테이블 구조를 따르지는 않지만, 데이터에 태그(Tag)나 속성(Attribute) 같은 표식을 붙여 일부 내용이 구조화되어 있는 것이 특징이다.
예를 들어, 웹 페이지의 HTML(Hyper Text Markup Language: 웹 페이지의 구조를 만드는 언어)이나 데이터 교환 형식인 XML(eXtensible Makup Language: 데이터를 구조화하는 언어), JSON(데이터의 저장 및 전송 표준형식)에는 제목이나 이름 등 일정한 틀이 있지만, 본문과 세부 내용은 자유롭게 작성된다. 이런 방식으로 일부는 구조화되면서도 나머지는 융통성 있게 되어 있어 분석이 비교적 쉽다.
정형 데이터(Utructured Data)와 반정형 데이터(Unstructured Data)의 차이
정형 데이터는 엑셀이나 관계형 데이터베이스(Database)처럼 미리 정해진 Schema(데이터 형식)에 맞춰 저장된다. 예를 들어, 엑셀 시트는 칸마다 이름, 나이 같은 열이 정해져 있어 데이터를 입력하면 바로 분석할 수 있다.
반대로, 비정형 데이터는 문자나 영상 등 명확한 틀이 없어 별도의 전처리 없이 분석하기 어렵다. 반정형 데이터는 이 둘의 중간으로 볼 수 있다. 예를 들어, 신문 기사나 이메일(Email)은 제목·발신자 등 일정한 필드와 본문 텍스트가 공존하는데, 이것이 반정형의 성격을 보여 준다. 이제 구체적인 예를 살펴보자.
반정형 데이터의 예시
반정형 데이터는 HTML 문서, XML 파일, JSON 데이터 등이 있으며, 여기에는 제목, 단락, 속성 등을 표시하는 태그(Tag)가 포함되어 있고 각 태그 안의 내용은 자유 형식이다. 이메일도 반정형 데이터의 한 예로서 보낸 사람, 받는 사람, 제목 등의 정보가 구조화되어 있지만, 본문 내용은 자유롭게 작성된다.
또한 스마트폰 앱(Application)이나 센서(Sensor) 등에서 나오는 로그(Log) 데이터도 반정형으로 볼 수 있다. 이들 로그에는 시간, 장치 ID 같은 속성과 함께 상태 메시지가 담기며, 반정형 데이터는 이렇게 다양한 형태로 우리 주변에 존재한다.
| 
| | ⓒ 주간문경 | |
활용 사례 및 중요성
오늘날 반정형 데이터는 다양한 분야에서 중요하게 활용된다. 예를 들어, 인터넷(Internet) 쇼핑몰은 상품 리뷰와 구매 내역 같은 반정형 데이터를 분석하여 개인별 맞춤형 추천 서비스를 제공한다. 병원에서는 환자 진료 기록의 텍스트 부분과 구조화된 정보를 함께 분석해 진단과 치료를 돕는다.
검색엔진은 웹페이지의 HTML문서 구조를 활용해 중요한 정보를 빠르게 찾아내고, 인공지능(AI)은 반정형 데이터를 학습해 자연어 이해 등 여러 분야에서 응용한다. 이처럼 반정형 데이터는 방대한 데이터를 효율적으로 처리하고 분석하는 핵심 자원이다.
반정형 데이터는 다양한 산업 분야에서 큰 가치를 창출하고 있다. 몇 가지 주요 활용 사례를 살펴보면,
전자상거래: 온라인 쇼핑몰은 고객 리뷰, 구매 이력, 상품 질문 등 반정형 데이터를 분석해 맞춤형 추천 시스템을 구축한다. 이는 고객 만족도와 매출 향상에 직접 기여한다.
의료 분야: 병원은 환자의 진료 기록에서 구조화된 정보(나이, 혈압 등)와 비정형 텍스트(의사 소견)를 함께 분석해 질병 예측과 진단을 향상시킨다.
검색 엔진: 검색 엔진은 웹페이지의 HTML 구조를 활용하여 중요한 키워드나 문서를 추출하고, 검색 결과를 최적화한다.
인공지능(AI) 학습: 자연어 이해(NLU)나 챗봇(Chatbot) 개발을 위해 이메일, SNS 게시물, 리뷰 같은 반정형 데이터를 수집하고 학습 데이터셋으로 활용한다.
이처럼 반정형 데이터는 현대 사회의 디지털 서비스와 AI 기반 기술을 뒷받침하는 핵심 자원이 되고 있다.
미래 전망
앞으로도 반정형 데이터는 더욱 주목받을 것으로 보인다. 사물인터넷(IoT) 기기와 소셜 미디어(Social Media)가 발전하면서 센서 데이터나 SNS(Social Networking Service) 게시물 같은 반정형 데이터가 폭발적으로 증가한다. 인공지능 기술 역시 다양한 형태의 데이터를 필요로 하므로, 반정형 데이터를 잘 활용하는 능력이 경쟁력이 될 것이다.
따라서 이를 저장·처리하는 데이터베이스 및 분석 기술이 계속 발전할 전망이며, 결국 데이터 시대에 대비하려면 반정형 데이터를 이해하고 다루는 역량이 필수적이다.
#지홍기칼럼 #데이터시대 #데이터종류 #반정형데이터
|
|
|
|
주간문경 기자 
“주간문경을 읽으면 문경이 보인다.”
- Copyrights ⓒ주간문경.
무단 전재 및 재배포 금지 -
|
|
|
|
 주간문경
기사목록 | 기사제공 : 주간문경
|
|
|
|
|
|
|
|
|
|
실시간
많이본
뉴스
|
|
|
|
|
|
종합
커뮤니티
