비정형 데이터

정의

비정형 데이터는 자유 텍스트, 이미지, 비디오 또는 오디오와 같이 미리 정의된 스키마를 따르지 않는 정보입니다.

목적

목적은 구조화된 표로 표현할 수 없는 복잡한 현실 세계의 정보를 포착하는 것입니다.

중요성

• 오늘날 생성되는 데이터의 대부분을 나타냅니다.
• 비전, 음성, NLP 분야에서 고급 AI 애플리케이션을 구현합니다.
• AI 없이는 처리하고 분석하기 어렵습니다.
• 저장 및 거버넌스 문제가 발생합니다.

운영 방식 (How It Works)

1. 소스(소셜 미디어, 카메라, 센서)에서 비정형 데이터를 수집합니다.
2. JSON, 멀티미디어, 원시 로그 등의 형식으로 저장합니다.
3. AI 모델을 적용하여 의미를 추출합니다.
4. 가능하면 구조화된 표현으로 변환하세요.
5. 다운스트림 분석 및 의사 결정에 활용됩니다.

예시(실제 세계)

• 트렌드 분석에 사용되는 소셜 미디어 게시물입니다.
• 진단을 위한 의료 영상.
• 고객 지원 채팅 기록.

참고문헌 / 추가 자료

• NIST 빅데이터 상호운용성 프레임워크.
• ISO/IEC TR 20547 빅데이터 표준.
• EMC/IDC 디지털 유니버스 보고서.
• 구조화된 데이터와 구조화되지 않은 데이터