비정형 데이터의 중요성

텍스트 분석의 종류

텍스트 분석 방법

빅데이터 시대에 폭발적으로 증가하는 데이터에는 비정형 데이터가 90% 이상이다.

오바마 선거본부 팀의 부동층 맞춤형 선거 캠페인이 효과가 좋았다.

텍스트 분석이란?

사람들이 남긴 뉴스, 댓글, sns글, 상품평, 커뮤니티 글 등을 분석해 가치와 의미가 있는 정보를 찾아내는 방법

자연어 처리

텍스트 분석은 문자로 표현된 언어를 컴퓨터로 분석하고 그 구조와 의미를 이해하고자 하는 자연어 처리 기술에 기반한다.

텍스트 분석의 절차

• 텍스트 분석은 수집된 데이터에 대한 정제 작업을 거친 후 분석기법을 적용하여 수행한다.
• 텍스트분석의 절차는
  • 텍스트 데이터 ⇒ 자연어 처리를 통한 데이터 정제 작업 반복 ⇒ 분석
• 텍스트 데이터는 숫자 데이터처럼 정형화되어있지 않기 때문에 정제 작업은 고도화된 기술을 요구한다.