AWS-comprehend

AWS Comprehend?

Amazon Comprehend 는 자연어 처리 (NLP) 를 사용하여 문서 내용에 대한 인사이트를 추출해준다.

예를 들어 소셜 네트워킹 피드에서 제품 언급을 검색하거나 전체 문서 리포지토리에서 핵심 문구를 추출 할 수 있다.

특징

텍스트에서 중요한 insight 파악

• 고객 지원 인시던트, 제품 리뷰, 소셜 미디어 피드, 뉴스 기사, 문서 및 기타 소스의 텍스트에서 의미와 관계를 찾을 수 있다.

주제별 문서 구성

• 문서에 사용자가 정의한 주제 또는 태그로 레이블을 지정하도록 활용될 수 있다. 또한 보다 정확한 문서 분류를 위해 키워드 검색 또는 규칙 기반 태그 지정 이상의 솔루션을 사용할 수 있다.

자체 데이터에 대한 훈련 모델

• 특정 용어를 식별하는데 사용할 수도 있다. 분류 메시지 및 문서를 제품별 소셜 미디어 게시물과 같이 이용자의 필요에 맞게 조정할 수 있다.

구조화 되지 않은 텍스트 분석 지원

• 소셜 미디어 게시물, 이메일 및 웹 페이지와 같은 구조화되지 않은 텍스트에서 통찰력을 발견할 수 있습니다.

 

실시간 분석 (Real-time analysis)

Amazon Comprehend 콘솔을 사용하여 텍스트 문서(utf-8 인코딩)의 실시간 분석을 실행할 수 있다. 분석 유형별로 지원하는 언어가 상이하기때문에 이용하려는 분석 서비스가 텍스트 언어를 지원하는지 미리 확인할 필요가 있다. 

분석 유형 별 지원 언어

출처 : aws 공식 문서

 

Entities인식

해당 탭에는 분석된 Entity, type, confidence가 출력 됩니다. 또한 동일한 type에 대해서는 똑같은 색상으로 표시 된다.

 

Key phrases - 핵심 문구 추출

Comprehend가 입력 텍스트에서 감지한 주요 명사구와 confidence가 출력 된다.

Language - 언어

해당 탭에서는 텍스트의 주요 언어와 confidence가 출력딘다.

Sentiment

텍스트의 주요 sentiment를 보여줍니다. 분석 결과는 평서문, 긍정, 부정, 복합 으로 구성된다.

PII(Personally identifiable information)

영어 텍스트 문서에 대해서 PII entity를 탐지 할 수 있다. PII entity는 특정 유형의 개인 식별 정보이다.

Targeted sentiment

특정 entity와 관련된 세부적인 sentiment를 제공한다.  

syntax

입력 텍스트에서 단어를 구문 분석하고 문서의 각 단어에 대한 품사 또는 구문 함수를 반환한다.