AWS AI Practitoner 16 Amazon Comprehend / Translate / Transcribe

Amazon Comprehend 

- NLP 

- 텍스트 내의 인사이트와 관계 

- Key Pharases / places people / brands / events

- 긍부정

- 토크나이제이션 

- 분류 등에 사용 가능 

- 트레이닝 데이터 -> Comprehend가 학습 -> 커스텀 분류기가 태깅 작업 

 

NER = Named Entity Recognition 

- 일반 목적의 엔터티를 발굴해냄 

- 트레이닝 -> 엔터티 리스트 또는 그것들을 갖고있는 문서 학습 

 

우측의 Launch 버튼을 통해서 접근한다 

 

그리고 샘플 텍스트를 통해서, 어떤 인사이트를 얻을 수 있는 지 볼 수 있다. 

Entities / 키 프레이즈 / 언어 / PII / 감정 / 신택스 등을 볼 수 있다 

 

좌측 메뉴바를 통해서 커스텀 분류기를 만들 수도 있다 

순서는 위의 그림과 같이 다음과 같다

커스텀 클래지파이어 생성 -> 엔드포인트 생성 -> 리얼타임 분석기 

                                           -> 배치 분석기 

커스텀 클래지파이어는 아래처럼 커스텀 레이블 데이터를 업로딩 함으로써 생성 가능하다 

---

Amazon Translate 

- 자연적이고 정확한 언어 번역

- 로칼라이즈 컨텐츠 가능

 

실시간 번역이 가능하다  

 

또한, S3를 통해서 배치 번역도 가능하다

그 밖에, metic을 통해 번역 현황을 점검할 수 있고,

사용자지정 메뉴에서 터미놀로지와 병렬데이터(톤 등)을 지정할 수 있다 

 

 

 

---

Amazon Transcribe 

- STT
- ASR = automatice Speec Regconginton

- Redaction - > 자동적으로 PII 를 삭제  

- 멀티 링구얼 오디오를 automatic language identification 지원함 

 

Transcribe의 정확도 높이는 방법 

- 밑의 2가지를 같이 사용하여 정확도를 높인다 

- Custom Vocabularies (도메인 텀즈 etc )

- Custom Language Models (도메인 스페시픽 모델을 같이 사용