IT용어위키



Ngram

단어를 특정 글자 수, 단어 수 기준으로 묶어서 분석하는 방법

예시

1-gram

Unigram

문장을 1의 단위로 잘라서 분석

  • I Love You
  • 문자 레벨: I, , L, o, v, e, , Y, o, u
  • 단어 레벨: I, Love, You

2-gram

Bigram

문장을 2의 단위로 잘라서 분석

  • I Love You
  • 문자 레벨: I, I , L, Lo, ov, ve, e , Y, Yo, ou
  • 단어 레벨: I Love, Love You

3-gram

Trigram

문장을 3의 단위로 잘라서 분석

  • I Love You
  • 문자 레벨: I L, Lo, Lov, ove, ve , e Y, Yo, You
  • 단어 레벨: I Love You

활용

  • Bag of Words의 단어 순서 무시 문제 극복
  • 다음 단어 예측
  • 문장 자동 완성
  • 오타 발견

  출처: 공대위키(공대위키에서 최신 문서 보기)
  * 본 페이지는 공대위키에서 미러링된 페이지입니다. 일부 오류나 표현의 누락이 있을 수 있습니다. 원본 문서는 공대위키에서 확인하세요!