본문 바로가기

Topic Modeling

[ML] 잠재 디리클레 할당 예제 - LDA(Latent Dirichlet Allocation) (2)
AI/Machine Learning 2022. 3. 23. [ML] 잠재 디리클레 할당 예제 - LDA(Latent Dirichlet Allocation) (2) LDA topic modeling with BoW¶ In [1]: import re import os import glob import numpy as np import pandas as pd import nltk import gensim import gensim.corpora as corpora from timeit import default_timer as timer from datetime import timedelta from nltk.corpus import stopwords from nltk.tokenize import word_tokenize load and concat dataset¶ http://mlg.ucd.ie/datasets/bbc.html 에서 가져온 오픈소스 bbc 뉴스데이터 2..
[ML] 토픽 모델링(Topic Modeling) - LSA와 LDA
AI/Machine Learning 2022. 3. 13. [ML] 토픽 모델링(Topic Modeling) - LSA와 LDA Topic modeling is a method for unsupervised classification of such documents, similar to clustering on numeric data, which finds natural groups of items even when we're not sure what we're looking for. 토픽 모델링(topic modeling)은 문서 집합(코퍼스) 안에서의 추상적인 "주제"를 찾기 위한 비지도학습 분류 방법이다. 사람은 글을 읽으며 자연스럽게 문서의 중심 아이디어를 찾아낸다. 마찬가지로 토픽 모델링은 머신러닝 및 자연어 처리 분야에서 컴퓨터가 텍스트 본문의 숨겨진 의미 구조를 발견하기 위해 사용되는 텍스트 마이닝 기법이라고 할 수 ..

티스토리툴바