728x90 t-SNE1 텍스트 데이터 시각화 with Embedding and t-SNE 오늘은 텍스트 데이터를 시각화하는 제일 기본적인 방법인 embedding을 t-SNE 방식을 통해 차원축소해서벡터로 나타내는 시각화를 해보려고 합니다. 간단하기도 하고 대규모 데이터 시각화에도 유리해서 저도 자주 쓰는 방법이애오. 바로 파이썬 코드로 살펴 볼게요. 우선 필요한 라이브러리를 로드해올게요import pandas as pdfrom transformers import AutoModel, AutoTokenizerimport torchimport numpy as npfrom tqdm import tqdmfrom torch.utils.data import DataLoader, Datasetfrom sklearn.manifold import TSNEimport matplotlib.pyplot as pl.. 2024. 11. 15. 이전 1 다음 728x90