검색 (1) 썸네일형 리스트형 LLM을 이용한 의미 기반 검색을 해보자! AI 회사들이 제공하는 가장 다양하게 활용 가능한 솔루션 중 하나는 강력한 LLM을 기반으로 "텍스트 임베딩"을 생성하는 기능입니다. 텍스트 임베딩 단어나 구문을 그들의 맥락적 의미를 기반으로 다차원 공간에서 기계가 읽을 수 있는 수치 벡터로 표현하는 방법을 말한다. 만약 두 구문이 유사하다면, 그 구문들을 나타내는 벡터들도 유클리드 거리와 같은 측정치로 볼 때 서로 가까워야 하며, 그 반대의 경우도 마찬가지입니다. 유클리드 거리 두 점 사이의 거리를 계산할 때 흔히 쓰는 방법. 텍스트 임베딩을 잘 이용하면 언어 사용에 관한 풍부한 정보를 활용하여 LLM의 사전 훈련과 파인튜닝이 기반이 되는 애플리케이션을 무한하게 구축할 수 있다. LLM을 사용한 의미 기반 검색을 소개 정보 검색과 분석을 위한 강력한 .. 이전 1 다음
