최신 글
기술과 일상을 함께 기록합니다.
기술AI › 언어 모델 › 응용
11. 자신의 데이터에 맞춘 임베딩 모델 만들기 : RAG 개선하기
질문·문서 쌍으로 임베딩 모델을 미세 튜닝하고 RAG 검색과 답변 품질을 평가하는 방법을 정리합니다.
· 5분 읽기
기술AI › 언어 모델 › 응용
10. 임베딩 모델로 데이터 의미 압축하기
문장 임베딩과 코사인 유사도로 의미 검색을 구현하고, 청크 설계와 검색 평가 기준을 정리합니다.
· 5분 읽기
기술AI › 언어 모델 › 개념
10. 텍스트 임베딩 모델 만들기
질문과 문서를 벡터로 표현하고 대조 학습과 검색 지표로 임베딩 모델을 개선하는 방법
· 9분 읽기
기술AI › 언어 모델 › 개념
2. 토큰과 임베딩
같은 문장도 토크나이저에 따라 토큰 수가 달라진다. 토큰 ID가 문맥 벡터가 되기까지의 과정과 코드 출력의 의미를 살펴본다.
· 5분 읽기