목차
CHAPTER 1 벡터 데이터베이스 소개
1.1 벡터 데이터베이스의 필요성
1.2 SQL과 벡터 데이터베이스
1.3 NoSQL과 벡터 데이터베이스 비교
1.4 하이브리드 접근 방식: 정형 데이터와 벡터 데이터의 결합
1.5 결론
CHAPTER 2 임베딩
2.1 벡터 임베딩의 필요성
2.2 Word2Vec: 모든 것을 바꾼 혁신
2.3 Doc2Vec: 단어에서 문서로
2.4 임베딩에서 현대 언어 모델까지: 트랜스포머와의 연결
2.5 임베딩 모델: 특화된 벡터 생성기
2.6 임베딩 계층: 제로샷 학습으로 향하는 관문
2.7 Word2Vec을 활용한 벡터 연산: 실습 가이드
2.8 결론
CHAPTER 3 FAISS를 활용한 유사도 검색
3.1 벡터 검색의 기초
3.2 FAISS 인덱스
3.3 양자화
3.4 ANN 문제
3.5 HNSW 인덱스 이해하기
3.6 FAISS 아키텍처와 구성 요소
3.7 결론
CHAPTER 4 SQLite3를 활용한 의미 기반 검색
4.1 SQLite 벡터 유사도 검색 확장 이해하기
4.2 개발 환경 설정
4.3 데이터베이스 스키마 설계
4.4 캐글 레딧 댓글 데이터셋에서 로컬 지식 베이스용 레코드 추출
4.5 콘텐츠 추출 및 전처리
4.6 임베딩 생성 및 저장
4.7 벡터 인덱스 구축
4.8 의미 기반 검색 구현
4.9 종합 정리
4.10 확장: 증분 인덱싱
4.11 결론
CHAPTER 5 PostgreSQL pgvector로 arXiv 논문 검색 시스템 구축하기
5.1 과학 문헌 검색의 과제
5.2 아키텍처 개요
5.3 환경 설정과 의존성
5.4 과학 논문용 데이터베이스 설계
5.5 arXiv 통합과 PDF 관리
5.6 PDF 텍스트 추출 및 처리
5.7 임베딩 생성 및 저장
5.8 유사도 검색 구현
5.9 대화형 애플리케이션과 UI
5.10 로컬 배포를 위한 도커 패키징
5.11 기본 성능 튜닝
5.12 개선 방안
5.13 구현 성과와 확장 가능성
5.14 결론
CHAPTER 6 SQLite VSS와 Ollama로 검색 증강 생성 시스템 구축하기
6.1 시스템 아키텍처 개요
6.2 벡터 지원을 포함한 데이터베이스 기반
6.3 텍스트 처리와 임베딩 생성
6.4 하이브리드 검색 구현
6.5 Ollama와 LLM 통합
6.6 RAG 파이프라인
6.7 시연 및 테스트
6.8 다음 단계: 시스템 확장
6.9 결론
CHAPTER 7 PostgreSQL과 pgvector로 과학 논문 RAG 시스템 구축하기
7.1 시스템 목표와 기능
7.2 아키텍처 개요
7.3 pgvector를 활용한 데이터베이스 기반
7.4 임베딩 생성 전략
7.5 arXiv 통합과 PDF 처리
7.6 고급 텍스트 청킹
7.7 임베딩을 활용한 저장 파이프라인
7.8 다중 수준 의미 기반 검색
7.9 RAG 파이프라인 심층 분석
7.10 시연 및 대화형 인터페이스
7.11 다음 단계: 과학 RAG 시스템 확장
7.12 결론
CHAPTER 8 완전한 대화 검색 및 RAG 시스템 구축
8.1 시스템 목표와 기능
8.2 시스템 아키텍처 개요
8.3 만들어 볼 시스템
8.4 대화 저장을 위한 데이터베이스 기반
8.5 대화 가져오기 및 데이터 처리 파이프라인
8.6 효율적인 임베딩 생성과 배치 처리
8.7 대화 이해를 활용한 컨텍스트 검색
8.8 대화 기록을 위한 RAG 통합
8.9 FastAPI로 완성하는 웹 API
8.10 샘플 데이터와 시스템 시연·실행
8.11 결론: 완전한 개인 지식 시스템
CHAPTER 9 벡터 쿼리 언어
9.1 핵심 개념
9.2 벡터 연산
9.3 벡터 함수와 집계
1.1 벡터 데이터베이스의 필요성
1.2 SQL과 벡터 데이터베이스
1.3 NoSQL과 벡터 데이터베이스 비교
1.4 하이브리드 접근 방식: 정형 데이터와 벡터 데이터의 결합
1.5 결론
CHAPTER 2 임베딩
2.1 벡터 임베딩의 필요성
2.2 Word2Vec: 모든 것을 바꾼 혁신
2.3 Doc2Vec: 단어에서 문서로
2.4 임베딩에서 현대 언어 모델까지: 트랜스포머와의 연결
2.5 임베딩 모델: 특화된 벡터 생성기
2.6 임베딩 계층: 제로샷 학습으로 향하는 관문
2.7 Word2Vec을 활용한 벡터 연산: 실습 가이드
2.8 결론
CHAPTER 3 FAISS를 활용한 유사도 검색
3.1 벡터 검색의 기초
3.2 FAISS 인덱스
3.3 양자화
3.4 ANN 문제
3.5 HNSW 인덱스 이해하기
3.6 FAISS 아키텍처와 구성 요소
3.7 결론
CHAPTER 4 SQLite3를 활용한 의미 기반 검색
4.1 SQLite 벡터 유사도 검색 확장 이해하기
4.2 개발 환경 설정
4.3 데이터베이스 스키마 설계
4.4 캐글 레딧 댓글 데이터셋에서 로컬 지식 베이스용 레코드 추출
4.5 콘텐츠 추출 및 전처리
4.6 임베딩 생성 및 저장
4.7 벡터 인덱스 구축
4.8 의미 기반 검색 구현
4.9 종합 정리
4.10 확장: 증분 인덱싱
4.11 결론
CHAPTER 5 PostgreSQL pgvector로 arXiv 논문 검색 시스템 구축하기
5.1 과학 문헌 검색의 과제
5.2 아키텍처 개요
5.3 환경 설정과 의존성
5.4 과학 논문용 데이터베이스 설계
5.5 arXiv 통합과 PDF 관리
5.6 PDF 텍스트 추출 및 처리
5.7 임베딩 생성 및 저장
5.8 유사도 검색 구현
5.9 대화형 애플리케이션과 UI
5.10 로컬 배포를 위한 도커 패키징
5.11 기본 성능 튜닝
5.12 개선 방안
5.13 구현 성과와 확장 가능성
5.14 결론
CHAPTER 6 SQLite VSS와 Ollama로 검색 증강 생성 시스템 구축하기
6.1 시스템 아키텍처 개요
6.2 벡터 지원을 포함한 데이터베이스 기반
6.3 텍스트 처리와 임베딩 생성
6.4 하이브리드 검색 구현
6.5 Ollama와 LLM 통합
6.6 RAG 파이프라인
6.7 시연 및 테스트
6.8 다음 단계: 시스템 확장
6.9 결론
CHAPTER 7 PostgreSQL과 pgvector로 과학 논문 RAG 시스템 구축하기
7.1 시스템 목표와 기능
7.2 아키텍처 개요
7.3 pgvector를 활용한 데이터베이스 기반
7.4 임베딩 생성 전략
7.5 arXiv 통합과 PDF 처리
7.6 고급 텍스트 청킹
7.7 임베딩을 활용한 저장 파이프라인
7.8 다중 수준 의미 기반 검색
7.9 RAG 파이프라인 심층 분석
7.10 시연 및 대화형 인터페이스
7.11 다음 단계: 과학 RAG 시스템 확장
7.12 결론
CHAPTER 8 완전한 대화 검색 및 RAG 시스템 구축
8.1 시스템 목표와 기능
8.2 시스템 아키텍처 개요
8.3 만들어 볼 시스템
8.4 대화 저장을 위한 데이터베이스 기반
8.5 대화 가져오기 및 데이터 처리 파이프라인
8.6 효율적인 임베딩 생성과 배치 처리
8.7 대화 이해를 활용한 컨텍스트 검색
8.8 대화 기록을 위한 RAG 통합
8.9 FastAPI로 완성하는 웹 API
8.10 샘플 데이터와 시스템 시연·실행
8.11 결론: 완전한 개인 지식 시스템
CHAPTER 9 벡터 쿼리 언어
9.1 핵심 개념
9.2 벡터 연산
9.3 벡터 함수와 집계
기본 적립금
2배 적립금