UpstageDocumentParser

[Parser] UpstageLayoutAnalysisLoader 를 활용한 문서 파싱

UpstageDocumentParser를 사용하여 PDF를 분석하였습니다. 이를통해 이미지, 그래프를 분석하고 다각도 분석을 수행할 수 있도록 구성합니다.

Embedding

[Model] 간단한 bge-m3 모델 테스트

임베딩 용어를 이해하기 위해 bg3-m3 모델을 활용하여 테스트를 진행하였습니다.

GraphDB

[Neo4j] 외부 데이터셋을 활용한 GraphDB 간단 테스트

간단하게 GraphDB를 테스트해보고 정리하였습니다.

GraphDB

[GraphDB] GraphRAG(Neo4j)

최근 여러 RAG 기법들을 활용하고 있습니다. 여러 방식으로 데이터를 파싱해보고 RAG 구조를 구현해보며 각 방식의 장점과 단점을 확인해보았습니다.

Sagemaker

[SageMaker] SageMaker Jumpstart를 사용한 LLM Fine Tuning - Supervised fine tuning (SFT)

Sagemaker를 활용하여 Fine-tuning을 수행하였습니다.

DAFT

[SageMaker] SageMaker Jumpstart를 사용한 LLM Fine Tuning - DAFT(Domain-Agnostic Fine-Tuning)

Sagemaker를 통해 LLM 모델을 파인튜닝하고 테스트합니다.

Sagemaker

[SageMaker] SageMaker Jumpstart Evaluation(Ground Truth)을 구성하여 사람이 LLM 평가하기

Sagemaker Ground Truth 기능을 활용해 휴먼 피드백을 실행합니다.

Sagemaker

[SageMaker] SageMaker Jumpstart의 Custom dataset을 통해 LLM 평가하기

Sagemaker 환경에서 Custom dataset을 통해 모델의 성능을 평가합니다.

Sagemaker

[SageMaker] SageMaker Jumpstart의 Public Datasets를 통해 LLM 평가하기

Sagemaker를 통해 LLM 모델의 성능을 평가할 수 있습니다.

Personalize

[AWS] Personalize에서 생성형 AI를 활용한 Content Generator

AWS Personalize를 통한 GenAI 추천기

OpenSearch

[OpenSearch] OpenSearch 기능 Deep dive

OpenSearch의 구성과 검색, 분석 대시보드, 이상 탐지, 시각화까지 모든 내용을 한번 정리하였습니다.

[SageMaker] AWS 내장 알고리즘

Sagemaker 내장 알고리즘을 정리하였습니다.