데이터셋 업로드
멀티모달 JSONL (messages + images 필드)
JSONL 파일을 드래그하거나 클릭해서 선택
멀티모달 SFT: {"messages": [...], "images": ["img.jpg"]}
멀티모달 / 툴 확장
이미지 모델
비전·이미지 인코더/디퓨전은 로컬 가중치 또는 외부 API로 연결합니다. Leaf 코어는 정책·어댑터·라우팅을 통합합니다.
풀스펙 구현 범위
ABCD 공통 — 외부 엔진은 프로브·어댑터로 묶습니다
- 텍스트 코어 학습 경로와 별도 — 멀티모달 베이스는 HF ID 기준 LlamaFactory 지원 모델 사용
- 추론: 전용 게이트웨이 URL을 Router 정책에 task_type 으로 등록
환경 변수 (예시)
.env.factory.example 참고
- GEMINI_API_KEY — 클라우드 비전(선택)
- LEAF_VLLM_OPENAI_BASE — 비전 지원 vLLM 엔드포인트
오픈소스 참고 (다운로드·설치는 각 레포)
- LLaVA / Qwen-VL 계열 — VL-SFT 예시 참고
- diffusers — 디퓨전 실험
로컬 콘솔 링크
체크리스트 (운영 전)
- GPU 메모리·dtype 이 모델 카드와 일치하는지 확인
- 외부 이미지 API 사용 시 Redactor·감사 로그 정책 점검