# 저장소 클론
git clone https://github.com/hephaex/baram.git
cd baram

# 의존성 설치 및 빌드
cargo build --release

# Docker 서비스 시작
cd docker
docker-compose up -d

# 크롤링 실행
cargo run -- crawl --category politics --max-articles 100

# 검색
cargo run -- search "반도체 투자"

# 카테고리별 크롤링
cargo run -- crawl --category <카테고리> --max-articles <개수>
cargo run -- crawl --url <URL> --with-comments

# 인덱싱
cargo run -- index --input ./output/raw --batch-size 100

# 검색
cargo run -- search "검색어" --k 10

# 온톨로지 추출
cargo run -- ontology --input ./output/raw --format json

# 재개
cargo run -- resume --checkpoint ./checkpoints/crawl_state.json

# 분산 크롤러 실행
baram distributed \
    --instance main \
    --coordinator http://localhost:8080 \
    --database "postgresql://user:pass@localhost:5432/baram" \
    --rps 2.0 \
    --output ./output \
    --with-comments

# 코디네이터 서버 시작
baram coordinator \
    --port 8080 \
    --host 0.0.0.0 \
    --heartbeat-timeout 90 \
    --max-instances 10

# 임베딩 서버 시작
baram embedding-server \
    --port 8090 \
    --host 0.0.0.0 \
    --model intfloat/multilingual-e5-large \
    --max-seq-length 512 \
    --batch-size 32 \
    --use-gpu

# 단일 텍스트 임베딩
curl -X POST http://localhost:8090/embed \
    -H "Content-Type: application/json" \
    -d '{"text": "반도체 산업 동향"}'

# 배치 임베딩
curl -X POST http://localhost:8090/embed/batch \
    -H "Content-Type: application/json" \
    -d '{"texts": ["텍스트1", "텍스트2", "텍스트3"]}'

cd docker

# .env 파일 생성
cp .env.example .env
# POSTGRES_PASSWORD 등 필수 환경변수 설정

# 기본 서비스 시작
docker-compose up -d

# 개발용 도구 (pgAdmin, OpenSearch Dashboards) 포함
docker-compose --profile development up -d

# 기본 서비스 + 분산 크롤링
docker-compose -f docker-compose.yml -f docker-compose.distributed.yml up -d

# 기본 서비스 + GPU 서비스
docker-compose -f docker-compose.yml -f docker-compose.gpu.yml up -d

# PostgreSQL
POSTGRES_DB=baram
POSTGRES_USER=baram
POSTGRES_PASSWORD=<your-password>
POSTGRES_PORT=5432

# OpenSearch
OPENSEARCH_PORT=9200

# Redis
REDIS_PORT=6379
REDIS_MAXMEMORY=256mb

# Coordinator
COORDINATOR_PORT=8080
HEARTBEAT_TIMEOUT=90
HEARTBEAT_INTERVAL=30
MAX_INSTANCES=10

# Crawler
REQUESTS_PER_SECOND=2.0
CRAWLER_LOG_LEVEL=info
COORDINATOR_LOG_LEVEL=info

# GPU Embedding
EMBEDDING_PORT=8090
EMBEDDING_MODEL=intfloat/multilingual-e5-large
EMBEDDING_BATCH_SIZE=32