Litestream + Cloud-Backed SQLite

2021 전엔 없던 HA 스토리

Litestream (Ben Johnson, 2021) 가 unmodified SQLite 위 continuous streaming replication 추가. WAL tail + S3 (또는 sftp/GCS/Azure/file) 로 incremental 변경 ship. 재해 시 latest replica 에서 restore — 초 단위 데이터 손실.

LiteFS (Fly.io) 가 synchronous write 의 클러스터 filesystem 으로 확장 — 강한 일관성의 multi-node SQLite.

Turso 가 libSQL fork + multi-region 매니지드 서비스 빌드. Cloudflare D1 이 SQLite 를 Workers runtime 에 번들. Litesync 등이 인접 niche.

핵심: SQLite 의 'no replication' objection 이 20 년간 진짜였고 오늘 더 이상 진짜 X. Single-region 웹 앱이면 Litestream 단독으로 보통 충분. Multi-region write 면 Turso 또는 LiteFS.

Tip: 비용 이유로 RDS Postgres 고려 중인데 앱이 SQLite 배포 모양 맞으면 Litestream-on-Fly 또는 Turso 숫자 돌려봐. 피파-shaped '한 머신 앱 + daily 클라우드 백업' setup 이 매니지드 Postgres 에 $50+ 들 state 를 한 자리수 달러/월.

Code

Litestream — 설치 + 실행·bash

# macOS
brew install benbjohnson/litestream/litestream

# Linux 는 binary release
curl -L https://github.com/benbjohnson/litestream/releases/download/v0.5.0/litestream-v0.5.0-linux-amd64.tar.gz | tar xz

# Continuous replicate
litestream replicate /var/lib/myapp/myapp.db s3://myapp-backups/prod/myapp

# Latest replica 에서 restore
litestream restore -o /var/lib/myapp/myapp.db s3://myapp-backups/prod/myapp

Litestream + Cloud-Backed SQLite

2021 전엔 없던 HA 스토리

Code

External links

Exercise

Progress

댓글 0