lance-format/lance

어떤 프로젝트인가요?

핵심 기능

• 01IVF_PQ 인덱스를 이용한 벡터 유사도 검색과 전문 검색(BM25), SQL 쿼리를 함께 지원합니다.
• 02프로젝트 벤치마크에서 배치 조회 시 Parquet보다 최대 100배 빠른 랜덤 액세스 성능을 기록했습니다.
• 03지연 blob 로딩을 지원하며 이미지, 동영상, 오디오, 텍스트, 임베딩을 하나의 형식에 저장합니다.
• 04전체 테이블을 다시 쓰지 않고 기존 값을 채운 열을 추가합니다.
• 05ACID 트랜잭션, 타임 트래블, 태그, 브랜치를 지원하는 자동 버전 관리 기능을 제공합니다.
• 06Pandas, Polars, DuckDB, PyArrow, PyTorch와 함께 사용할 수 있습니다.

활용 사례

• 벡터, 키워드, SQL 필터를 결합하는 검색 엔진이나 피처 스토어 구축
• 이미지 또는 동영상 데이터셋에서 빠른 랜덤 샘플링이 필요한 대규모 ML 학습
• 오브젝트 스토리지 레이크하우스에서 임베딩과 멀티모달 에셋 관리
• 전체 데이터를 다시 쓰지 않고 기존 데이터셋에 엔지니어링한 피처 추가

빠른 시작

1. 1

   Python 패키지 pylance 설치

   pip install pylance
2. 2

   Parquet 데이터셋을 Lance로 변환한 뒤 Python에서 다시 읽기

사용 전 알아둘 점

• !Lance는 자주 릴리스되므로, 서로 다른 Lance 버전 간에 결정적인 쓰기 결과를 얻으려면 data_storage_version을 고정하세요.
• !'next' 파일 형식 별칭은 불안정하므로 프로덕션 데이터에 사용하지 마세요.

포함된 컬렉션

토픽

자주 묻는 질문

lance은(는) 무엇인가요?

멀티모달 AI를 위한 개방형 레이크하우스 테이블 및 파일 형식으로, 오브젝트 스토리지에서 벡터 검색, 전문 검색, 빠른 랜덤 액세스를 지원합니다. Lance는 AI 워크로드를 위해 오브젝트 스토리지 기반 레이크하우스를 구축하는 데 쓰이는 파일 형식, 테이블 형식, 카탈로그 사양입니다. 이미지, 동영상, 오디오, 텍스트, 임베딩을 하나의 형식에 저장하며, 멀티모달 데이터를 위한 blob 인코딩과 지연 로딩을 지원합니다.

lance은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?

lance은(는) Apache-2.0 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.

lance은(는) 아직 유지보수되고 있나요?

활발히 유지보수 중. lance의 마지막 커밋은 2026년 11월 7일입니다.

lance은(는) 어디에 사용할 수 있나요?

벡터, 키워드, SQL 필터를 결합하는 검색 엔진이나 피처 스토어 구축 이미지 또는 동영상 데이터셋에서 빠른 랜덤 샘플링이 필요한 대규모 ML 학습 오브젝트 스토리지 레이크하우스에서 임베딩과 멀티모달 에셋 관리 전체 데이터를 다시 쓰지 않고 기존 데이터셋에 엔지니어링한 피처 추가

lance는 어떻게 설치하나요?

Python 패키지 pylance 설치: pip install pylance Parquet 데이터셋을 Lance로 변환한 뒤 Python에서 다시 읽기

lance은(는) 어디서 받을 수 있나요?

소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/lance-format/lance