12 GB 및 8 GB NVIDIA GPU에서 262k 컨텍스트로 1.58비트 Ternary Bonsai 2 27B 모델을 실행하는 런처와 패치된 llama.cpp 구성입니다.
796PythonOther업데이트 43분 전
#cuda
cuda 관련 엄선 GitHub 저장소. AI 요약과 주요 지표를 함께 제공합니다.
12 GB 및 8 GB NVIDIA GPU에서 262k 컨텍스트로 1.58비트 Ternary Bonsai 2 27B 모델을 실행하는 런처와 패치된 llama.cpp 구성입니다.
처음부터 구현하며 배우는 ML 과정: NumPy 딥러닝 프레임워크와 Pyodide로 채점하는 브라우저 코딩 문제 350개 이상