marin marin-community
Open-source framework for the research and development of foundation models.
- 주요 언어
- Python
- Stars
- 2,004
- Forks
- 188
태그
- 프레임워크
- LLM 파인튜닝
- LLM 평가
- 데이터 엔지니어링
- 딥러닝
- 로컬 GPU 학습
- 파이썬
요약
Marin은 기초모델(foundation model)의 연구와 개발을 위한 오픈소스 프레임워크로, 데이터 큐레이션, 토크나이제이션, 프리트레이닝, 포스트트레이닝, 평가까지 전 과정을 지원합니다. 오픈 개발 철학을 바탕으로 모든 실험·프로세스를 기록하며, 방대한 LLM과 MoE(혼합 전문가) 모델 사전학습, 스케일링 법칙 연구, DNA·단백질·오디오 모델에도 활용됩니다. 실험을 의존성 있는 스텝으로 정의해 Makefile처럼 위상정렬 순서로 실행하는 구조가 특징입니다. 연구자·엔지니어가 대규모 모델 학습 실험을 설계·관리·재현하는 …
README
# <img alt="Marin" src="docs/design/marin-logo.svg" height="36" align="top"> Marin <a href="https://marin.readthedocs.io/en/latest/?badge=latest"> <img alt="Documentation" src="https://readthedocs.org/projects/marin/badge/?version=latest"> </a> <a href=""> <img alt="License" src="https://img.shield…