janus-rm-7b
카이스트
Janus-7B 기반 HH-RLHF 등 혼합 데이터로 학습한 리워드 모델, Best-of-N·PPO 선호도 튜닝에 적합
- 분야
- 산업 전반·범용
- 모달리티
- Text
- 라이선스
- Apache-2.0
- 지원언어
- 영어
- 컨텍스트 길이
- 2048
- 정밀도
- BF16
- 모델 아키텍처
- LLMForSequenceRegression
- 모델 구축 방식
- 파인튜닝 모델
- 베이스 모델
- kaist-ai/janus-7b
- 공개일
- 2024-05-09
- 최근 업데이트일
- 2024-06-03
- 규모(파라미터)
- 7.1B