sel303's picture
Update README.md
2506d23 verified
|
raw
history blame contribute delete
No virus
370 Bytes
metadata
license: llama3

모델 : llama3 8B

데이터 : AIhub 데이터셋

모델 학습 파라미터 : 모델의 파라미터 중 10%정도를 trainable한 parameter로 설정

generate config :

max_new_tokens = 1024,

repetition_penalty = 1.1, #1.1~1.2

temperature = 0.75,

do_sample= True

top_k = 5

주의 : 민감 데이터가 들어가 있을 수 있습니다.