Update README.md

README.md

@@ -40,32 +40,6 @@ Command r plus 모델을 이용하여 자체 구축한 RAG 특화 데이터셋,
 }
 ```
 
-## 학습 환경 및 파라미터  
-- 튜닝 환경
-  - H100(80GB) * 8
-- 파라미터
-  - tokenizer_model_mex_length 4500
-  - use_flash_attn True
-  - num_train_epochs 3.0
-  - weight_decay 0.001
-  - lr_scheduler_type "linear"
-  - per_device_train_batch_size 1
-  - gradient_accumulation_steps 64
-  - learning_rate 5e-06
-  - bf16 True
-  - deepspeed ds_stage2.json
-
-## 사용 데이터셋
-- AIhub 16 행정 문서 대상 기계독해 데이터
-- AIhub 17 뉴스 기사 기계독해 데이터
-- AIhub 21 도서자료 기계독해
-- AIhub 149 표 정보 질의응답 데이터
-- AIhub 150 숫자연산 기계독해 데이터
-- AIhub 151 금융, 법률 문서 기계독해 데이터
-- kyujinpy/KoCoT_2000
-- MarkrAI/KoCommercial-Dataset
-- CarrotAI/ko-instruction-dataset
-- heegyu/CoT-collection-ko
 
 ## RAG Prompt 
 ```
@@ -115,6 +89,33 @@ response = tokenizer.batch_decode(generated_ids, skip_special_tokens=True)[0]
 print(response)
 ```
 
+## 학습 환경 및 파라미터  
+- 튜닝 환경
+  - H100(80GB) * 8
+- 파라미터
+  - tokenizer_model_mex_length 4500
+  - use_flash_attn True
+  - num_train_epochs 3.0
+  - weight_decay 0.001
+  - lr_scheduler_type "linear"
+  - per_device_train_batch_size 1
+  - gradient_accumulation_steps 64
+  - learning_rate 5e-06
+  - bf16 True
+  - deepspeed ds_stage2.json
+
+## 사용 데이터셋
+- AIhub 16 행정 문서 대상 기계독해 데이터
+- AIhub 17 뉴스 기사 기계독해 데이터
+- AIhub 21 도서자료 기계독해
+- AIhub 149 표 정보 질의응답 데이터
+- AIhub 150 숫자연산 기계독해 데이터
+- AIhub 151 금융, 법률 문서 기계독해 데이터
+- kyujinpy/KoCoT_2000
+- MarkrAI/KoCommercial-Dataset
+- CarrotAI/ko-instruction-dataset
+- heegyu/CoT-collection-ko
+- 
 ## Contact us
 - 써로마인드
 - 서울시 관악구 남부순환로 1802, 2층