LLM 미세 조정

오픈 소스 LLM을 다음과 같이 미세 조정할 수 있습니다.

• 대화를 따라하도록 가르치세요.
• 지시를 존중하고 따르도록 가르치세요.
• 특정 질문에 대한 답변을 거부하도록 설정하세요.
• 구체적인 '말하기' 스타일을 부여하세요.
• 특정 형식(예: JSON)으로 응답하도록 설정합니다.
• 특정 도메인 영역에 집중하세요.
• 특정 지식을 가르치세요.

이렇게 하려면 질문과 답변 쌍을 만들어 모델에 프롬프트와 예상 답변을 표시해야 합니다. 그런 다음 미세 조정 도구를 사용하여 훈련을 수행하고 모델이 각 질문에 대해 예상되는 답변을 응답하도록 할 수 있습니다.