img

이번에는 Gemma를 “databricks-dolly-15k-ko.jsonl” 데이터셋을 이용해서 한국어 LoRA 파인튜닝을 해보도록 하겠습니다.

함께보기

databricks-dolly-15k-ko 데이터셋

databricks-dolly-15k-ko 데이터셋은 허깅페이스에서 다운로드 받을 수 있으며, NLP & AI - Korea University에서 databricks-dolly-15k를 DeepL API를 이용해서 한국어 번역을 수행한 파일입니다.

img

수행결과 1

img

Instruction:
유럽 여행에서 무엇을 해야 할까요?

Response:
여행하는 동안 멋진 관람객 경험을 하려면 다음을 고려해야 합니다.
- 멋진 호텔
- 멋진 레스토랑
- 멋진 관광지

여행을 하다가 멋진 관람객 경험을 하려면 다음을 고려해야 합니다.
- 멋진 숙소에서 멋진 레스토랑으로 즐거운 경험을 하려면 멋진 숙소를 선택해야 합니다.

수행결과 2

img

Instruction:
광합성 과정을 5살 아이도 이해할 수 있게 설명해주세요.

Response:
광합성 과정은 식물과 녹조류에서 일차 생산을 위해 필요한 과정입니다. 이 과정은 광합성과 탄산화를 통해 이루어집니다. 식물은 광합성으로 이루어진 빛과 수분이 풍부한 습기가 있는 환경을 선호하고 탄산가스를 필요로 합니다. 그래서 이 과정을 위해서는 빛, 수분 그리고 탄산가스가 필요합니다. 식물의 광합성은 빛이 필요한 과정이기 때문에, 식용 가능한 식물이 빛을 필요로 합니다. 그러나 식용 가능한 식물은 광합성 과정을 통해서 탄소를 흡수하고, 이 탄소를 식물의 탄수화물로 변화시킵니다. 그래서 식물의 탄수화물이 식용 가능한 식물의 식물로 변화하는 것은 광합성과 탄산화가 필요한 것

더보기

LoRA 파인튜닝 공식 예제는 다음과 같습니다.

추가문의

  • 작성자 : 김태영
  • 이메일 : tykim@aifactory.page

함께보기