RLHF모델 실습(1)_데이터 수집 및 정제_던전앤파이터 챗봇 만들기

해당 실습은 단순히 RLHF 예제를 따라해보는게 아니라 실제로 나만의 데이터를 수집하고 만들어서 훈련을 시켜보는 목적에 있습니다.

 

아직 RLHF에 대한 포스팅이 마무리되지는 않았지만 내용을 정리하고 있어서 포스팅하지 못했습니다. 너무 포스팅만하면 집중이 잘 안되기도 해서 공부한 내용을 바탕으로 실습 프로젝트를 진행하고 있습니다. 이 글에 포스팅된 부분도 아직 진행중이지만 시간이 해결해줄 부분만 남았고 간단한 내용이라 먼저 포스팅을 진행합니다!

---

RLHF실습에 선택된 데이터는 던전앤파이터의 스토리 관련 데이터를 선택하였습니다. 게임 쪽에 관심이 많았고 궁극적으로 만들어 보고 싶은건 게임 캐릭터의 성격을 가진 자연어 모델을 만들어보고 싶었습니다. 그래서 게임 분야의 스토리를 선택하였습니다. 그 중에서도 던전앤파이터를 선택한 이유는 해당 모델 실습을 진행하기 위해서는 데이터가 충분히 많았어야 했습니다. 단순히 스토리를 정리된 텍스트만으로는 모델이 학습할 형태의 텍스트를 만드는데 한계가 있어서 정보 제공이 많이 되고 있는 게임 스토리를 선택하다보니 던전앤파이터 스토리를 선택하게 되었습니다.

 

데이터 수집 및 출저

던전앤파이터 스토리 텍스트 데이터를 수집은 루리웹-던파 스토리와 던전앤파이터 공식 홈페이지(DFU) 두 사이트를 통해 데이터를 수집하였습니다. 단순히 크롤링을 진행한 것이기 때문에 크롤링과 관련된 내용은 포스팅에서는 스킵하겠습니다.

‘던전 앤 파이터’ 세계관/스토리 총정리 1부 | 루리웹 게임 스토리 | 루리웹

던파 IP 포털, DFU

 

데이터 생성

데이터 수집은 SFT훈련을 위한 데이터 수집을 진행하였고 수집 방법은 SFT만으로 만들어진 모델인 KoAlpaca의 데이터 수집 방법을 참고하여 진행하였습니다.

GitHub - Beomi/KoAlpaca: KoAlpaca: 한국어 명령어를 이해하는 오픈소스 언어모델

수집한 텍스트 데이터를 통해서 질문-응답 형식의 데이터를 만들었고 이에 대한 작업을 ChatGPT - gpt3.5-turbo 모델을 활용하여 데이터를 만들었습니다. 해당 프롬프트 작업은 다음과 같은 내용으로 전달하였습니다. 추가적으로 4번만 작성했을 경우 본문에 있지 않은 내용을 생성하는 답변을 받아서 추가적으로 7번의 내용을 추가하여 진행하였습니다. 그런데 공식 홈페이지에서 게시된 내용 혹은 크롤링한 내용 중에서 인코딩 후 토큰이 gpt3.5-turbo에서 지원해주는 최대 토큰 수를 넘어가는 데이터들이 존재해서 이 경우 좀 더 많은 입력 토큰을 사용할 수 있는 gpt4-1106-preview 모델을 사용하여 답변을 생성하도록 처리 하였습니다.

system_prompt = '아래는 작업을 설명하는 명령어입니다. 명령어에 따른 요청을 적절히 완료하는 응답을 작성하세요. 추가적 입력이 있다면 작업을 설명하는 명령어와 추가 컨텍스트를 제공하는 입력에 따라 요청을 적절히 완료하는 응답을 작성하세요.'

prompt = """다음 요구사항에 맞는 답변을 생성해주세요.
요구 사항은 다음과 같습니다:
1. 본문에 대한 내용을 요약하는 작업을 진행합니다.
2. 답변은 한국어로 작성해야 합니다.
3. 답변은 하나의 질문과 장문, 중문, 단문 응답으로 총 네 가지 모두 작성해야 합니다.
4. 장문, 중문, 단문은 같은 질문에 대한 답변으로 작성해야 합니다.
5. 장문은 5문장 이상으로 구성해야 합니다.
6. 중문은 3문장 이하로 구성해야 합니다.
7. 단문은 1문장으로 구성해야 합니다.
8. 장문, 중문, 단문은 내용에 겹치는 부분이 있어도 됩니다.


아래의 본문에 대한 내용을 바탕으로 답변을 작성해주세요.
질문과 응답은 아래와 같은 형식으로 입력에 알맞게 작성하세요.

질문과 각 응답 사이는 ###으로 구분해주세요.
질문 : ###
장문 : ###
중문 : ###
단문 :


본문 : 다음 내용은 {subject}에 관한 내용입니다.\n{content}

"""

 

 

ChatGPT를 활용하여 만든 데이터는 아래와 같습니다. 해당 데이터는 SFT를 위한 데이터를 위한 준비이기도 했지만 RM에 대한 학습도 필요 했기 때문에 위와 같이 하나의 질문에 대한 답변을 3개로 받았고 RM모델 튜닝을 위한 rank는 장문이 80%, 중문 15%, 단문 5%의 비율로 설정하여 훈련 데이터를 만들 예정입니다.

 

**********************************************************************
IDX :  1
질문 : 바다와 전쟁의 흔적, 그리고 마계의 사도들에 대한 이야기를 요약 해주세요. ###
장문 : 소녀는 처음으로 넓은 바다를 보고 감탄하며 그 아름다움에 매료되었습니다. 그러나 그녀가 바라본 바다 주변의 섬은 과거 전쟁으로 황폐해진 곳이었습니다. 이곳에서 바다와 다른 풍경을 이루는 활화산이 있는 섬에 사도 안톤이 존재했다는 사실에 놀라움을 감추지 못했습니다. 소녀는 마계와 천계를 이어주는 통신 장치를 통해 연결된 리아 리히터와 통신을 하며, 자신이 마계에서 사라진 사도들을 찾는 데에 중요한 역할을 할 것이라는 기대감을 주고받습니다. 그러나 갑자기 차원의 틈이 닫혀 통신은 끊기고, 이제 그녀는 천계와 마계의 경계에서 불확실한 미래를 향해 자신의 역할을 다하기 위해 각오를 다집니다. ###
중문 : 바다를 처음 본 소녀는 과거 전쟁터였던 섬의 아름다움에 놀랍니다. 그리고 통신기를 통해 리아와 사도 안톤의 존재 및 상황을 나누며 정보를 주고받지만, 차원의 틈이 닫혀 다시 연락을 기다려야 하는 상황에 처하게 됩니다. ###
단문 : 바다에 감탄한 소녀가 마계의 사도들과 관련한 중요한 통신을 하다 차원의 틈이 닫혀 소통이 끊깁니다. ###

**********************************************************************
IDX :  2
질문 : '성채 에피소드 성채'의 내용을 요약해주세요. ###
장문 : '성채 에피소드 성채'에서 화자는 어둠 속에서 빛의 경계 너머로 신비한 힘에 이끌려 여행을 합니다. 이 여정에서 화자는 슬픔을 느끼며, 인간을 넘어서 신성한 존재로 거듭난 경험을 합니다. 화자는 성채의 감시자인 호그니와 불꽃과 같은 헤딘을 만나 성채를 지키는 사명에 대해 이야기하고 있습니다. 마지막으로, 꿈에서 깨어난 그란디스는 현실에서 호그니로부터 성채의 등장을 알리는 소식을 듣게 됩니다. 그리하여 그란디스에게 싸움에 임하라는 메시지가 전달됩니다. ###
중문 : 화자는 빛의 경계를 넘어 성채의 감시자 호그니와 뜨거운 헤딘을 만나고, 그들에게 성채를 지키라는 계시를 전합니다. 잠에서 깬 그란디스는 현실 속에서 성채의 등장과 싸움을 준비하라는 메시지를 받습니다. ###
단문 : 화자는 신비한 여정을 통해 성채를 지키는 전사들과 만나며 마지막에는 현실에서 성채의 등장을 알게 됩니다. ###

**********************************************************************
IDX :  3
질문 : '사도'가 무엇이며, 마계에서의 그들의 입지는 어떠한가요? ###
장문 : '사도'는 다양한 세계에서 온 이계의 존재들로, 마계에서 가장 강력한 힘을 가진 자들입니다. 이들은 각자의 세계에서 올라와 마계를 떠돌며, 그들의 거대한 힘은 이들을 접하는 생명체들에게 압도적인 공포를 안겨줍니다. 실제로 일부 '사도'의 존재만으로도 마계인들의 생명을 위협할 정도이며, 이로 인해 많은 마계인들이 '사도'가 거주하는 지역을 피해 숨어 다니고 있는 실정입니다. 이러한 상황은 '사도'들이 마계에서 어떠한 강력한 위치에 있다는 것을 반증하는 예입니다. ###
중문 : '사도'는 이계에서 온 강력한 존재들을 일컫으며, 그들의 힘 앞에 마계인들은 큰 공포를 느낍니다. 이들은 자신의 힘으로 마계인의 생명을 위협할 정도로 막강하며, 마계인들은 이들을 피해 살고 있습니다. ###
단문 : '사도'는 이계의 강력한 존재들로, 그들의 위압적인 힘 앞에 마계인들은 공포와 위협을 느낍니다. ###


**********************************************************************
IDX :  4
질문 : '사도 서로의 관계'에 대해 설명해주세요. ###
장문 : '사도 서로의 관계'는 아주 독특한 것으로 표현됩니다. 사도들은 각기 다른 세계에서 온 인물들로, 우연한 만남을 가졌음에도 불구하고 서로 간에는 설명할 수 없는 특별한 기운이 존재한다고 합니다. 이 기운은 모든 사도가 공유하며 서로에게 살상 의도를 가질 수 없게 만듭니다. 예를 들어, 용의 전쟁에서 카인이 다른 사도인 바칼을 죽이지 못한 이유도 이 특별한 기운 때문이었다고 전해집니다. 사도들의 이러한 독특한 관계는 그들의 행동에 큰 영향을 미치고 있습니다. ###
중문 : 사도들은 서로 다른 세계 출신임에도 불구하고 공통된 기운을 공유하여 서로를 직접 죽일 수 없습니다. 이 기운은 용의 전쟁에서 카인이 바칼을 죽이지 못한 원인이기도 합니다. ###
단문 : 사도들은 특별한 기운을 통해 서로를 죽일 수 없는 독특한 관계를 가지고 있습니다. ###



**********************************************************************
IDX :  5
질문 : '사도 사도의 전이'에 대해 설명해주실 수 있나요?
###
장문 : '사도 사도의 전이'는 일부 사도가 아라드 대륙으로 전이되는 현상을 말합니다. 전이된 사도들은 자신의 힘을 온전히 발휘할 수 없는 지역에 떨어지게 되는데, 이는 특정한 공통점으로 보입니다. 그 결과, 사도들은 그 지역에 재앙 같은 피해를 주기 시작하지만, 결국 저항을 만나 죽게 됩니다. 이 과정에서 사도가 가져오는 파괴와 그 종말에 대한 이야기가 '사도 사도의 전이' 안에서 다뤄집니다.
###
중문 : 사도가 아라드 대륙으로 전이되는 현상을 '사도 사도의 전이'라 합니다. 이들은 자신의 힘을 제대로 사용하지 못하는 지역에 도착하여 큰 피해를 주다가 저항에 의해 죽게 됩니다.
###
단문 : '사도 사도의 전이'는 사도들이 아라드 대륙에 전이되어 재앙을 일으키다 결국 죽음을 맞는 현상입니다.


**********************************************************************
IDX :  6
질문 : '사도 문양 트리비아'에 대해 설명해주세요.
### 
장문 : '사도 문양 트리비아'는 각 사도들의 문양에 대한 유래를 다루고 있습니다. 제 1사도 카인의 문양은 그를 두려워하고 경외하는 자들에 의해 만들어졌으며, 제 2사도 힐더는 자신의 우는 눈을 문양으로 형상화했습니다. 제 3사도 이시스-프레이의 문양은 추종자들이 만든 후 밤의 마천루 전투를 기념하여 상징이 추가되었습니다. 추종자들은 제 4사도 카시야스의 무력을 문양으로, 제 5사도 시로코의 무형의 모습을 문양으로 형상화했습니다. 각각의 사도들은 추종자들, 경외하는 사람들, 또는 특정 공동체에 의해 다양한 방식으로 그들의 모습이나 상징을 문양으로 변환하여 사용되게 되었으며, 이는 경고, 존중, 신성함 등의 다양한 의미를 내포하고 있습니다.
### 
중문 : 총 11명의 사도 각각의 문양은 해당 사도를 두려워하거나 존경하는 자들에 의해 만들어졌습니다. 예를 들어 카인 문양은 경외감을 표현하기 위해, 힐더의 문양은 그녀의 우는 눈을 형상화했습니다. 이러한 문양들은 종교적, 경고적, 심미적 의미를 갖고 문화 속에 흔적을 남겼습니다.
### 
단문 : '사도 문양 트리비아'는 각 사도의 창시자 또는 추종자들에 의해 만들어진 문양들의 배경과 의미를 설명합니다.

**********************************************************************
IDX :  7
질문 : '숙명의 카인'에 관해 설명해주세요. ###
장문 : '숙명의 카인'은 마계에서 최고의 강자로 칭해지는 인물로, 마계 브루클린 동부의 유니언 스퀘어에 거주합니다. 그에 대한 정보는 많지 않으나, 그의 육체는 어떠한 물질이나 속임수로도 파괴할 수 없다고 알려져 있습니다. 또한, 그의 엄청난 힘은 그에게 도전하는 모든 것을 파괴할 수 있는 것으로 전해집니다. 가장 높은 서열의 사도임에도 불구하고 자신의 영역 외에는 세력 확장에 관심이 없는 것으로 보입니다. ###
중문 : '숙명의 카인'은 마계 최강의 왕으로 알려져 있으며, 그의 육체는 불파손성을 가졌고 모든 것을 파괴하는 힘을 지녔습니다. 그는 마계 브루클린의 유니언 스퀘어에 살고 있으나, 추가적인 세력 확장에는 관심이 없어 보입니다. ###
단문 : 마계에서 강한 힘을 지닌 '숙명의 카인'은 유니언 스퀘어에 거주하며 세력 확장에 무관심합니다.

**********************************************************************
IDX :  8
질문 : '숙명의 카인 전투 행적'에 대해 간략하게 설명해주세요. ###
장문 : '숙명의 카인 전투 행적' 이야기는 카인과 이시스 - 프레이 간의 명운을 건 전투에 관한 것입니다. 이시스 - 프레이는 카인을 재앙의 원인으로 여겨 대치한 상태에서 질문을 던졌으나, 대답 대신 공격을 받았습니다. 이후 두 존재는 수일간 치열한 전투를 벌이며 서로 다치지 않는 끝없는 대결을 펼쳤습니다. 마계가 테이베르스에서 물러난 다섯째 날, 힐더의 중재로 둘의 싸움은 무승부로 마무리됩니다. ###
중문 : 이시스 - 프레이와 카인 사이에 오랜 기간의 혈투가 벌어진 '숙명의 카인 전투 행적'에서, 서로를 이기지 못하며 싸움은 장기화됩니다. 최종적으로 힐더의 중재로 두 전사의 싸움은 무승부로 끝이 납니다. ###
단문 : '숙명의 카인 전투 행적'에서 이시스 - 프레이와 카인의 장기 전투는 무승부로 종결됩니다. ###

**********************************************************************
IDX :  9
질문 : '숙명의 카인 정복자 카시야스'에 대해 설명해주세요. ###
장문 : '숙명의 카인 정복자 카시야스' 이야기에서 카시야스는 타의 추종을 불허하는 강함을 지향하며 항상 더 강한 존재를 찾아 결투를 신청합니다. 이러한 그의 성향은 다른 사도들에게도 나타나지만, 카인과의 결투에서는 그의 모든 노력과 기술이 무색해질 만큼 카인의 힘이 압도적입니다. 결국 카시야스는 카인에게 참패하며, 그 이후로는 카인을 두려워하게 되죠. 이러한 경험을 통해 카시야스는 자신의 한계를 인식하고 새로운 겸손함을 배우게 됩니다. ###
중문 : '숙명의 카인 정복자 카시야스'에서 주인공 카시야스는 강함에 대한 집념으로 카인에게 결투를 신청합니다. 그러나 카시야스의 모든 기술과 경험은 카인의 월등한 힘 앞에서 무너지고, 치명적인 패배를 맛보게 됩니다. 결국 그는 카인을 정복하려던 야심을 접고 카인을 두려워하게 됩니다. ###
단문 : 카시야스는 강함을 추구하다 카인에게 결투를 신청했으나 완패하여 그를 두려워하게 됩니다.

**********************************************************************
IDX :  10
질문 : '숙명의 카인 폭룡왕 바칼'에 대해 설명해주세요. ###
장문 : '숙명의 카인 폭룡왕 바칼'은 마계로 오른 바칼이 죽음에 대한 두려움을 처음 경험하고, 카인과의 상상 속 대결에서 늘 패배하며 자신이 패배하는 모습을 반복해서 그렸습니다. 시간이 흘러 용의 전쟁을 일으킨 바칼은 전쟁 끝에 사도들에게 둘러싸였을 때 자신이 자신을 죽음에 이르게 하지 않을 것을 깨닫고, 카인에게 돌진합니다. 카인도 바칼을 처치하려 했으나 멈칫하고 피해, 결과적으로 바칼에게 도망칠 기회를 제공하게 되었습니다. ###
중문 : 마계의 폭룡왕 바칼은 카인과의 대결을 상상하며 자신의 죽음에 대한 공포를 느낍니다. 전쟁 끝에 사도들에게 포위당한 후, 자신의 운명을 깨닫고 자살하지 않기로 하면서 도망칩니다. 카인은 그를 처치하려다 망설이며 바칼에게 탈출 기회를 주었습니다. ###
단문 : 마계의 바칼은 카인과의 대결을 상상하다 사도들에 포위된 후 도망치는 결심을 하고, 카인의 망설임으로 탈출에 성공합니다.

**********************************************************************
IDX :  11
질문 : '우는 눈의 힐더'는 누구이며 그녀의 역할은 무엇인가요?
###장문 : '우는 눈의 힐더'는 과거 테라로 불리던 시절부터 살아온 인물로, 마법의 최초 발견자로 알려져 있습니다. 그녀는 세계의 멸망과 가족의 죽음을 기억하면서 모든 것을 복구하기 위해 오랜 시간을 투자해왔습니다. 현재는 마계의 중요한 사건을 관장하며, 정신감응 능력을 통해 사도들을 조율하고 분쟁을 중재하는 역할을 하고 있습니다. 전투력이 약함에도 불구하고 두 번째 서열로 인정받는 이유는 카시야스와 루크와 같은 귀족들과의 긴밀한 관계 때문입니다. 그녀는 마계 브루클린 남부의 블루밍데일에 살고 있으며, 자주 모습을 드러내지 않습니다.
###중문 : '우는 눈의 힐더'는 자연의 힘을 이용한 마법을 처음 발견한 마계의 중요 인물입니다. 그녀는 사도들을 조율하고 분쟁을 중재하는 역할을 하며, 마계의 브루클린 지역 블루밍데일에 거주합니다.
###단문 : '우는 눈의 힐더'는 마법을 최초로 발견한 마계의 조율자로 분쟁을 중재하고 사도들을 결속시키는 역할을 합니다.

**********************************************************************
IDX :  12
질문 : '우는 눈의 힐더 카인과 만남'에 관한 내용을 요약해주세요. ###
장문 : 테라가 멸망하면서 우주 방사선에 큰 피해를 입은 마계인들은, 힐더가 마계를 이차원으로 이동시켜 현실로부터 분리함으로써 방사선 피해로부터 보호받게 됩니다. 그러나, 이차원에서 무제한으로 유영하게 된 마계는 다른 행성과 결합하면서 거인과 괴수들이 침공해 마계를 파괴하고 마계인들에게 피해를 주었습니다. 이에 카인이 나타나 이 괴물들을 처치하고 힐더는 마계를 지키기 위해 그에게 제안을 하여 함께하게 됩니다. 이 사건이 그들의 만남의 시작이었습니다. ###
중문 : 마계가 우주 방사선의 피해로부터 이차원으로 이동된 후, 다른 행성의 거인과 괴수들이 침입해 피해를 입히자, 카인이 나타나 그들을 처치한다. 이를 계기로 힐더는 카인에게 마계를 지킬 제안을 하여 그와 만나게 된다. ###
단문 : 힐더가 마계를 이차원으로 옮겨 방사선으로부터 보호한 후, 카인이 거인과 괴수의 침략을 막아내어 만나게 됩니다.

**********************************************************************
IDX :  13
질문 : '우는 눈의 힐더 사도의 탄생'에 대해 설명해주세요. ###
장문 : '우는 눈의 힐더 사도의 탄생'은 마계가 계속하여 타 행성들과 접촉하며 다른 이계의 존재들의 침입을 받는 상황을 배경으로 하고 있습니다. 대부분의 침입자들은 카인에 의해 격퇴되지만 일부는 그의 감시를 피해 몰래 숨어들게 됩니다. 이 중 강력한 존재들이 마계에 등장하면 힐더는 그들을 모아 자신을 포함한 구원자 '사도'로 칭하기까지 합니다. 이들 중 힐더만이 마계의 재건에 목마르고, 다른 사도들은 이에 무관심한 상태입니다. ###
중문 : 마계는 타 행성과 접촉하며 이계의 존재들에게 침입당하고, 카인에 의해 대부분 격퇴되지만 몇몇은 숨어든다. 힐더는 강력한 존재들을 '사도'로 모으나, 그들 대부분은 마계의 재건에 관심이 없다. ###
단문 : 마계가 침입자들에게 시달리고 힐더가 다른 강자들을 모아 '사도'를 창설하나 재건에 무관심한 사도들이 존재한다. ###

**********************************************************************
IDX :  14
질문 : '우는 눈의 힐더 창신세기의 발견'에 대해 설명해주세요. ###
장문 : '우는 눈의 힐더 창신세기의 발견'은 고대 마계의 숨겨진 공간에서 힐더가 발견한 네 개의 비석에 관한 이야기입니다. 그 중 두 개는 심하게 파괴되어 형체를 알아보기 힘들었지만, 나머지 두 개의 비석인 창신세기는 온전했습니다. 이 예언서에 매료된 힐더는 밤낮으로 이를 연구하며, 이것이 마계의 비극을 해결할 열쇠라고 믿고 있습니다. 이 이야기는 이현진 성우가 목소리로 녹음한 힐더에 관한 서사 중 하나입니다. ###
중문 : '우는 눈의 힐더 창신세기의 발견'은 힐더가 마계에서 찾은 네 개의 비석 중 온전한 두 개의 창신세기를 연구하며 비극의 해답을 찾으려는 내용을 담고 있습니다. 이 이야기는 성우 이현진이 녹음했습니다. ###
단문 : 고대 마계 비석 '창신세기'를 연구하는 힐더의 이야기로, 비극의 해결을 추구하며 이현진 성우가 목소리를 맡았습니다.

**********************************************************************
IDX :  15
질문 : '창공의 이시스 - 프레이'에 대해 설명해주실 수 있나요? ###
장문 : '창공의 이시스 - 프레이'는 테이베르스 행성 출신으로 고향에서 가장 뛰어난 능력을 지녔던 인물입니다. 그는 높이 날고 멀리 볼 수 있는 능력을 가지고 있었으며, 위대한 전사로서 많은 존경을 받았습니다. 어느 날 테이베르스에 검은 비가 내리며 평화가 깨지자, 그 원인을 찾아 창공으로 날아올랐고 마계와의 연결을 발견했습니다. 카인과의 장기전으로 프레이는 다시는 고향에 돌아갈 수 없게 되었으나, 힐더의 조언에 따라 마계에 머물며 테이베르스의 결착을 기다리고 있습니다. ###
중문 : '창공의 이시스 - 프레이'는 자신의 행성이 위험에 처했을 때 마계와 싸움을 벌이고 마계에 머무는 존재가 되었습니다. 왕성한 능력으로 존경받던 그는 테이베르스의 평화를 되찾기 위해 자신을 희생했고, 현재는 고향의 결착을 기다리는 중입니다. ###
단문 : '창공의 이시스 - 프레이'는 고향 테이베르스를 위해 마계에서 싸우고 대기하고 있는 전사입니다.

**********************************************************************
IDX :  16
질문 : '정복자 카시야스'는 누구인가요? ###
장문 : '정복자 카시야스'는 호전적인 귀면족의 일원으로 마계의 에컨에서 태어났으며, 강한 기운을 찾아 전투를 치르는 존재입니다. 이 종족은 평범한 인간보다 약 1.5배 큰 체구를 가지고 있으며, 두 자루의 검을 사용하여 싸웁니다. 카시야스는 사도 중에서도 최고의 전투 실력을 자랑하지만, 제 1사도인 숙명의 카인에게는 패하여 더 강해지기 위해 마계 소환사와 계약을 맺고 아라드 대륙으로 건너옵니다. 새로운 세계에서 새로운 적들과의 대결을 통해 자신을 강화하며, 항상 새로운 도전을 기대하는 낙천주의자입니다. 성우 안장혁이 이 캐릭터의 목소리를 담당했습니다. ###
중문 : '정복자 카시야스'는 마계에 살던 귀면족으로 강함을 추구하여 아라드로 온 전사입니다. 최강이라는 명성에 걸맞게 다양한 전투 경험을 쌓으나 1사도에게 패배하고, 이를 계기로 끝없이 강해지고자 합니다. 그는 또한 끊임없는 새로운 도전을 좋아하는 낙천적 기질을 가지고 있습니다. ###
단문 : '정복자 카시야스'는 호전적인 귀면족으로 강함을 추구해 아라드 대륙에서 성장을 거듭하는 전사입니다. ###

**********************************************************************
IDX :  17
질문 : '무형의 시로코'에 대해 설명해주세요. ###
장문 : '무형의 시로코'는 변이 세계 주알라바돈 출신의 사도로, 다양한 물질로 변신할 능력이 있습니다. 그러나 그의 능력은 따뜻한 온도에서만 제대로 발휘되며, 이 약점으로 인해 마계의 메트로센터에 거주했습니다. 그곳에서는 제 7사도 안톤과 에너지를 두고 지속적으로 대립했습니다. 사도 중 최초로 전이를 겪은 시로코는 힐더의 계획을 읽어내기도 했으며, 이는 그에게 중대한 변화를 가져왔음을 시사합니다. ###
중문 : '무형의 시로코'는 변이가 가능한 사도로, 온도에 의해 능력이 제한되며, 메트로센터에서 안톤과 권력 투쟁을 벌였습니다. 사도 중 최초로 전이 피해를 입었으며, 힐더의 계획을 알아차렸습니다. ###
단문 : '무형의 시로코'는 변이 능력을 가진 사도로서, 온도에 영향을 받으며 안톤과 대립하고 힐더의 계획을 간파했습니다. ###

**********************************************************************
IDX :  18
질문 : '무형의 시로코 전이'에 대해 설명해주세요.
###
장문 : '무형의 시로코 전이'는 벨 마이어 공국 북부의 비명굴로의 전이 사건을 말합니다. 이 사건은 발생 후 3년이 지나고 비명굴에서 큰 사건의 주범으로 알려지게 되는데요. 결국 시로코는 아간조, 반 발슈테트, 시란, 브왕가 등 여러 지역에서 온 강력한 인물들에게 패하여 죽음을 맞이합니다. 이로 인해 비명굴 사건은 일단락되면서 시로코는 역사 속의 인물로 기억되게 됩니다.
###
중문 : 벨 마이어 공국 북부 비명굴로 전이된 '무형의 시로코'는 3년 후 주범이 되었으나 아간조와 반 발슈테트 등 강자들에 의해 패배하며 죽는다. 이 사건은 비명굴 사건으로 알려져 있다.
###
단문 : '무형의 시로코'는 비명굴 전이 후 3년 만에 강자들에게 패배해 사망합니다.


**********************************************************************
IDX :  19
질문 : '무형의 시로코' 내용의 요약은 무엇인가요? ###
장문 : 이 작품은 절망 속에서도 생존을 위해 분투하는 주인공의 내면적 갈등을 그리고 있습니다. 주인공은 심각한 갈증과 배고픔에 시달리며, 견디기 힘든 상황 속에서 고통과 환영에 시달립니다. 그럼에도 불구하고 살고자 하는 의지는 강렬하며, 자신이 처한 환경과 운명에 저항하면서 복수와 부활의 꿈을 꾸고 있습니다. 결국, 넘을 수 없는 난관에도 불구하고 거대한 폭풍과 같은 힘을 발휘하여 살아남겠다는 각오를 다지면서, 그 어려움을 여흥으로 여기는 태도를 보입니다. ###
중문 : '무형의 시로코'는 주인공의 생존 의지와 내면의 고투를 다룬 내용입니다. 주인공은 마지막까지 살기 위해 고통과 환영에 저항하며 부활을 꿈꾸며 극복하고자 합니다. 힘든 상황 속에서도 슬픈 미소를 지으며 삶을 긍정하려는 모습이 인상적입니다. ###
단문 : 주인공은 절망적인 상황에서도 살고자 하는 의지를 불태우며 부활을 꿈꿉니다.

**********************************************************************
IDX :  20
질문 : '검은 질병의 디레지에'는 어떤 존재인가요? ###
장문 : '검은 질병의 디레지에'는 치명적인 병원균들로 이루어진 위험한 생물로서 모든 질병의 원인으로 알려져 있습니다. 이 검은 야수는 생명체를 말 그대로 먼지로 변하게 만드는 능력을 지닌 것으로 악명이 높으며, 마계인들 사이에서도 흑사병과 인플루엔자 같은 질병을 유발하고 변형과 액화 현상을 일으킵니다. 그럼에도 불구하고 다른 사도들에게 밀려, 브롱크스 북부의 변두리에 살게 되었으며, 이제 다른 사도들과의 싸움을 기피하는 상태입니다. ###
중문 : '검은 질병의 디레지에'는 치명적 병원균으로 구성된 생명체로, 질병을 유발하며 마계에서 소외되어 브롱크스 북부 변두리에서 살면서 다른 사도들과의 싸움을 피하고 있습니다. ###
단문 : '검은 질병의 디레지에'는 병원균 생물로, 질병을 일으키고 브롱크스 변두리에서 다른 사도들과 싸우기를 기피합니다. ###

 

현재 데이터를 만들고 있는 단계이기 때문에 수집이 완료되면 데이터를 통해서 SFT와 RM 모델의 훈련을 진행하고 PPO알고리즘을 적용하여 던전앤파이터에 관련된 이야기를 잘 대답할 수 있는 모델을 만들어 보도록 하겠습니다.