📖train: 모델 데이터 80만건 finetuning

Author: Sunho12

data/data.csv

@@ -4226,3 +4226,4 @@ id,content,category
 4237,힘-쓰다 : 힘을 들여 일을 하다.,dictionary
 4238,힘없-이 : 기운이나 의욕 따위가 없이.,dictionary
 4239,힘-차다 : 힘이 있고 씩씩하다.,dictionary
+4240,"오늘은 집에 돌아오던 길에 갑자기 까치 한 마리가 내 머리 위를 날아다녔다. 정말 까치가 내 머리 위를 날아다니는 것을 처음 봐서 놀랐지만, 동시에 신기하기도 했다. 그 순간에는 머리가 조금 긁히는 듯한 느낌도 들었지만, 소름 끼치는 경험이었다. 이런 일이 얼마나 자주 있는 일인지 궁금하다. 왜 까치는 내 머리 위를 날아다녔을까? 혹시 운이 좋다는 신호인가? 매일 똑같은 길을 가는데도 항상 새로운 일상이 일어나는 것이 정말 신기하다.",

finetune_doc2vec.py

@@ -12,7 +12,7 @@ def main():
     model = Doc2Vec.load("models/memo_doc2vec.model")
 
     # 2. 새 데이터 로드
-    path = "data/raw/setA_memos.txt"
+    path = "data/raw/merged.txt"
     new_docs = [line.strip() for line in open(path, encoding="utf-8") if line.strip()]
     tagged_new = [TaggedDocument(words=tokenize_ko(s), tags=[f"new_{i}"])
                   for i, s in enumerate(new_docs)]