Pre-training DataText

온라인 매체 기획 기사 데이터셋

Type
Document Dataset
Domain
Lifestyle
Language
English

Overview

이 데이터셋은 미국 여러 온라인 매체에 게재된 장문 기획 기사를 모은 것으로, 다양한 주제 영역과 폭넓은 문체를 포함합니다.

활용 사례

  • 문체 다양성을 고려한 사전학습: 여러 매체와 분야의 기사를 함께 학습시켜, 단일 매체 코퍼스만으로는 확보하기 어려운 다양한 편집 문체를 모델이 익히도록 할 수 있습니다.
  • 장문 요약 모델 학습 및 평가: 기획 기사 수준의 긴 원문을 활용하여, 짧은 뉴스 스니펫 위주의 기존 벤치마크로는 다루기 어려운 장문 요약 모델을 학습·평가할 수 있습니다.
플리토 큐레이션 데이터 플리토 큐레이션 데이터