language:zh size_categories:1K<n<10K format:parquet modality:text library:datasets library:pandas library:mlcroissant library:polars region:us
---
dataset_info:
  features:
  - name: page_title
    dtype: string
  - name: page_summary
    dtype: string
  splits:
  - name: train
    num_bytes: 2053192
    num_examples: 4996
  download_size: 1498828
  dataset_size: 2053192
language:
- zh
---
# Dataset Card for "wikipedia_random_page_summaries_zh_tw_5k"

`page_title` 是維基百科原始的頁面名稱，因此可能是簡體中文。`page_summary` 則一律是台灣正體版本。

使用了 [vinta/pangu](https://github.com/vinta/pangu.js) 來確保中英文之間都有加上空格。

由 https://github.com/zetavg/LLM-Research/blob/3b79836/Wikipedia_Random_Page_Summaries_Dataset_Generator.ipynb 產生。