GPT2-Chinese

代码说明：

  中文的GPT2模型训练代码，基于Pytorch-Transformers，可以写诗，写新闻，写小说，或是训练通用语言模型等。(Chinese GPT2 model training code, based on Pytorch-Transformers, can write poetry, news, fiction, or training general language model.)

文件列表：

cache, 0 , 2019-08-12
cache\vocab.txt, 109516 , 2019-08-12
cache\vocab_all.txt, 86120 , 2019-08-12
cache\vocab_all_no_word_piece.txt, 74512 , 2019-08-12
cache\vocab_small.txt, 62801 , 2019-08-12
cache\vocab_small_no_word_piece.txt, 51194 , 2019-08-12
config, 0 , 2019-08-12
config\model_config.json, 175 , 2019-08-12
config\model_config_small.json, 175 , 2019-08-12
generate.py, 8127 , 2019-08-12
generate_texts.py, 9163 , 2019-08-12
LICENSE, 1065 , 2019-08-12
README.md, 3276 , 2019-08-12
requirements.txt, 86 , 2019-08-12
sample, 0 , 2019-08-12
sample\doupo.jpeg, 5196022 , 2019-08-12
sample\poem_1.png, 635877 , 2019-08-12
sample\poem_2.png, 576342 , 2019-08-12
sample\tiyu.jpg, 1069043 , 2019-08-12
sample\律诗绝句.png, 1331347 , 2019-08-12
sample\浣溪沙_江城子.png, 1110415 , 2019-08-12
sample\蝶恋花_满江红.png, 1136848 , 2019-08-12
tokenization_bert.py, 19421 , 2019-08-12
tokenization_bert_without_wordpiece.py, 19652 , 2019-08-12
train.json, 15 , 2019-08-12
train.py, 12145 , 2019-08-12
train_single.py, 10378 , 2019-08-12