马尔可夫链文本生成器

什么是马尔可夫链？

马尔可夫链仅基于当前状态预测下一状态，忽略历史。在文本生成中，我们用n-gram（n个字符或词的序列）预测下一个内容。

生成器从输入文本建立概率模型，然后根据学到的概率随机选择下一个字符或词，从而生成新文本。

中文词与词之间没有空格，因此按词分割的n-gram模型会把整段输入当作一个词元。本生成器会检测中文文本，改为按字符分词，生成结果里的字符直接连接、不加空格。