textsplitter:将长文本拆分为推文大小的块 Python 版本

文本分割器 将长文本拆分为推文大小的块 Python 版本 算法 将长文本拆分为 140 个或更少的长块。 以下规则适用： 预运行： 用空格替换单换行符，除非它后面跟着一个大写字符 当两个或多个连续换行符时拆分 只要标点前面至少有五个非标点字符，就可以在 140 个字符之前拆分最后一个标点符号。 （例如，当我们有“...John Smith 迟到了。PG Wodehouse 生气了。”我们更喜欢在“迟到”之后休息。） 如果失败，在 140 个字符满之前拆分最后一个空格，优先使用换行符而不是其他空格 如果即使失败，也可以拆分为 140 个字符。