python正则-文本预处理

2021/8/25 11:06:01

本文主要是介绍python正则-文本预处理,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

import re
 
# make English text clean
def clean_en_text(text):
    # keep English, digital and space
    comp = re.compile('[^A-Z^a-z^0-9^ ]')
    return comp.sub('', text)
 
# make Chinese text clean
def clean_zh_text(text):
    # keep English, digital and Chinese
    comp = re.compile('[^A-Z^a-z^0-9^\u4e00-\u9fa5]')
    return comp.sub('', text)
 
if __name__ == '__main__':
    text_en = '$How old are you?$'
    text_zh = '$你好!我是个程序媛,中国新生代农民工。$'
    print(clean_en_text(text_en))
    print(clean_zh_text(text_zh))


这篇关于python正则-文本预处理的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!


扫一扫关注最新编程教程