欧美三区_成人在线免费观看视频_欧美极品少妇xxxxⅹ免费视频_a级毛片免费播放_鲁一鲁中文字幕久久_亚洲一级特黄

Python中文文本分句 sentence tokenize

系統(tǒng) 2158 0

由于nltk等都沒(méi)有實(shí)現(xiàn)句子級(jí)別的tokenize,或者文本分句。這里使用python正則,快速實(shí)現(xiàn)一個(gè),可以把文本分成若干個(gè)小句子。

代碼如下,如果你想要實(shí)現(xiàn)自己個(gè)性化的分句,例如只考慮“。!”等的分句,可以調(diào)整正則項(xiàng),“|”代表或的意思。

            
              def sent_tokenize(x):
    sents_temp = re.split('(:|:|,|,|。|!|\!|\.|?|\?)', x)
    sents = []
    for i in range(len(sents_temp)//2):
        sent = sents_temp[2*i] + sents_temp[2*i+1]
        sents.append(sent)
    return sents
            
          
            x:'這個(gè)配置和價(jià)位真的很合適,完全夠用,而且小黑的質(zhì)量非常不錯(cuò)。'

          
            sents:['這個(gè)配置和價(jià)位真的很合適,', '完全夠用,', '而且小黑的質(zhì)量非常不錯(cuò)。']
          

更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號(hào)聯(lián)系: 360901061

您的支持是博主寫(xiě)作最大的動(dòng)力,如果您喜歡我的文章,感覺(jué)我的文章對(duì)您有幫助,請(qǐng)用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點(diǎn)擊下面給點(diǎn)支持吧,站長(zhǎng)非常感激您!手機(jī)微信長(zhǎng)按不能支付解決辦法:請(qǐng)將微信支付二維碼保存到相冊(cè),切換到微信,然后點(diǎn)擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對(duì)您有幫助就好】

您的支持是博主寫(xiě)作最大的動(dòng)力,如果您喜歡我的文章,感覺(jué)我的文章對(duì)您有幫助,請(qǐng)用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長(zhǎng)會(huì)非常 感謝您的哦!!!

發(fā)表我的評(píng)論
最新評(píng)論 總共0條評(píng)論
主站蜘蛛池模板: 一本色道久久88综合亚洲精品高清 | 不卡一区 | 日日夜夜精品免费视频 | 国产精品久久人妻无码蜜 | 亚洲高清视频一区二区 | 欧美爱爱一区二区 | 久久精品天天中文字幕人 | 青娱乐综合网 | 中文字幕免费在线观看视频 | 久久国产乱子伦精品免 | 色综合亚洲精品激情狠狠 | 黄色视屏免费观看 | 亚洲免费观看视频 | 久久久久综合 | 欧美综合社区 | 欧美一性一乱一交 | 成人全黄三级视频在线观看 | 国产一区不卡 | 色哟哟哟在线精品观看视频 | 男女啪啪高清无遮挡 | 91视频免费观看高清观看完整 | 日韩久久精品 | 免费jizz在线播放视频 | 欧美一区二区三区国产精品 | 国产精品久久久久久久久久久久冷 | 亚洲av毛片久久久久 | 一级做a爰片性色毛片中国 日本黄色免费片 | 亚洲高清国产品国语在线观看 | 欧美乱视频 | 精品成人一区 | 麻豆av网站 | 国产一区二区在线免费观看 | 国产成人黄网在线免 | 香蕉视频日本 | 国产97人妻人人做人碰人人爽 | 麻豆一区二区99久久久久 | 欧美一线免费http | 久热免费| 天天看天天爽天天摸天天添 | 国产精品国产成人国产三级 | 中文字幕无线码一区二区三区 |