python輕松過濾處理臟話與特殊敏感詞匯
python的其中一個強(qiáng)大之處就是它可以方便的集成很多的非標(biāo)準(zhǔn)庫，今天在GitHub上溜達(dá)又發(fā)現(xiàn)了一個臟話處理神器，導(dǎo)入better_profanity庫后，只需要幾行代碼就能搞定了，相當(dāng)nice！
使用pip的方式將better_profanity非標(biāo)準(zhǔn)庫安裝好，這個庫好像在清華大學(xué)的鏡像站中沒有，其他鏡像站不知道有沒有，于是下載時沒有使用鏡像站，默認(rèn)到官方去下載即可。
pip install better_profanity # 將處理模塊直接導(dǎo)入到代碼塊中 from better_profanity import profanity
1、默認(rèn)臟話庫/敏感詞庫處理
默認(rèn)情況下就只能處理英文的臟話。
censored_text = profanity.censor("you are bitch")
print(censored_text)
# you are ****可以看到其中bitch字符被認(rèn)為是臟話已經(jīng)處理成****字符了。
當(dāng)然，還可以將處理后的臟話字符換成別的字符代替，比如下面這樣處理。
censored_text = profanity.censor("you are bitch",'-')
print(censored_text)
# you are ----這樣****就被替換成了----。
2、自定義過濾信息處理
bad_words = ['Python', 'Java', 'Scala'] # 自定義過濾詞匯
profanity.load_censor_words(bad_words) # 加載自定義過濾詞匯
censored_text = profanity.censor("Python is very Good !") # 執(zhí)行過濾
print(censored_text)
# **** is very Good !可以發(fā)現(xiàn)，想要過濾的python字符已經(jīng)成功過濾掉了。
3、contains_profanity函數(shù)
contains_profanity函數(shù)用來查看我們的語句中是否包含需要過濾的詞匯，如果包含則會返回True，否則返回False。
bad_words = ['bitch', 'Java', 'Scala'] # 自定義過濾詞匯
profanity.load_censor_words(bad_words) # 加載自定義過濾詞匯
censored_text = profanity.contains_profanity("you are bitch")
print(censored_text)
# True結(jié)果為True，表示包含需要過濾的詞匯信息。
4、load_censor_words_from_file函數(shù)
load_censor_words_from_file函數(shù)用于加載需要過濾詞匯的文件。
profanity.load_censor_words_from_file('/usr/load/bad_words.txt')加載完詞匯文件之后，按照之前的邏輯處理即可。
詞匯文件的定義格式，按照每個詞匯獨(dú)占一行的形式進(jìn)行定義，文件格式使用.txt文本文檔即可。
# bitch
# bitches
# bitchin
# bitching
# blowjob
# blowjobs
# blue waffle
到此這篇關(guān)于python輕松過濾處理臟話與特殊敏感詞匯的文章就介紹到這了,更多相關(guān)python臟話處理內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
這篇文章主要介紹了?Python?calendar模塊，Python?專門為了處理日歷提供了calendar日歷模塊，下面文章基于time模塊和datetime模塊展開，具有一定的參考價值,需要的朋友可以參考一下2021-11-11
今天小編就為大家分享一篇pytorch 加載(.pth)格式的模型實(shí)例，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-08-08
python文件操作相關(guān)知識點(diǎn)總結(jié)整理
這篇文章主要介紹了python文件操作相關(guān)知識點(diǎn),整理匯總了Python文件操作所涉及的常見函數(shù)與方法,并給出了實(shí)例代碼予以總結(jié)歸納,需要的朋友可以參考下2016-02-02
今天小編就為大家分享一篇基于numpy中的expand_dims函數(shù)用法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-12-12
python中cv2.imread()和Image.open()的區(qū)別和聯(lián)系詳解
image.open和cv2.imread都是Python中用于讀取圖像文件的函數(shù),但是它們之間有一些區(qū)別,這篇文章主要給大家介紹了關(guān)于python中cv2.imread()和Image.open()的區(qū)別和聯(lián)系,需要的朋友可以參考下2024-07-07
python網(wǎng)絡(luò)編程之UDP通信實(shí)例（含服務(wù)器端、客戶端、UDP廣播例子）
UDP，用戶數(shù)據(jù)報傳輸協(xié)議，它位于TCP/IP協(xié)議的傳輸層，是一種無連接的協(xié)議，它發(fā)送的報文不能確定是否完整地到達(dá)了另外一端2014-04-04
給大家詳細(xì)講解了python中列表和元組的區(qū)別，需要的朋友參考一下。2017-12-12
這篇文章主要介紹了python 制作簡單的音樂播放器，幫助大家更好的理解和學(xué)習(xí)python，感興趣的朋友可以了解下2020-11-11
解決Python3用PIL的ImageFont輸出中文亂碼的問題
今天小編大家分享一篇解決Python3用PIL的ImageFont輸出中文亂碼的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-08-08
Python中實(shí)現(xiàn)三目運(yùn)算的方法
這篇文章主要介紹了Python中實(shí)現(xiàn)三目運(yùn)算的方法,本文用and/or 運(yùn)算符模擬實(shí)現(xiàn)三目運(yùn)算,需要的朋友可以參考下2015-06-06