最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Java實(shí)戰(zhàn)之敏感詞過濾器

 更新時(shí)間:2021年04月28日 14:46:09   作者:魚子醬沖鴨  
這篇文章主要介紹了Java實(shí)戰(zhàn)之敏感詞過濾器,文中有非常詳細(xì)的代碼示例,對(duì)正在學(xué)習(xí)java的小伙伴們有非常好的幫助,需要的朋友可以參考下

一、導(dǎo)包

本文的敏感詞過濾器用在SpringBoot項(xiàng)目中,因此,首先需要在pom.xml文件中導(dǎo)入如下依賴

<dependency>
		<groupId>org.springframework.boot</groupId>
		<artifactId>spring-boot-starter-aop</artifactId>
</dependency>

<dependency>
		<groupId>org.springframework.boot</groupId>
		<artifactId>spring-boot-starter-thymeleaf</artifactId>
</dependency>

<dependency>
		<groupId>org.springframework.boot</groupId>
		<artifactId>spring-boot-starter-web</artifactId>
</dependency>

<dependency>
		<groupId>org.springframework.boot</groupId>
		<artifactId>spring-boot-devtools</artifactId>
		<scope>runtime</scope>
</dependency>

<dependency>
		<groupId>org.springframework.boot</groupId>
		<artifactId>spring-boot-starter-test</artifactId>
		<scope>test</scope>
</dependency>

<dependency>
		<groupId>org.apache.commons</groupId>
		<artifactId>commons-lang3</artifactId>
		<version>3.9</version>
</dependency>

二、敏感詞文件

在resources目錄下,創(chuàng)建sensitive-word.txt,里面填入需要過濾的敏感詞信息。

在這里插入圖片描述
在這里插入圖片描述

三、前綴樹的實(shí)現(xiàn)

前綴樹TrieNode以一個(gè)空節(jié)點(diǎn)為頭結(jié)點(diǎn),每個(gè)節(jié)點(diǎn)下包含若干子節(jié)點(diǎn),不同節(jié)點(diǎn)代表不同字符。TrieNode 由兩部分組成,首先是一個(gè)boolean變量,表示該結(jié)點(diǎn)是否為一個(gè)關(guān)鍵詞的終結(jié)點(diǎn)。其次是該結(jié)點(diǎn)的子節(jié)點(diǎn)集合,在本文中,用HashMap存儲(chǔ)子節(jié)點(diǎn),key存儲(chǔ)結(jié)點(diǎn)代表的字符,類型為Character,value為TrieNode,表示子節(jié)點(diǎn)。實(shí)現(xiàn)的代碼如下。

 //前綴樹
    private class TrieNode{
        //關(guān)鍵詞結(jié)束標(biāo)識(shí)
        private boolean isKeywordEnd = false;

        //子節(jié)點(diǎn)
        private Map<Character,TrieNode> subNodes = new HashMap<>();
		
		//isKeywordEnd的get、set方法
        public boolean isKeywordEnd() {
            return isKeywordEnd;
        }

        public void setKeywordEnd(boolean keywordEnd) {
            isKeywordEnd = keywordEnd;
        }

        //添加子節(jié)點(diǎn)
        public void addSubNode(Character c,TrieNode node){
            subNodes.put(c,node);
        }

        //獲取子節(jié)點(diǎn)
        public TrieNode getSubNode(Character c){
            return subNodes.get(c);
        }
    }

四、敏感詞過濾器的實(shí)現(xiàn)

@Component
public class SensitiveFilter {
    // 替換符
    private static final String REPLACEMENT = "***";

    //根節(jié)點(diǎn)
    private TrieNode rootNode = new TrieNode();

    //bean的初始化方法,服務(wù)一啟動(dòng),容器自動(dòng)給bean執(zhí)行此方法完成初始化
    //此方法的目的是讀取敏感詞文件,構(gòu)建敏感詞前綴樹
    @PostConstruct
    public void init(){
        try(
                InputStream is = this.getClass().getClassLoader().getResourceAsStream("sensitive-words.txt");
                BufferedReader reader = new BufferedReader(new InputStreamReader(is));
                ){
            String keyword;
            while((keyword=reader.readLine())!=null){
                this.addKeyword(keyword);
            }
        }catch (IOException e){
            logger.error("加載敏感詞文件失敗: " + e.getMessage());
        }
    }
    
    //將一個(gè)敏感詞添加到前綴樹
    private void addKeyword(String keyword){
        TrieNode tempNode = rootNode;
        for (int i = 0; i <keyword.length() ; i++) {
            char c = keyword.charAt(i);
            TrieNode subNode = tempNode.getSubNode(c);
            if(subNode==null){
                //初始化子節(jié)點(diǎn)
                subNode = new TrieNode();
                tempNode.addSubNode(c,subNode);
            }
            //指向子節(jié)點(diǎn),進(jìn)入下一輪循環(huán)
            tempNode = subNode;

            //設(shè)置結(jié)束標(biāo)志
            if(i==keyword.length()-1){
                tempNode.setKeywordEnd(true);
            }
        }
    }


    /**
     * 過濾敏感詞
     *
     * @param text 待過濾的文本
     * @return 過濾后的文本
     */
    public String filter(String text){
        if(StringUtils.isBlank(text)){
            return null;
        }
        //指針1
        TrieNode tempNode = rootNode;
        //指針2
        int begin = 0;
        //指針3
        int position = 0;
        //結(jié)果
        StringBuilder sb = new StringBuilder();
        while(position<text.length()){
            char c = text.charAt(position);
            /*
            	跳過符號(hào)
            	情況一:符號(hào)在敏感詞前面,將符號(hào)寫入結(jié)果,如 ☆敏感詞
            	情況二:符號(hào)在敏感詞中間,則將符號(hào)與敏感詞一起替換,如敏☆感☆詞
            */
            if(isSymbol(c)){
                //若指針1處于根節(jié)點(diǎn),對(duì)應(yīng)情況一,將符號(hào)計(jì)入結(jié)果,讓指針2向下走一步
                if(tempNode==rootNode){
                    sb.append(c);
                    begin++;
                }
                //無論符號(hào)在開頭還是敏感詞中間,指針3都向下走一步
                position++;
                continue;
            }
            //檢查下級(jí)節(jié)點(diǎn)
            tempNode = tempNode.getSubNode(c);
            if(tempNode==null){
                //以begin開頭的的字符串不是敏感詞
                sb.append(text.charAt(begin));
                //指針2和指針3共同指向指針2的下一個(gè)位置
                position = ++begin;
                //指針1重新指向根節(jié)點(diǎn)
                tempNode = rootNode;
            }else if(tempNode.isKeywordEnd()){
                //發(fā)現(xiàn)敏感詞,將begin~position字符串替換
                sb.append(REPLACEMENT);
                //進(jìn)入下一個(gè)位置
                begin = ++position;
                //指針1重新指向根節(jié)點(diǎn)
                tempNode = rootNode;
            }else {
                //檢查下一個(gè)字符
                position++;
            }
        }
        //將最后一批字符計(jì)入結(jié)果
        sb.append(text.substring(begin));
        return sb.toString();
    }
    //判斷是否為符號(hào)
    private boolean isSymbol(Character c){
        // 0x2E80~0x9FFF 是東亞文字范圍
        return !CharUtils.isAsciiAlphanumeric(c) && (c < 0x2E80 || c > 0x9FFF);
    }
}

到此這篇關(guān)于Java實(shí)戰(zhàn)之敏感詞過濾器的文章就介紹到這了,更多相關(guān)Java敏感詞過濾器內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • SpringBoot集成P6Spy實(shí)現(xiàn)SQL日志的記錄詳解

    SpringBoot集成P6Spy實(shí)現(xiàn)SQL日志的記錄詳解

    P6Spy是一個(gè)框架,它可以無縫地?cái)r截和記錄數(shù)據(jù)庫活動(dòng),而無需更改現(xiàn)有應(yīng)用程序的代碼。一般我們使用的比較多的是使用p6spy打印我們最后執(zhí)行的sql語句
    2022-11-11
  • IDEA使用MyBatisCodeHelperPro來generator代碼的詳細(xì)教程

    IDEA使用MyBatisCodeHelperPro來generator代碼的詳細(xì)教程

    這篇文章主要介紹了IDEA使用MyBatisCodeHelperPro來generator代碼的詳細(xì)教程,本文通過圖文并茂的形式給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2020-09-09
  • java使用ant.jar解壓縮文件的示例代碼

    java使用ant.jar解壓縮文件的示例代碼

    這篇文章主要介紹了java使用ant.jar解壓縮文件,本文通過實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2023-09-09
  • 詳解spring注解配置啟動(dòng)過程

    詳解spring注解配置啟動(dòng)過程

    這篇文章主要為大家詳細(xì)介紹了詳解spring注解配置啟動(dòng)過程,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下
    2016-10-10
  • Kotlin-Coroutines中的async與await異步協(xié)程管理

    Kotlin-Coroutines中的async與await異步協(xié)程管理

    這篇文章主要為大家介紹了Kotlin-Coroutines中的async與await異步協(xié)程管理,提升程序性能解析,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪
    2023-10-10
  • @Configuration與@Component作為配置類的區(qū)別詳解

    @Configuration與@Component作為配置類的區(qū)別詳解

    這篇文章主要介紹了@Configuration與@Component作為配置類的區(qū)別詳解,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-06-06
  • Java字符串拼接效率測(cè)試過程解析

    Java字符串拼接效率測(cè)試過程解析

    這篇文章主要介紹了Java字符串拼接效率測(cè)試過程解析,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
    2020-05-05
  • Java如何執(zhí)行cmd命令

    Java如何執(zhí)行cmd命令

    這篇文章主要介紹了Java如何執(zhí)行cmd命令問題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2023-01-01
  • java thread start()和run()方法簡析

    java thread start()和run()方法簡析

    本文以java中thread的start()和run()的區(qū)別做詳細(xì)介紹, 需要了解跟多的朋友可以參考下
    2012-11-11
  • java的split方法使用示例

    java的split方法使用示例

    這篇文章主要介紹了java的split方法使用示例,需要的朋友可以參考下
    2014-04-04

最新評(píng)論

专栏| 敦煌市| 温宿县| 甘泉县| 吉隆县| 海丰县| 苏尼特左旗| 建水县| 吉安县| 隆化县| 垦利县| 简阳市| 周至县| 南和县| 承德县| 叶城县| 白水县| 花莲县| 大连市| 灵石县| 永济市| 永登县| 若尔盖县| 武功县| 犍为县| 大竹县| 上杭县| 吉林省| 耿马| 新野县| 东乌珠穆沁旗| 乌恰县| 大安市| 屏山县| 德昌县| 宜春市| 攀枝花市| 娄烦县| 多伦县| 饶阳县| 香港 |