敏感词检测库ToolGood.Words中IllegalWordsSearch类使用简介
创始人
2024-02-03 13:03:08
0次

  C#开源敏感词检测库ToolGood.Words中的类IllegalWordsSearch为过滤非法词（敏感词）专用类，可设置跳字长度，支持全角转忽略大小、跳词、重复词、黑名单等功能，本文对照参考文献1，对该类的用法进行简要介绍。
  IllegalWordsSearch类中主要的属性、函数、事件如下表所示：

序号名称类型说明
1UseSkipWordFilter布尔型属性用于设置是否启用跳词，默认为true，跳词是指不参与文本检索的一组字符集合
2SetSkipWords函数设置跳词字符串
3UseDuplicateWordFilter布尔型属性用于设置是否启用重复词过滤，默认为true，需在调用SetKeywords函数前设置
4UseDBCcaseConverter布尔型属性用于设置是否启用半角转化器，默认为true，需在调用SetKeywords函数前设置
5UseIgnoreCase布尔型属性用于设置是否忽略大小写，默认为true，需在调用SetKeywords函数前设置
6SkipWordFilterHandler代理 /事件自定义跳词处理函数，如果处理了该事件则优先使用事件处理函数返回结果判断是否需要跳词，如果没有设置事件处理函数，则使用 SetSkipWords 中设置的跳词字符串判断是否需要跳词
7CharTranslate代理 /事件自定义字符转换处理函数，如果处理了该事件则优先使用自定义字符转换处理函数转换字符，没有的话则使用IllegalWordsSearch类自带的ToSenseWord函数转换字符
8StringMatch代理 /事件自定义字符串匹配处理函数，如果处理了该事件，则获取敏感词检测结果后会调用该处理函数判断是否需要作为检测结果返回
9SetKeywords函数设置搜索关键词
10FindAll函数获取所有满足条件的检测结果，类型为IllegalWordsSearchResult的集合
11FindFirst函数获取满足条件的首个检测结果，类型为IllegalWordsSearchResult
12ContainsAny函数判断是否存在满足检测条件的关键词
13Replace函数将满足检测条件的关键词替换为指定内容
14SetBlacklist函数设置黑名单，这里设置的其实是每个关键词对应的黑名单类型（例如一般、重要、严重）的索引

  根据上述函数及属性定义，设计并开发了IllegalWordsSearch类的使用测试程序，主要代码及程序运行效果如下：

   IllegalWordsSearch ws = new IllegalWordsSearch();            ws.UseIgnoreCase = cbIngoreCase.Checked;ws.UseSkipWordFilter = cbSkip.Checked;ws.UseDuplicateWordFilter = cbCF.Checked;ws.SetKeywords(txtResearchWord.Text.Split(';', '；'));ws.SetSkipWords(txtSkipWords.Text);if(!string.IsNullOrEmpty(txtBlackList.Text)){m_blackList.AddRange(txtBlackList.Text.Split(';', '；'));List blackListType = new List();for(int i=0;iblackListType.Add(i);}ws.SetBlacklist(blackListType.ToArray());}List results = ws.FindAll(txtContent.Text);

在这里插入图片描述

参考文献：
[1]https://github.com/toolgood/ToolGood.Words

上一篇：以下是为即将步入职场的大学毕业生写的一段话

下一篇： 自信

相关内容

热门资讯

描写小庭院优美的句子精选18... 描写小庭院优美的句子 精选66句1. 游人如果到当地农家作客，通常都会受到热情的款待，品尝酥油茶，喝...
让男人看了内疚的句子精选31... 让男人看了内疚的句子 精选53句1. 我不是冷血，更不是慢热。我只是害怕，投入太多，离开的时候会难过...
自己内心矛盾的句子精选181... 自己内心矛盾的句子 精选104句1. 如果，最后在身边的真的不是你。如果你经历了那么多的起起落落，最...
赞美校园保洁的句子精选115... 赞美校园保洁的句子 精选102句1. 你们用汗水与辛劳挥舞着手中笨拙的扫帚，给校园一个整洁的容貌，给...
环境描写死气沉沉句子精选98... 环境描写死气沉沉句子 精选69句1. 教室中死气沉沉，同学们个个都泪流满面，惟有几位同学装作一脸苦笑...
一生能遇到的句子精选420句 一生能遇到的句子 精选63句1. 选择你所爱的，然后爱你所选择的。2. 你的温柔，我懂，你的疼爱，我...
诚信的句子 有关诚信的句子大全　　诚信是一种美德，会让你更加完美。下面是小编整理的有关诚信的句子大全，欢迎阅读！...
时间过得快的搞笑句子精选26... 时间过得快的搞笑句子 精选132句1. 我们不可能都成为英雄。2. 要找出时间来考虑一下，一天中做了...
你好六月的优美句子 你好六月的优美句子（精选100句）　　在学习、工作或生活中，大家都听说过或者使用过一些比较经典的句子...
怀念好句子大全要短的精选38... 怀念好句子大全要短的 精选35句1. 小学同学聚会能聚这么多人真的不容易，好怀念以前小的时候现在大家...
有哲理的唯美句子精选76句 有哲理的唯美句子 精选50句1. 池塘边的榕树上，还有知了在声声叫着；家门口的小路旁，还有小狗在快乐...
自我独特的个性签名 自我独特的个性签名（精选70句）　　不管现实多么惨不忍睹，都要持之以恒地相信，这只是黎明前短暂的黑暗...
人类破坏环境污染句子精选30... 人类破坏环境污染句子 精选64句1. 排放的气息，是乌云盖天的狂欢；森林的骤减，是沙漠扩展的心愿；灾...
繁体字情侣个性签名 　　繁体字情侣个性签名　　1、討厭自己想刺猬一樣小心防備。討厭自己想小丑一樣假冒開心。　　2、如果決...
抖音名字 抖音名字▼※目录※▼抖音名字（1-100个）抖音名字（101-200个）抖音名字（201-300个）...
爱情的经典个性签名 关于爱情的经典个性签名集锦　　1、其实只要两个人幸福就好了，何必在乎别人的眼光和议论。　　2、距离让...
女生爱情个性签名 女生爱情个性签名　　永远都不好停止微笑，即使是在你难过的时候，说不定有人会正因你的笑容而爱上你。以下...
微信名字最好听的昵称(精选5... 微信名字最好听的昵称(精选500个)　　一、什么是网名　　网名指在网上使用的名字。由于网络是一个虚拟...
塘尾村 塘尾村广东省东莞市石排镇塘尾村塘尾村(广东省东莞市石排镇塘尾村)塘尾村位于东莞市石排内，古村以古围墙...
父亲节个性签名 父亲节个性签名　　引导语：我不害怕前途再多挫折挣扎只是愧疚没能在家给你们报答。下面由yjbys小编与...