Jack博客

什么要处理敏感词

做为seo正规军,必须要每天都跟关键词打交道的。而且为了守护这人间的正义,我们的站点是允许出现敏感词的。否则就非常容易相关部门把网站给GG了,除非站点域名都是在国外的,并且你做的就是是这个的话就无视我接下的内容吧。

如果做过几年的SEO,不难发现很多的站点就是一个敏感词的问题被干掉的,有的甚至就因为某个页里面出现了一个敏感词而导致整站被干的。这种具体是什么敏感词大家想想应该就知道了。

如何从大批量关键词中过滤敏感词?

什么是敏感词

敏感词一般是指带有敏感政治倾向(或反执政党倾向)、暴力倾向、不健康色彩的词或不文明语,也有一些网站根据自身实际情况,设定一些只适用于本网站的特殊敏感词。一般有以下几种:

色情类

民生类

反动类

政治类

暴恐类

广告

医疗类

特殊网址

那么,以上这些词库如果整理出来的话,估计得有个几十万甚至更多,反正新浪的似乎已经有上百万的敏感词了。如果要对这些词进行处理的话无疑是一个大工程。

一般对于敏感词的处理有两种方式,第一种是直接删除包含敏感词的关键词和内容,第二种是对敏感词进行替换,比如替换为***符号。但是不管哪种方式进行处理,首先都需要实现快速的找到敏感词,比如你有500万的关键词需要进行过滤,那么如果人工去看的话,这无疑是天方夜谭。估计公司都倒闭了这批词还没过滤完呢。这种时候就需要使用技术的力量了,让程序帮我们来干就好了。但是程序也是有效率问题的,那么如何高效的进行搜索发现呢?

如何处理敏感词

这里给大家介绍一个高效快速的算法,Trie树算法,这个算法也叫字典树或前缀树。可以给作为seoer的小伙伴们说的是这个算法在SEO中的很多地方都可以发挥很大的效果哦,而不仅仅是处理敏感词。那么先来说说这个算法吧,这个大家理解为前缀树算法可能更好些哈。大概长这样的(老外的东西就喜欢用英文做演示)


如何从大批量关键词中过滤敏感词?

它的构造过程是这样的

如何从大批量关键词中过滤敏感词?

添加节点的时候是这样的

如何从大批量关键词中过滤敏感词?

查询的时候是这样的,比如我们查询关键词code,那么它的查询路径就是箭头这样的。

如何从大批量关键词中过滤敏感词?

看不懂?没关系,不需要你看懂,用就好啦。

它的优点是:最大限度地减少无谓的字符串比较,查询效率比哈希表高。

相信看到这里,你也是一脸懵逼的,没关系。实现的东西只需要交给程序员就好了,你就告诉他我需要这样的工具。然后让我们来看看它的威力吧,我在第三期python与SEO实战课里面演示了如何用它来帮我们过滤敏感词和批量关键词内链添加的操作,之所以还可以进行内链添加主要就是因为我自己手工改造了一下这个算法的一些功能。

然后最终的测试效果,对70万的词进行过滤只花了3秒钟就完成了。效率还是很OK的,所以如果你正好有这个需求,不妨让你们公司的程序员也给实现一个,这个在网络上也有各种语言的实现了,但是如果要添加一些个性化的功能还是要程序员稍微的进行改造一下的。比如关键词内链添加,还有敏感词替换为***等特殊字符这类功能基本就需要自己实现了。

内容来源:网络

温馨提示:本文是作者 爱站云 的原创文章,转载请注明出处和附带本文链接!

网友点评

本文暂无评论 - 欢迎您

您好,请先 QQ登录 后进行评论,如您已登录账户,请点击 刷新页面 再进行评论!

⎛⎝爱站云⎠⎞

⎛⎝爱站云⎠⎞

AiZhanCloud.Com

爱站云专注ZBLOG建站领域,分享个人所得技术,用心做好个人博客,喜欢的小伙伴就关注我吧!
«    2023年9月    »
123
45678910
11121314151617
18192021222324
252627282930
最新留言
文章归档
标签列表

Powered By Z-BlogPHP Theme By Jack主题

Sitemap | TXT地图 | HTML地图后花园

免责声明:本博客所展示内容均为互联网技术教程分享,如有侵权等违规信息请联系QQ客服进行删除处理,谢谢配合!

切换白天模式 切换夜间模式 白天返回顶部 夜间返回顶部