🗒️基于布隆过滤器快速匹配敏感词、关键词、品牌词

type
status
slug
date
tags
summary
category
password
icon

使用

  1. 如果要和类目关联，在品牌词加表示-类目，查询的时候补上类目即可
  1. 原词要进行穷举比如 1 2 3，形成 1，2,3,12,23,123 进行匹配
  1. 大小写的话直接插入和查询的适合自己提前先转换一下即可
  1. 800w 数据占用 20mb 内存，200 条数据 3ms 出结果
会有误判的改了，需要根据数据量计算相对应内存大小，选择可以接受的误判率
也可以去采用DFA有限状态机、AC自动机的敏感词过滤

数据量大加载慢

多线程加载

10% 左右优化，效果不佳

加载后数据持久化（持久化存储读取加载）

上一篇
mac安装软件｜无法打开｜不信任
下一篇
项目加密措施
Loading...
文章列表
王小扬博客
云原生
🗒️ kubectl安装配置
Git
🗒️ fatal: could not read Username Device not configured
🗒️ git github 配置代理
🗒️ Linux Github Token 长期使用
🗒️ Git 系列问题
🗒️ Git规范
Elasticsearch
🗒️ _reindex 数据迁移｜迁移索引
Apollo
🗒️ Apollo配置中心搭建
🗒️ Apollo本地缓存文件位置
产品
🗒️ AI产品分析
🗒️ 产品分析
🗒️ Excel AI 助手
Think
🗒️ Saas的困境
🗒️ AI时代下云厂商的困境
🗒️ 2024技术行业的思考
🗒️ The Romance of Coder
🗒️ 为什么要多元化发展
生活技巧
🗒️ 甲沟炎预防
软件开发
🗒️ 软件行业经验
🗒️ 工作量评估
🗒️ CR代码
🗒️ spring Boot、nestjs、flask web服务框架对比
🗒️ 字节5000WQPS 从DNS到Kubernetes集群负载均衡分析
🗒️ 通用软件架构设计参考
🗒️ BizDevOps落地实践
🗒️ 是时候放弃全栈开发了
计算机网络
🗒️ 同源跨域解决方案
🗒️ whistle和Clash共存双层代理
🗒️ clash 防止规则覆盖
🗒️ Clash 或者 AdGuard 广告拦截
CI
🗒️ Jenkins实践
🗒️ jenkins docker 容器配置 proxy
🗒️ jenkins 远程 Remote root is not absolute, getting absolute directory from PWD；
🗒️ docker安装的jenkins如何在宿主机启动jar包
DB
🗒️ 先ORDER后JOIN引发乱序，附解决方法
🗒️ MySQL 批量修改表名
🗒️ Mysql OPTIMIZE TABLE
🗒️ RDS清理历史数据释放空间
🗒️ RDS Mysql历史数据清理
🗒️ The MySQL server is running with the --read-only option so it cannot execute this statement
🗒️ MySQL bit 和 thinyint
🗒️ MySQL索引区分度低 特殊情况执行扫表CPU100%
设计
🗒️ 秒杀系统时间配置、Nginx查看服务器系统时间
🗒️ 微服务技术选型
缓存
🗒️ 二级缓存版本号设计
Docker
🗒️ Docker绑定CPU
🗒️ Jenkins Docker构建存在缓存
🗒️ 容器内获取宿主机名称和容器ID
🗒️ Docker软件安装
Node
🗒️ pm2基础使用
🗒️ node nestjs 异步异常处理
🗒️ 飞书群机器人接入
🗒️ 简易并发锁
🗒️ Promise
🗒️ Node文件计算Hash
🗒️ mac arm nvm install node14 failing
🗒️ Node CPU100% 问题分析解决
🗒️ 代码腐化｜Node如何规避致命错误
🗒️ Node原子计数器
🗒️ Node FormData传输文件
🗒️ npm install node-pre-gyp WARN Hit error response status 404 Not Found
🗒️ NPM系列问题
🗒️ pm2 日志大小设置
操作系统
🗒️ linux系统信息查看
🗒️ cron 规范和不同实现
🗒️ windows美化 mac
🗒️ mac基础软件安装
🗒️ mac host切换
🗒️ linux ssh密钥生成
🗒️ Ubuntu安装Cron
🗒️ Ubuntu安装Redis
🗒️ Ubuntu安装Node
🗒️ Linux系统和负载信息查看
🗒️ Linux使用SSH端口转发
🗒️ conda迁移目录
🗒️ diebian切换镜像源 安装基础软件
🗒️ 程序CPU100% | 内存泄漏通用排查步骤
🗒️ CPU每秒多少次运算
🗒️ windows多个音频同时输出
🗒️ ubuntu禁用挂起
🗒️ mac lrzsz iterm 配置
🗒️ mac安装软件｜无法打开｜不信任
Java
🗒️ 基于布隆过滤器快速匹配敏感词、关键词、品牌词
🗒️ 项目加密措施
🗒️ Java 模板变量替换——字符串替换器{}、${}、${}map
🗒️ spring动态修改service类的属性
🗒️ java反编译；将class变成java；利用idea进行反编译
🗒️ Java微服务生态系统构建指南
🗒️ HashMap初始化容量计算
🗒️ mac arm Java maven等环境安装
🗒️ maven-assembly-plugin打包 scope system 级别文件｜本地 lib
🗒️ maven打包配置SpringBoot
🗒️ Maven引入本地jar包
🗒️ Redisson延迟队列
🗒️ Java字符串比较 == 和 equals 的区别 intern
🗒️ jar包添加到本地
🗒️ spring-boot-maven-plugin打包 scope system 级别文件｜本地 lib
🗒️ Maven常见问题
🗒️ SpringBoot Maven系列错误
🗒️ Jprofile程序闪断
🗒️ Docker tini start Java
🗒️ SpringBoot优雅停机
🗒️ SpringBoot跨域配置
🗒️ 代码规范
🗒️ SpringBoot banner config
🗒️ Java Code Style 配置
🗒️ Java 8 date/time type `java.time.LocalDateTime` not supported by default:
大前端
🗒️ 升级npm-check-updates
🗒️ overrides 覆盖配置
🗒️ 阿里npm镜像源更新不及时
🗒️ nvm
🗒️ 电商平台产品ID｜CDN与预渲染｜前端边缘计算
🗒️ Session Cookie Jwt Token常见web授权
🗒️ nrm｜npm快速切源
🗒️ patch-package|npm补丁修复
🗒️ windows ESLint: Expected linebreaks to be 'LF' but found 'CRLF'.(linebreak-style)
🗒️ npm install reason: certificate has expired
Nestjs
🗒️ nestjs fastify 频繁重启
🗒️ Nestjs Fastify 上传文件
🗒️ Nestjs fastify 接入Swagger
🗒️ typeorm用法
🗒️ Nestjs Pipe用法
🗒️ Nestjs Middleware
🗒️ nestjs/schedule nestjs定时任务
🗒️ proxy 网络代理
🗒️ class-validator nestjs dto参数校验
🗒️ 优雅关闭k8s pod docker pm2 nestjs bull
🗒️ NestJs bull 用法
🗒️ Nestjs Cron @handleCron" because it is defined in a non static provider.
🗒️ nest redis mq
🗒️ nest @Public() 注解免校验 token
其他
🗒️ 关于我
🗒️ 计划write
🗒️ 主流云厂商 华为云 阿里云 腾讯云 运行状态 健康状态 看板
🗒️ Md Tree 代码目录生成
🗒️ 利用NotionNext Vercel搭建自己独立域名站点
🗒️ 技嘉主板启动后死机
🗒️ 提升效率的小工具
🗒️ 微信服务市场视频号小店接入指南
🗒️ 在线合并 excel 单元格
🗒️ NotionNext 全流程
🗒️ Github 开启 2FA
🗒️ 阿里云切换 MFA
🗒️ MFA 2MFA TOTP
🗒️ 图片处理基础知识
🗒️ WPS 未保存文件恢复
🗒️ taobao.delivery.template.add新增偏远地区不包邮运费模板
🗒️ 阿里云用户登录页面异常
🗒️ 微信公众号后台开发接入
🗒️ NotionNext添加notion链接
🗒️ 电商ISV 电商SaaS 是什么
🗒️ Sa-Token PostMan Apifox sign check签名
PHP
🗒️ PHP配置跨域支持
🗒️ php strtr其他语言实现Node
🗒️ 为什么大家还在用php
🗒️ PHP 实现 redis 分布式锁
AI
🗒️ Cursor Rules 配置
🗒️ Cursor 设置