关键词查找【Aho-Corasick 算法】
创始人
2024-11-21 13:34:41
0

【全程干货】程序员必备算法!AC自动机算法敏感词匹配算法!动画演示讲解,看完轻松掌握,面试官都被你唬住!!_哔哩哔哩_bilibili

著名的多模匹配算法

引入依赖:

    org.ahocorasick    ahocorasick    0.6.3 
public List findKeywordsInText(String text, List keywords) {    Trie trie = Trie.builder()          .addKeywords(keywords)          .build();      long start = System.currentTimeMillis();    Collection emits = trie.parseText(text);    logger.info("trie: " + (System.currentTimeMillis() - start));      List matchedKeywords = new ArrayList<>();    for (Emit emit : emits) {       matchedKeywords.add(emit.getKeyword());    }      return matchedKeywords; }

main demo

public static void main(String[] args) {    String BASE_URL = "https://www.baidu.com/s?wd=";      String text = "abcd";    List wordList = new ArrayList<>();    wordList.add("ab");    wordList.add("bc");    wordList.add("cd");    wordList.add("a");    wordList.add("bcd");    wordList.add("abc");      // 构建 Trie 时忽略大小写  Trie trie = Trie.builder()          .ignoreCase()          .addKeywords(wordList)          .build();      Collection emits = trie.parseText(text);      // 按照关键词长度降序排序  List sortedEmits = new ArrayList<>(emits);    sortedEmits.sort((e1, e2) -> e2.getKeyword().length() - e1.getKeyword().length());      // 移除开始位置在前面词的开始和结束中间的关键词  Set processedKeywords = new HashSet<>();    List filteredEmits = new ArrayList<>();    for (Emit emit : sortedEmits) {       String keyword = emit.getKeyword();       boolean shouldAdd = true;       for (Emit filteredEmit : filteredEmits) {          if (emit.getStart() >= filteredEmit.getStart() && emit.getStart() <= filteredEmit.getEnd()) {             shouldAdd = false;             break;          }       }       if (shouldAdd) {          filteredEmits.add(emit);          processedKeywords.add(keyword);       }    }      // 使用TreeMap来保持emit的start位置顺序  TreeMap firstOccurrences = new TreeMap<>();    for (Emit emit : filteredEmits) {       firstOccurrences.putIfAbsent(emit.getStart(), emit);    }      StringBuilder result = new StringBuilder(text);    int offset = 0;    processedKeywords.clear();    for (Emit emit : firstOccurrences.values()) {       String keyword = emit.getKeyword();       if (!processedKeywords.contains(keyword)) {          int startIndex = emit.getStart() + offset;          int endIndex = emit.getEnd() + 1 + offset;          String link = "" + keyword + "";          result.replace(startIndex, endIndex, link);          offset += link.length() - keyword.length();          processedKeywords.add(keyword);       }    }    System.out.println(result.toString()); }

相关内容

热门资讯

细节辅助“闲来辅助平台”附辅助... 细节辅助“闲来辅助平台”附辅助开挂插件(我来教教大家有挂教学)>>您好:软件加136704302中薇...
科技开挂“吉祥填大坑脚本”附辅... 科技开挂“吉祥填大坑脚本”附辅助开挂安装(透视挂透视有挂解惑);无需打开直接搜索薇:13670430...
细节辅助“全民比鸡辅助透视工具... 细节辅助“全民比鸡辅助透视工具”附辅助开挂软件(透视有挂有挂教程);无需打开直接搜索打开薇:1367...
正版辅助“凑一桌游戏免费辅助器... 凑一桌游戏免费辅助器是一款专注玩家量身打造的游戏记牌类型软件,在凑一桌游戏免费辅助器这款游戏中我们可...
曝光辅助“潮友会鱼虾蟹怎么发现... 曝光辅助“潮友会鱼虾蟹怎么发现软件控制”附开挂辅助下载(透视中牌率有挂方法)您好:潮友会鱼虾蟹怎么发...
细节辅助“哈糖大菠萝助手”附辅... 细节辅助“哈糖大菠萝助手”附辅助开挂脚本(最新技巧有挂规律)《详细加薇136704302咨询》游戏特...
通报辅助“海南琼崖海南辅助功能... 通报辅助“海南琼崖海南辅助功能”附开挂辅助插件(9分钟了解有挂存在);无需打开直接搜索微信(1367...
实测开挂“挂是真的假的”附开挂... 挂是真的假的开挂教程视频分享装挂详细步骤在当今的网络游戏中,挂是真的假的作为一种经典的娱乐方式,吸引...
细节辅助“微信小程序雀神挂件透... 您好:这款微信小程序雀神挂件透视游戏是可以开挂的,确实是有挂的,很多玩家在这款微信小程序雀神挂件透视...
正版辅助“游戏黑科技辅助器”附... 正版辅助“游戏黑科技辅助器”附辅助开挂神器(最新通报有挂辅助),游戏黑科技辅助器是用手机号来登录游戏...