答:Tokenizer 把字符流拆成一个个词项,并给出位置等信息。每个分析器只有一个 tokenizer,前后可搭配过滤器。直接用 _analyze 的 tokenizer 参数,可以单独观察拆词效果。
题干与完整题解免费阅读第 1 / 1 页
本页 1 道,共 1 道浏览其他领域
答:Tokenizer 把字符流拆成一个个词项,并给出位置等信息。每个分析器只有一个 tokenizer,前后可搭配过滤器。直接用 _analyze 的 tokenizer 参数,可以单独观察拆词效果。