pg_tokenizer
1 篇-
pg_tokenizer 1.0.0:PGSTY 接手后的首个发布
pg_tokenizer 1.0.0 是 PGSTY 在 pgsty/pg_tokenizer 维护的首个版本,继续采用 Apache-2.0 许可证。它将多语言文本分析器与词表模型接入 PostgreSQL 原生全文检索,让基于语料训练的自定义模型在并发写入下保持正确,并允许非超级用户的数据库拥有者管理自己的分词定义。 现有 tokenize(text, tokenizer_name) 接口仍返回 INT[]。使用历史 vchord_bm25 0.3.x bm25vector 工作流的应用可以 …
pg_tokenizer 1.0.0 是 PGSTY 在 pgsty/pg_tokenizer 维护的首个版本,继续采用 Apache-2.0 许可证。它将多语言文本分析器与词表模型接入 PostgreSQL 原生全文检索,让基于语料训练的自定义模型在并发写入下保持正确,并允许非超级用户的数据库拥有者管理自己的分词定义。 现有 tokenize(text, tokenizer_name) 接口仍返回 INT[]。使用历史 vchord_bm25 0.3.x bm25vector 工作流的应用可以 …