fix(retriever/doris): code review cleanup
针对 4cce6f2e(接入 Apache Doris)的 code review 修复,主要修正若干阻断性 问题与可读性问题,并剔除不应进入主仓的本地工作流文件。 阻断性修复: - docker-compose: Doris 镜像由 2.1.0 升至 4.1.0。原 2.1.0 不支持 HNSW ANN、cosine_distance_approximate 与 Stream Load partial_columns, 按当前 DDL 一启动就会失败。 - DSN 字面量拼接改用 mysql.Config.FormatDSN()。原 fmt.Sprintf 在用户名/ 密码包含 `@`/`:`/`/` 等字符时会跑偏。覆盖 health check 与 engine factory 两处。 健壮性修复: - 新增 validateEmbedding,写入与查询前拒绝 NaN/±Inf;strconv.FormatFloat 对非有限值会输出 "NaN"/"+Inf" 拼成无效 SQL。 - waitANNReady 改为后台 goroutine + 独立 context,避免新维度首次写入路径 阻塞最长 30s;ANN 未就绪时 Doris 会自动退化为 brute-force。 清理: - annIndexReady 移除最终两个分支都 return true 的冗余写法。 - Save 移除冗余的双重 toDorisVectorEmbedding。 - testDorisConnection 把 "5.7.99 Doris-4.1.0" 解析为裸 "4.1.0",与 Postgres/ES 的版本格式对齐。 剔除(不应合入主仓): - docs/wiki/集成扩展/Doris改动与上游同步.md:纯 fork 维护工作流文档。 - scripts/e2e-doris.sh:作者本地 E2E 验证清单。 测试: - repository_test 用 require.Eventually 适配 ANN 异步轮询。 - 现有 doris 单测全部通过。
This commit is contained in:
+5
-2
@@ -375,6 +375,9 @@ services:
|
||||
# ---------------------------------------------------------------------------
|
||||
# Apache Doris 4.1(FE + BE 单实例 standalone 部署,opt-in via `--profile doris`)
|
||||
#
|
||||
# 版本要求:必须 >= 3.0(HNSW ANN 索引、cosine_distance_approximate、
|
||||
# Stream Load partial_columns)。本 compose 使用 4.1 官方稳定 tag。
|
||||
#
|
||||
# 端口说明:
|
||||
# - 9030 (FE MySQL):WeKnora 主链路读写、SQL 查询都走此端口。
|
||||
# - 8030 (FE HTTP):Stream Load partial update 入口。
|
||||
@@ -386,7 +389,7 @@ services:
|
||||
# 数据持久化在 doris_fe_data / doris_be_data 卷中。
|
||||
# ---------------------------------------------------------------------------
|
||||
doris-fe:
|
||||
image: apache/doris:fe-2.1.0
|
||||
image: apache/doris:fe-4.1.0
|
||||
container_name: WeKnora-doris-fe
|
||||
hostname: doris-fe
|
||||
environment:
|
||||
@@ -405,7 +408,7 @@ services:
|
||||
- doris
|
||||
|
||||
doris-be:
|
||||
image: apache/doris:be-2.1.0
|
||||
image: apache/doris:be-4.1.0
|
||||
container_name: WeKnora-doris-be
|
||||
hostname: doris-be
|
||||
environment:
|
||||
|
||||
Reference in New Issue
Block a user