scilit/backend
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
57 Commits 2 Branches 0 Tags
8dd1779676d822f24386818eddeb7cde2c52c686
Commit Graph
31 Commits
Author SHA1 Message Date
34047007@qq.com 8dd1779676 fix: 第25轮搜索审计修复 — _parse_range intersect/NULL安全NOT/De Morgan作用域等12项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
R25 修复清单:
- CRITICAL: _parse_range 4个range子路径改为intersect模式（真正的H2位置）
- CRITICAL: _dispatch_term 7个日期字段恢复简单赋值（消除R24 OR回归）
- MEDIUM: 年份计数缓存污染 - _has_any_filter增加conditions检查
- MEDIUM: 13个JSONB/TEXT字段NULL安全NOT（R23-3仅覆盖3个字段）
- MEDIUM: De Morgan _handled_neg_group_date_fields跨组污染修正
- MEDIUM: DP无效日期字符串缺少else降级子句
- LOW: MESH:NOEXP字段标签支持
- LOW: is_first_page空字符串cursor_val处理
- 文档: 追加R25修复记录
 2026-07-28 19:19:10 +08:00
34047007@qq.com f8db720419 fix: 第24轮搜索审计修复 — 日期intersect/NOT深度/re.ASCII统一等15项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
R24 修复清单:
- H2 (CRITICAL): _dispatch_term 7个日期字段改为intersect模式，防止单日期覆盖已设范围
- H1 (MEDIUM): 混合日期范围交换 >= → >
- BUG-1: keyset游标只使用pub_date，忽略article_date
- BUG-2: 纯*通配符返回text("FALSE")
- BUG-3: page_size上限100
- BUG-4: tag_ids上限200
- BUG-5: _escape_ilike先反转义再转义，避免双重转义
- BUG-6/7/8: _has_any_filter query.strip、数字PMID、_phrase_terms_set NameError
- M1: _parse_not_expr添加深度守卫(MAX_PAREN_DEPTH)
- M3: is_pubmed_syntax添加re.ASCII与_TOKEN_RE一致
- 前端: router.replace → push
- 文档: 追加R24修复记录
 2026-07-28 18:42:04 +08:00
34047007@qq.com c1674c602d fix: 第23轮搜索审计修复 — De Morgan组内日期/空查询守卫/NULL JSONB等7项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
- R23-1 (CRITICAL): Tokenizer尾随间隙捕获误缩进，导致全部field标签失效
- R23-2 (LOW): _parse_range字段归一化
- R23-3 (MEDIUM): YYYY-M单月日期不匹配
- R23-4 (MEDIUM): has_not未检查group_negated
- R23-5 (CRITICAL): NOT组内日期范围De Morgan错误，新增_build_date_cond_from_pp()
- R23-6 (HIGH): 空查询返回全部文献，增加text("FALSE")守卫
- R23-7 (MEDIUM): NULL JSONB/TEXT + NOT排除NULL行

1007 tests passed
 2026-07-28 18:02:16 +08:00
34047007@qq.com 2444a4be2c fix: 第22轮搜索审计修复 — De Morgan语义/部分日期/has_not/custom URL等8项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
Bug-R22-1 (MEDIUM): OR模式特殊字段NOT产生错误De Morgan语义 — 17处修正
Bug-R22-2 (MEDIUM): has_not不反映日期范围NOT — 添加_date_range_markers检查
Bug-R22-3 (MEDIUM): YYYY-MM[DP]未引号部分日期无法解析 — 预处理器标准化
Bug-R22-4 (MEDIUM): date_preset=custom URL恢复丢失年份范围 — 读取URL参数
Bug-R22-5 (MEDIUM): 错误状态下分页总数残留 — 搜索开始时重置total
Bug-R22-6 (LOW): 搜索错误状态未在开始时清除 — 搜索开始时重置searchError
Bug-R22-7 (LOW): DATE token不在未消耗标记恢复处理器中 — 添加DATE类型
Bug-R22-8 (LOW): 外部NOT组内is_not被忽略 — 保留t.is_not
 2026-07-28 17:05:27 +08:00
34047007@qq.com c68aa060f0 fix: 第21轮搜索审计修复 — OR模式NOT回退/子组虚条目/日期OR模式等10项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
Bug-R21-1 (CRITICAL): OR模式NOT分离过度 — A OR NOT B语义错误，恢复or_(*conditions)
Bug-R21-2 (CRITICAL): 双重嵌套括号sub_group_refs虚条目 — 仅当_ungrouped非空时写入
Bug-R21-3 (HIGH): negated_date_ranges被覆盖 — =改为|=
Bug-R21-4 (MEDIUM): 日期/PMID/DOI/PMC条件在OR模式始终AND — 合并为or_(*conditions)
Bug-R21-5 (MEDIUM): _parse_atom无条件消费任何词符 — 类型验证守卫
Bug-R21-6 (MEDIUM): 模态框双重goToPage(1) — 按钮只关弹窗，搜索由watcher触发
Bug-R21-7 (MEDIUM): page.value失败后不回退 — 捕获异常恢复前一页
Bug-R21-8 (LOW): 空引号""[TI]产生空Term — text为空时跳过
Bug-R21-9 (LOW): 冗余函数内import re — 使用模块级导入
 2026-07-28 16:52:31 +08:00
34047007@qq.com 53cf1d6b70 fix: 更新 test_lowercase_boolean_detected 断言匹配 R20 re.IGNORECASE 行为
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
P20 R20-3 为 is_pubmed_syntax() 布尔正则添加了 re.IGNORECASE，
小写 and/or/not 现在正确触发 PubMed 语法检测。更新测试断言以匹配新行为，
并在 P1-2 文档中注明 P20 修订。
 2026-07-28 16:33:16 +08:00
34047007@qq.com 5dcf639b0b fix: 第20轮搜索审计修复 — AND子组层级/OR模式NOT/长格式标签等6项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
Bug-R20-1 (HIGH): AND子组在括号内被提升为顶层AND条件 — 新增sub_group_refs层级追踪
Bug-R20-2 (HIGH): OR模式NOT条件未独立AND — 分离UnaryExpression独立AND
Bug-R20-3 (MEDIUM): is_pubmed_syntax()不识别小写布尔运算符 — 添加re.IGNORECASE
Bug-R20-4 (MEDIUM): 长格式字段标签不被识别 — _ALL_FIELD_TAGS新增40+条目
Bug-R20-5 (MEDIUM): 400错误URL持久化导致刷新循环 — syncSearchToUrl移入try块
Bug-R20-6 (LOW): 空括号[]产生空Term — stripped为空时跳过
 2026-07-28 16:30:03 +08:00
34047007@qq.com 2b6ffd6de4 fix: 第19轮搜索审计修复 — NOT组语义/公共搜索/AND聚类等10项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
- Bug-R19-1 (HIGH): NOT (A OR B)与(NOT A OR NOT B)结构一致 → group_negated
- Bug-R19-2 (MEDIUM): 日期swap year:full_date边界过宽 → year branch恢复>
- Bug-R19-3 (MEDIUM): group_negated长度与groups不匹配 → 补append(False)
- Bug-R19-4 (LOW): 括号内AND聚类丢失 → 移除_depth>0守卫
- Bug-R19-5 (MEDIUM): 混合大小写引号短语丢失exact标记 → term.lower()
- Bug-R19-6 (HIGH): 公共搜索完全不可用 → 移除get_current_user依赖
- Bug-R19-7 (MEDIUM): message.warning()副作用在Vue computed中 → 移除
- Bug-R19-8 (MEDIUM): 搜索错误信息不区分状态码 → 401/400/429/500
- Bug-R19-9 (HIGH): R18 text重命名遗留未引用 → _term_text完全化
 2026-07-28 16:11:19 +08:00
34047007@qq.com 1401bb7173 fix: 第18轮搜索审计修复 — journal_iso补全/PA ui检查/text变量重命名等6项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
- Bug-R18-1 (MEDIUM): MH:NOEXP在括号组内被忽略 → _parse_primary传播_noexp
- Bug-R18-2 (MEDIUM): full_date:year同一年份不交换 → swap条件>=修复
- Bug-R18-3 (HIGH): 非DOI"/"路径缺失journal_iso → 补充ILIKE
- Bug-R18-4 (MEDIUM): Chinese路径缺失journal_iso/pmid/doi → 补全ILIKE
- Bug-R18-5 (MEDIUM): PA仅检查name不检查ui → 增加or_(contains(ui))
- Bug-R18-6 (MEDIUM): text变量遮蔽SQLAlchemy text() → 重命名为_term_text
 2026-07-28 15:46:20 +08:00
34047007@qq.com 5fa2fbec7b fix: 第17轮搜索审计修复 — 缓存键中毒/_pubmed_conditions异常保护/引号短语exact强制
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
- P0-1 (HIGH): sub-path A query原地修改后缓存键未更新 → 重新计算
- P0-2 (MEDIUM): _pubmed_conditions无异常保护 → try/except降级flat text
- P0-3 (MEDIUM): 引号短语不强制exact_phrase → _phrase_terms_set跟踪
 2026-07-28 15:12:13 +08:00
34047007@qq.com de1f4a4bb8 fix: 第16轮搜索审计修复 — all_not/group_negated分离 + _parse_primary重复组 + 错误显示
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
- Bug 2 (MEDIUM): all_not 混淆外部NOT与内部NOT，新增 group_negated
  字段区分，_pubmed_conditions 改用 pp.group_negated[idx] 替代 all_not
- Bug 1 (MEDIUM): _parse_primary 括号组内重复group赋值，只处理
  group_id < 0 的未分配terms，_parse_or_expr 增加 depth>0 守卫
- Bug 3 (MEDIUM): SearchView.vue 搜索错误显示为"no results"，
  新增 searchError ref + NResult 错误面板
- Bug 4 (LOW): literature.py UUID类型转换优化
 2026-07-28 14:08:46 +08:00
34047007@qq.com 1f46f05586 fix: 第15轮搜索审计修复 — __RANGE_*标记在括号组内被错误处理
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
__RANGE_*标记（如__RANGE_EDAT__）是日期范围解析的副作用标记，
在顶层被正确过滤。但在括号组内（如(2024:2025[EDAT] AND cancer)）
被_parse_primary放入result.groups，_pubmed_conditions遍历组内词
调用_single_term_condition时无对应handler，回退到纯文本搜索
_field_condition("all", "2024:2025")，返回零结果（静默数据丢失）。

修复：组遍历循环中跳过_is_range_end标记。
 2026-07-28 13:50:43 +08:00
34047007@qq.com 7dfde12e46 docs: 第14轮搜索审计修复记录（4项修复）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-28 13:21:38 +08:00
34047007@qq.com daf169d265 fix: 第14轮搜索审计修复 — 非DP日期字段单年值失效/跨字段year_from覆盖等4项修复 
HIGH (2): 非DP日期字段（EDAT/CRDT/MHDA/LR/DCOM/DEP）单年值未设置
          专用 *_from/*_to，EDAT/CRDT等列过滤静默失效；
          跨日期字段 year_from/year_to 互相覆盖，DP条件被丢弃
MINOR (2): MHDA/LR/DCOM/DEP 缺少 _PARTIAL_DATE_RE 分支；
           _single_term_condition 未处理括号组内日期字段
 2026-07-28 13:21:24 +08:00
34047007@qq.com c5f2f27d7f docs: 第13轮搜索审计修复记录（21项P0-P2修复）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-28 12:59:44 +08:00
34047007@qq.com 1d345359fd fix: 第13轮搜索审计修复 — _SPECIAL_FIELDS set.get()崩溃/boolean=or AND语义等21项修复 
P0 (1): _SPECIAL_FIELDS 为 set 误调 .get() → (a OR b)[TI] 全面崩溃的回归修复
P1 (3): exclude_preprints 丢弃 NULL 记录；boolean=or 数字/文本词被 AND；
        journal 排序 keyset 忽略 journal_iso 排序列
P2 (2): 日期字段接收非日期文本导致 SQL 错误；日期范围回退保留字段标签
MINOR (4): 二月非闰年扩展为29日；日期校验缺日历正确性；
           尾部 AND 产生空 Term；精确短语 all 搜索缺 journal ILIKE
 2026-07-28 12:59:38 +08:00
34047007@qq.com 80915f28a9 docs: 第12轮搜索审计修复记录（21项P0-P2修复）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-28 12:38:23 +08:00
34047007@qq.com 6f861c8543 fix: 第12轮搜索审计修复 — _normalize_field_label 崩溃/keyset NULLSLAT/共享列表变异等21项修复 
P0 (3): _normalize_field_label 函数缺失导致 (a OR b)[TI] 崩溃；
      共享列表变异污染 result.groups；POST /search/advanced 缺少用户认证
P1 (8): has_not 忽略括号内 NOT；紧凑日期 YYYYMMDD 未归一化；
      日期字段非日期文本 SQL 错误；keyset NULLSLAT ~50% 空值行跳过；
      first_author 非 dict JSON 崩溃；MeSH 无匹配静默丢弃；
      相关性排序含否定词；词数检查在 PubMed 清洗之前；
      普通搜索缺错误处理；#N 引号感知不完整
P2 (6): 月越界退化；MH/MAJR FALSE 语义；field 白名单缺字段；
      retracted/negative_result/tag_ids 验证器；resolveQuery 重复调用；
      SearchRequestBody.page 可选；restoreFromQuery showCustomYear
 2026-07-28 12:38:17 +08:00
34047007@qq.com 89e154caa2 docs: 第11轮搜索审计修复记录（16项P0-P2修复）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-28 12:09:55 +08:00
34047007@qq.com 4e964c955b docs: 新增第10轮搜索审计修复记录（缓存键碰撞/OR语义/affiliation/前端OR和精确短语）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-28 11:41:38 +08:00
34047007@qq.com b26f5572e9 fix: 第9轮搜索深度审计 — MeSH headings 完全从 search_tsv 缺失等5项修复
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
CRITICAL:
- MeSH headings search_tsv key 错误：trigger 用 value->>'name' 但数据存于
  'descriptor' 键，导致 MeSH 术语对 tsvector 贡献完全丢失
- 新建 af4a8b2ec873 迁移：修复 key 名 + 全库回填

HIGH:
- 测试套件 test_service_search_engine.py 无断言价值（module-level mock
  杀死缓存测试，所有 search() 只 assert total == 0）
- Affiliation 从 tsvector 剥离（f1a2b3c4d5e6 引入 author_names_text 时丢失）

MEDIUM:
- backfill_search_tsv.py 严重过期（缺 mesh/chemicals/genes/keywords）

LOW:
- features.py query 无 max_length 字符限制（仅 100 词限制）

docs: 13-搜索修复全记录.md 新增第9轮
 2026-07-28 11:26:35 +08:00
34047007@qq.com 73f9468384 fix: 第8轮搜索深度审计修复 — 缓存失效、Redis重试、中文标签、翻页稳定性等12项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
CRITICAL:
- invalidate_search_cache 清理 atm:* 缓存（MeSH ATM扩展不再用过期结果）
- Pro 方案 api_quota_per_day 1000→10000（修复低于 Free 的数据错误）
- CacheService/RateLimitMiddleware Redis 连接失败60秒自动重试（原永久降级）
- 普通搜索中文输入自动匹配 GlobalTag.name_zh（如"肺癌"通过MeSH标签关联文献）
- AdvancedPubSearchView resolveQuery 添加 seen Set 检测交替 #N 循环引用

HIGH:
- 限速器 _burst_windows 每500请求清理过期条目（防止内存泄漏）
- cron daily_ftp_update 末尾调用 invalidate_search_cache()（自动管道不再用过期缓存）

MEDIUM:
- _apply_order_by ASC 排序加 id tiebreaker（title/journal/first_author翻页跳行/重复）
- _keyset_condition 所有 is_(None) 加 id tiebreaker + __NULL__ 哨兵值
- _field_condition("all") 默认tsvector路径加 journal/journal_iso ILIKE 兜底
- SearchView restoreFromQuery date_preset/year_from/year_to 优先顺序修复

docs: 更新 12/13 搜索文档，移除 CLAUDE.md 陈旧 SQLite 提及
 2026-07-28 11:02:29 +08:00
34047007@qq.com 91748bf668 docs: D6 [SH]/[MAJR] 标注为已知限制L6（依赖MeSH抽取质量），移除已修复的L1（混合布尔）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-27 15:19:39 +08:00
34047007@qq.com fe7461e81a docs: 补充 D5 #N 历史引用设计决策说明
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-27 15:18:36 +08:00
34047007@qq.com 5a3e5c03cd docs: 记录 P7-23 混合布尔引擎分支修复
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-27 15:15:36 +08:00
34047007@qq.com 2d76e8afe2 docs: 记录 D2/D3 修复（P7-21/P7-22）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-27 14:23:34 +08:00
34047007@qq.com 62be0efb59 fix: 第七轮深度搜索审计修复 — 20项
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
- HIGH: isdecimal() → re.match() for PMID (non-ASCII digit crash)
- HIGH: boolean_operator 应用到字段分组和无标签词（AND/OR 错误）
- HIGH: Cursor 分页 pub_date 优先（article_date 导致数据错位）
- Parser: parse 异常处理器清理字段标签/布尔符/引号
- Parser: _parse_range date:year 反向交换（第4分支）
- Parser: MAX_TERMS 保护、TITLE/ABSTRACT 大写键补充
- Engine: best_match 排序剥离字段标签
- Engine: year_from/year_to is not None（年份=0 被 falsy 跳过）
- Engine: _single_term_condition SB 字段全量分发
- Engine: journal_tiers/nlm_subsets 空条件预警（0结果保障）
- Engine: ATM 展开和 _expand_mesh_tag_ids pass → logger.exception
- Engine: 降级 regex [\w/: -] 兼容 [MH:noexp] 冒号
- Frontend: syncSearchToUrl 移到 finally 块
- Frontend: 年份滑块/resetAllFilters 清除 URL 日期
- Frontend: Null cursor 日期安全守卫
- Docs: 新增 P7-1~P7-20 记录，测试数更新至 276
 2026-07-27 13:01:52 +08:00
34047007@qq.com 4495ef9e0a fix: 第六轮全面搜索审计修复 — 12项 
Parser: Title/Abstract大小写匹配、末尾OR空Term保护、tokeniser gap字符恢复、
混合日期范围反转支持
Engine: field标签正则含/、ATM括号剥离、name_zh LIMIT 100、
year_from/ year_to is not null检查
Docs: 更新修复全记录至第六轮
 2026-07-27 12:47:09 +08:00
34047007@qq.com 7032accd31 docs: 更新第五轮修复记录提交哈希
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details
2026-07-27 11:55:21 +08:00
34047007@qq.com 275a9f6511 fix: 第五轮PubMed搜索审计 — 4项边缘案例修复 + 第5轮审计文档 
Parser边缘案例修复:
- P5-1: 尾部NOT导致IndexError降级（_parse_not_expr添加EOF守卫）
- P5-2: 单数字日期格式不被识别（YYYY-M-D→YYYY-MM-DD归一化）
- P5-3: is_pubmed_syntax不处理全角字符（增加NFKC归一化）
- P5-4: extract_pubmed_query_for_prisma不能处理[Title/Article]

同时将在前几轮修复的F1-F8（[MH:noexp]顶层支持、NOT De Morgan、
NOT NOT递归、Custom Range日期、HomeView恢复、precision_mode清理、
is_oa注释、N+1批量优化）补充文档核对验证。
 2026-07-27 11:55:03 +08:00
34047007@qq.com 2979de6f9c docs: 新增搜索修复全记录文档（13-搜索修复全记录.md）
CI / backend (push) Canceled after 0s
Details
CI / frontend (push) Canceled after 0s
Details 
涵盖 4 轮 59 项修复的详细背景、根因分析、修改内容和变更文件，
按轮次分别记录 Phase 0-7、第二轮（8项）、第三轮（14项）、第四轮（11项）。
 2026-07-27 11:22:22 +08:00