一个白话问题进来,经过四步,出去时是一条每句都能翻回纸本某页某行的答案。 这一页把四步拆开摆出来,请诸位挑毛病。
灭摈 不共住 波罗夷 摈出p0377c23,它写成了 c21——那是材料清单里另一段的起点。
法师照坐标翻过去,找不到那句话。
⚠️ 这不是模型不听话,是这件事它做不到:材料是按段给的,一段横跨好几行,
它无从知道自己引的那句落在第几行。所以现在连坐标都不给它看——看不见就抄不了。
T40n1805_p0345b14
= 大正藏 40 册・345 页・中栏・第 14 行下面是 2026-09-13 用固定的 14 道题跑出来的,不是估计值。 题库和跑法都在代码库里,可以重跑。
| 量什么 | 结果 | 怎么算的 |
|---|---|---|
| 行级坐标 | 62 处 | 答案里引了原文、且定位到具体某一行的 |
| 段级坐标 | 44 处 | 模型没括引文,只能给到段落起点。页面上标了「段级」,不冒充行级 |
| 行级坐标的准确率 | 96%(60/62) | 拿坐标回到 CBETA 原始文件比对,不是用自己的库自证。 漏的 2 处是合编本疏记交错,原文在版面上不连续 |
| 编造出处 | 0 | 核验撤下 0 处、自动纠正 3 处(模型标错材料号,被代码救回) |
| 红线拦截 | 3/3 | 教理题与「评价某寺持戒」题,必须拒答。这三题是故意放进去的阳性对照—— 全答出来才是失败 |
| 一题多久 | 约 6 秒 | 两次大模型调用 + 一次本地检索 |
· 四成引用只到段级,因为模型没把原文括起来。要往上提。
· 14 题里有 1 题挂零(「受具足戒需要多少位比丘」)——召回到的段落不对题。
· 三派分块还没做:将来一个问题会分三块答——南山律怎么判/四律五论怎么说/
只依四分律能得出什么。第三块经常会答不出来,那时必须如实说「仅依《四分律》,此问无明文」,
绝不拿南山律的内容填进去充数。
网页、算法、数据分成三层,各自独立:
| 层 | 装什么 | 对外 |
|---|---|---|
| 网页层 | 页面与静态资源。不含语料、不含算法,只通过 API 取数据 | 整层可独立运行 |
| 算法层 | 选词、检索、作答、核验 | 不开放 |
| 数据层 | 私有资料抽出来的坐标表与术语表 | 不开公网端口,只有算法层能访问 |
网页层拿到的只有最终答案 + CBETA 原文 + 坐标, 拿不到语料、拿不到算法、也拿不到中间的检索线索。 即使有人用大量查询去拖库,能拖出来的也只是 CBETA 的公开原典。