WEEK 12细胞功能与方法

Assay Validation 与跨实验室可比性

从 intended use 反推 precision、range、robustness、control chart 和 bridging。

验证不是给 assay 盖永久印章,而是证明它在指定用途、范围和条件下可用。

Intended use到Performance到Acceptance到Reference到Transfer到Decision的概念证据链
本周概念图:从输入、实验到可解释结论。箭头表示审查顺序,不代表单向因果。
Data clinic

两地结果不同但排名一致

CASE 12

先回答:Lab 1:A/B=40/80 pM;Lab 2:120/210 pM。绝对值差 3 倍,候选排序是否仍有意义?

EC50 跨实验室教学数据图
教学合成数据可视化。读图时先确认单位、坐标、对照和统计层级。
实验室A EC50B EC50B/A fold
Lab 140 pM80 pM2.00×
Lab 2120 pM210 pM1.75×
  1. Lab 1 fold = 80/40 = 2.00
  2. Lab 2 fold = 210/120 = 1.75
  3. 跨实验室 fold 差 = 2.00/1.75 = 1.14×
计算结果绝对 EC50 存在系统偏移,但相对排名和 fold 较一致。
项目解读若 intended use 是候选排序,这可能可接受;仍需更多 run、Emax、precision 和预设 bridging criteria。
证据边界只有一个 reference 或两个样本不足以证明全范围等价。

第 12 周学习包:Assay Validation 与跨实验室可比性

本周核心问题

候选 A 比 B 强 2 倍,这个差异是否大于 assay 自身的日间、donor、试剂和实验室变异,足以改变项目决策?

一、学习目标

完成本周后,应能够:

  1. 区分 exploratory、qualified、validated assay 的证据强度;
  2. 依据 intended use 设定 fit-for-purpose 性能要求;
  3. 解释 accuracy/trueness、precision、specificity、range、robustness 和 stability;
  4. 预设 system suitability、plate acceptance 和 sample acceptance;
  5. 用 reference molecule 和 control chart 监测 assay drift;
  6. 判断 2-fold 差异是否超过方法变异;
  7. 设计 assay transfer、bridging、试剂/细胞批次更换方案;
  8. 完成一页可执行 assay card。

二、学习时间安排

标准版:4 小时

学习块 时间 任务 产出
诊断 15 min 10 题 盲点清单
Fit-for-purpose 45 min intended use 与验证层级 风险表
性能参数 75 min precision/range/robustness 等 参数矩阵
可比与转移 60 min control chart/bridging 转移计划
案例 30 min 判断 2-fold 差异 决策结论
验收 15 min 闭卷测验 得分

深入版:6 小时

  • 阅读 NIH HTS Assay Validation 章节 60 分钟;
  • 用历史 reference control 数据画控制图 45 分钟;
  • 对一个 assay 计算 intra-/inter-assay CV 与 log-scale fold variability 30 分钟;
  • 与实验团队完成一次 assay card 审评 45 分钟。

三、课前诊断

  1. 探索性 assay 是否必须达到临床生物分析验证要求?
  2. technical replicate CV 低是否证明跨日精密度高?
  3. reference control 每次都通过,是否代表样本值一定正确?
  4. acceptance criteria 应在看数据前还是后设定?
  5. EC50 的算术 CV 适合所有情况吗?
  6. 细胞换批后 reference EC50 相同是否足以证明 assay 等价?
  7. method transfer 是把 SOP 发给 CRO 就结束吗?
  8. 两个实验室的绝对 EC50 不同,候选排名一致,有何意义?
  9. orthogonal assay 和 replicate 的区别?
  10. “2 倍更强”至少需要哪些不确定性信息?

四、从 intended use 开始

4.1 三种常见使用场景

场景 决策风险 典型要求
Exploratory mechanism 低到中 能回答方向性问题,关键对照正常,局限透明
Candidate ranking 中到高 跨日/跨 donor 可重复、reference 稳定、候选同批比较
Release/comparability/regulatory support 预定义且更系统的验证、受控试剂/SOP/变更管理

“Validated” 不是对 assay 的永久称号;它相对于 analyte、matrix、range、平台和 intended use 成立。

4.2 Fit-for-purpose 的三个问题

  1. 结果将触发什么决策?
  2. 错选/漏选的代价是什么?
  3. 方法不确定性多大才不会改变该决策?

高风险候选淘汰通常需要更强的重复、正交证据和样品质量确认。

五、关键性能参数

参数 问题 常见评估方式
Specificity/selectivity 信号是否来自目标机制? negative/KO、blocking、matrix/interferent
Accuracy/trueness 结果离已知/参考值多远? spike recovery、reference standard;某些 cell assay 无真值
Precision 重复结果有多分散? within-run、between-run、analyst/day/instrument
Range 哪个区间内结果可信? 完整曲线、LLOQ/ULOQ 或 reportable range
Linearity/dilutional parallelism 稀释是否按预期响应? dilution series、parallelism
Robustness 小的合理条件变化会否改变结论? 时间、细胞密度、reagent lot、temperature 等
Stability 样本/试剂随时间与冻融是否稳定? bench-top、freeze–thaw、storage
Reproducibility 不同实验室/条件能否得到相容结论? transfer/bridging study

5.1 Precision 不是只有 technical CV

Within-plate precision
< Within-run precision
< Between-run precision
< Between-analyst/day/instrument
< Between-lab reproducibility

候选决策应使用与未来真实变异源匹配的精密度,而不是只引用同一板三个孔的 CV。

5.2 4PL/5PL 曲线参数

细胞和结合 assay 常用 4PL/5PL。需要预定义:

  • 权重和参数约束;
  • Top/Bottom 是否固定;
  • 有效点数和浓度覆盖;
  • replicate 合并方式;
  • outlier 规则;
  • EC50/IC50 何时不报告;
  • Emax 和 reference-normalized potency 如何计算。

曲线“能拟合”不等于参数可决策。若上下平台不完整或 Hill slope 异常,EC50 可能不稳。

六、三级接受标准

6.1 System suitability

仪器、细胞和关键试剂是否处于可用状态,例如:

  • instrument QC;
  • 细胞 viability/靶表达;
  • 标准曲线范围;
  • 阳性/阴性信号分离。

6.2 Plate/run acceptance

  • reference EC50/Emax 在历史范围;
  • background/vehicle 可接受;
  • control signal window 足够;
  • replicate precision 合格;
  • 无明显 spatial/edge pattern。

6.3 Sample acceptance

  • 样品浓度和 QC 合格;
  • 曲线覆盖有效范围;
  • 重复一致;
  • 无明显 cytotoxicity/interference;
  • 复测和报告规则满足。

三层都应在数据揭盲或看候选排名前定义。

七、Reference molecule 与 control chart

Reference molecule 用于监测 assay 随时间变化,不应频繁更换。每次运行可跟踪:

  • EC50/IC50(通常在 log scale 更合适);
  • Emax/Top;
  • background;
  • signal window;
  • positive/negative control;
  • cell target expression 和 viability。

控制图用于识别:

  • 单点超限;
  • 连续向一个方向偏移;
  • reagent/cell lot 更换后的 step change;
  • 方差逐渐增大。

历史范围必须来自稳定方法阶段,并说明均值、SD/容限和纳入规则,不能在每次失败后重算范围让它通过。

八、如何判断“2 倍差异”

8.1 先在 log scale 思考

EC50 通常跨数量级并呈右偏。候选 fold difference:

fold difference = EC50_B / EC50_A
log10 fold difference = log10(EC50_B) − log10(EC50_A)

判断需要:

  1. 独立实验数,而非只看技术复孔;
  2. 每次是否成对在同板/同 donor;
  3. inter-assay fold variability 或 log-scale SD;
  4. 置信区间;
  5. Emax、curve quality 和 biological relevance;
  6. 正交 assay 是否同方向。

如果 reference molecule 的日间 EC50 自身经常在 0.5×–2× 范围漂移,单次 2 倍候选差异证据较弱。

8.2 排名一致性也很重要

跨实验室绝对 EC50 可因细胞、试剂和仪器发生系统偏移。如果 A>B>C 排名、fold 关系和 Emax 结论稳定,可能仍支持候选决策;反之绝对数值相近但排名频繁反转,方法区分能力不足。

九、Robustness、Transfer 与 Bridging

9.1 Robustness

优先扰动最可能发生的小变化:

  • cell passage/density;
  • target expression;
  • incubation time;
  • wash timing;
  • reagent lot;
  • operator/instrument;
  • edge position;
  • fresh/frozen donor cells。

目的是找到 critical assay parameters,而不是证明所有变化都无影响。

9.2 Transfer package

至少包含:

  • current SOP 和数据分析模板;
  • critical reagents、来源、lot qualification 和保存;
  • cell bank、passage window、identity/mycoplasma;
  • instrument settings;
  • reference/control 历史范围;
  • training run 和预设成功标准;
  • raw data、curve fit 和审计规则;
  • 偏差、失败和复测规则。

9.3 Bridging study

应在旧/新条件下并行比较代表性 panel:

  • reference;
  • high/mid/low potency samples;
  • negative sample;
  • 若相关,困难 matrix 或边界样本。

比较 absolute values、fold、ranking、Emax、precision 和 failure rate。只比较一个 reference EC50 不足以证明全范围可比。

十、Orthogonal assay

Orthogonal assay 通过不同原理回答同一机制问题。例如:

Reporter pathway activation
+ phospho-flow proximal signal
+ downstream cell phenotype

它与“同一 assay 多做三孔”不同。正交方法可降低共同伪差,但也可能回答机制链的不同节点,因此结果不一致时先确认问题是否真的相同。

十一、Assay card 模板

名称/版本:
Intended use 与决策:
Biological principle:
样品与 matrix:
细胞/关键试剂:
Primary readout:
Controls/reference:
浓度范围和重复:
System/plate/sample acceptance:
性能摘要:precision、range、specificity、robustness
数据分析:模型、归一化、异常值、BLQ
Critical parameters:
已知局限:
变更与 bridging 规则:
负责人/复核人:

十二、综合案例

实验室 1:A EC50=40 pM,B=80 pM;实验室 2:A=120 pM,B=210 pM。两地各做一次,技术复孔 CV 均 <10%。历史 reference 的 inter-day EC50 范围为名义值的 0.55×–1.9×。

参考分析

两地均显示 A 约优于 B,但独立实验不足,2 倍差异接近方法历史变异;低 technical CV 不能证明跨日差异可靠。建议进行预设的成对跨日/多 donor 重复,报告 log fold CI、Emax 与正交功能结果。现阶段可称“方向一致的初步排序”,不宜称“已证明 A potency 提升 2 倍”。

十三、闭卷验收与答案

  1. Fit-for-purpose 从什么开始?——intended use 和错误决策风险。
  2. technical CV 代表什么?——同一运行内孔间精密度,非跨日/跨实验室。
  3. acceptance criteria 何时设?——看结果前。
  4. control chart 监测什么?——漂移、step change 和方差变化。
  5. EC50 为什么常用 log scale?——跨数量级且比值意义更自然。
  6. 2-fold 是否必然有意义?——不,需相对历史变异、CI、重复和生物意义。
  7. transfer package 核心?——SOP、试剂/细胞、设置、分析、历史范围和培训。
  8. bridging 为什么需 panel?——验证全范围和样本类型,而非单点 reference。
  9. orthogonal 与 replicate 区别?——不同原理 vs 同一方法重复。
  10. validated 是永久标签吗?——不是,只对定义的用途、条件和范围成立。

十四、本周最终交付物

选择一个现有细胞 assay,完成一页 assay card,并附一页 bridging plan:代表性样本、并行设计、预设接受标准、统计展示、失败处理和变更管理。

十五、延伸阅读

  1. NIH HTS Assay Validation
  2. NIH Assay Guidance Manual
  3. ADCC reporter bioassay validation example