马尔可夫队列分析输出
马尔可夫队列分析(Markov Cohort Analysis)提供多个层次的细节,涵盖疾病进展以及每个周期中各状态和事件的数值累积情况。这些报告对于验证马尔可夫模型能否准确反映疾病过程至关重要。
我们将使用 Healthcare 培训示例模型 Markov Cancer Decision.trex 来考察这些输出,重点关注顶部的策略 Tx 1。
运行马尔可夫队列分析:
选择 Tx 1 马尔可夫节点。
从菜单中选择分析(Analysis)> 马尔可夫队列(Markov Cohort)(或单击分析布局(Analysis Layout)中的工具栏图标)。
马尔可夫队列仪表板(Markov Cohort Dashboard)提供一张反映各状态间疾病进展的图形,同时还可访问与队列分析相关的一系列详细图形和报告。

右侧的报告和图形链接提供马尔可夫队列分析计算的更多细节。
马尔可夫状态/事件队列明细(扩展报告)
单击文本报告(Text Reports)> 状态/事件队列明细(State/Event Cohort Details)链接,打开马尔可夫队列扩展报告(Markov Cohort Extended Report)。该报告能最全面地呈现马尔可夫队列分析过程中执行的内部计算。
该报告以详细文本形式显示队列在每个状态节点和转移节点之间的流动,以及各节点上收益的累积情况。

报告中按行设置了多个分组,分别对应模型的不同层级。每个分组都可以在对应行上使用“+”图标单独展开或折叠。此外,使用状态/转移(State/Transition)列标题中的“+”,可以将所有行展开/折叠到仅显示状态层级的行。
每个周期都有一行汇总,反映该周期内累积的总值。在周期分组内,您可以展开查看健康状态以及各状态转移子树内的单个事件。
报告的前三列显示队列在各状态和转移之间的流动情况。
状态/转移(State/Transition):转移子树中的马尔可夫状态节点或事件节点。
阶段(Stage):从零开始的 _stage(周期)计数器。
队列百分比(Cohort %):该周期内经过该节点的队列百分比。对于状态,指的是该周期开始时处于该状态的队列百分比;对于事件,指的是该周期内经历该事件节点的队列百分比。
报告接下来的各列对应特定的收益集。每个计算出的收益集都会以不同的底纹单独成组呈现。
成本输入(Cost Entry):该节点录入的成本表达式的计算值,无论该节点是状态(状态收益)还是事件(转移收益)。这样您可以在尚未乘以队列百分比的情况下核对成本输入公式的计算结果。在本模型中,收益的计算值只是对参数变量的简单引用,而那些变量定义也一并列出。
成本(Cost):根据上述收益输入计算得到的累积收益值,即收益值乘以经过该节点的队列百分比。通过按队列百分比对成本加权,该数值成为加权平均计算的一部分,从而得到整个马尔可夫过程的总成本期望值(EV)。在汇总(Summary)行中,成本值是该周期内所有节点累积的收益总额。
累计成本(Cum Cost):从 _stage 0 到当前阶段的全部周期的累计收益。
请注意,对于每一个已启用的收益集,都会以相同的三列显示该模型结果的数值累积情况。Markov Cancer Decision.trex 模型既是成本效果模型,因此还有一个用于效果(Effectiveness)的主要收益值,另外还启用了 3 个额外收益值。
我们来看其中一些计算。
在 _stage 0,根据初始概率,整个队列都从 Local Cancer 状态开始。
根据模型中的事件概率,0.150 的队列转移到 Progress 事件,0.020 的队列转移到 Die 事件。随后这些百分比在 _stage 1 开始时进入 Metastases 和 Dead 状态。
在 _stage 0 的 Local Cancer 节点上,整个队列都处于该状态,因此将完整的 10,000 成本输入计入累积成本。
在 _stage 1 的 Local Cancer 节点上,累积成本为该节点队列百分比与成本输入之积——0.83 * 20,000 = 16,600——计入累积成本。每个有数值的健康状态和事件都采用相同的队列百分比加权。
汇总行显示来自所有状态和事件的周期总值。对于 _stage 1,成本由 Local Cancer 和 Metastases 两个状态累积而来——16,600 + 7,500 = 24,100。
如果我们滚动到报告底部,就能看到整个马尔可夫模型的汇总。

汇总(Summary)分组呈现模型中每个状态和事件上累积的所有收益值的总和。在本例中,成本的期望值为 436,368,其中 105,055 来自 Local Cancer 状态,331,312 来自 Metastases 状态,其他状态/事件对成本没有贡献。这一总体成本期望值将在决策分析中用于与其他策略比较。请注意,汇总期望值是对每个已启用的收益值分别计算的。
如果应用了全局贴现(global discounting),马尔可夫扩展报告会额外增加一些列,以查看贴现的影响。下图显示的是应用 3% 年贴现率后的同一份队列报告。

请注意“贴现后的成本输入(Cost Entry Discounted)”这一新增列(由于效果同样贴现,也有相应的列)。该列表示成本输入按已流逝时间贴现后的数值。在 _stage 0 没有影响,但在 _stage 1,20,000 的贴现值为 19,417。随后该贴现值再与队列百分比相乘——19,417 * 0.83 = 16,116——从而在模型中累积贴现值。
马尔可夫状态队列明细(基本报告)
单击文本报告(Text Reports)> 状态队列明细(State Cohort Details)链接,打开马尔可夫队列基本报告(Markov Cohort Basic Report)。该报告与扩展报告类似,但只显示健康状态而不显示事件,因此是一份更短、更精简的报告。
该报告以详细文本形式显示队列在每个状态节点之间的流动,以及各节点上收益的累积情况。

每个状态对应一行,但这些行无法展开查看后续事件。事件节点上累积的任何数值都放入报告各收益值对应的“转移队列(Transition Cohort)”列中。
报告各列如下:
状态(State):模型的健康状态。
阶段(Stage):当前周期。
队列百分比(Cohort %):该周期开始时处于该状态的队列百分比。
状态队列成本(Cost State Cohort):该状态节点上累积的成本,即收益输入表达式的计算值乘以该周期开始时处于该状态的队列百分比。
转移队列成本(Cost Transition Cohort):该状态节点右侧每个事件上累积的成本,即每个转移节点上收益输入表达式的计算值乘以该周期内经过该事件的队列百分比,再对这些乘积求和。
阶段成本(Stage Cost):该阶段内所有节点(状态和事件)累积的收益。
累计成本(Cum Cost):从 _stage 0 到当前阶段的全部周期的累计收益。
如果模型中还有其他收益值/结果,上面的四个成本列将相应重复。
在查看马尔可夫队列分析输出时,通常使用基本报告就已足够,但扩展报告可提供更多细节与透明度。
启用贴现后,所有成本/收益列都会显示贴现值。下图显示应用 3% 年贴现率后的同一份输出。
对采用 3% 年贴现率的 Markov 3 State - Traditional 模型生成的基本马尔可夫报告如下图。

马尔可夫队列报告与周期内校正
周期内校正(Within-Cycle Correction,WCC)在进行马尔可夫队列分析时,对马尔可夫周期内数值随时间的累积采用了略有不同的算法。
在传统(Traditional)模型中,状态收益按周期开始时处于该状态的队列百分比,对整周期计提。
在 WCC 模型中,周期收益按周期开始和结束时处于该状态的队列百分比,对该周期计提。
马尔可夫队列扩展报告和基本报告以略有不同的方式呈现数据,以反映 WCC 的应用。下面的报告由 Healthcare 培训示例模型 Markov Cancer Decision-WCC.trex 生成。

WCC 报告中的状态/转移(State/Transition)、阶段(Stage)和队列百分比(Cohort %)三列与传统报告的作用相同。WCC 报告与传统报告的差异体现在数值列上,即上图中显示的成本列。
周期成本输入(Cost Cycle Entry):该节点录入的周期收益表达式的计算值。这与传统报告相同。
WCC 前的周期队列成本(Cost Cycle Cohort before WCC):基于上述周期收益输入(Rwd Cycle Entry)的 WCC 前周期收益值,即该数值乘以经过该节点的队列百分比。在传统模型/报告中会直接使用该值。
WCC 后的周期队列成本(Cost Cycle Cohort after WCC):反映 WCC 计算算法下的周期累积值。其计算方式为:在当前周期开始时计算的队列周期成本与下一周期开始时计算的队列周期成本的平均值。在汇总(Summary)行中,该列包含该阶段内所有状态累积的周期收益总额。
启动队列成本(Cost Startup Cohort):该状态或整个周期的启动收益(Startup Rwd)值。请注意,启动收益只在第一个周期(_stage = 0)累积。该列已应用了队列百分比。
事件成本输入(Cost Event Entry):该节点录入的事件收益表达式在应用队列百分比之前的计算值。事件输入更常用于转移子树中的事件,但也可以应用于状态。
事件队列成本(Cost Event Cohort):基于上述事件收益输入(Rwd Event Entry)累积的事件收益值,即该数值乘以该周期开始时处于该状态的队列百分比。
阶段成本(Stage Cost):整个周期累积的收益总额,包括周期收益、启动收益和事件收益。
累计成本(Cum Cost):从 _stage 0 到当前阶段的全部周期的阶段收益累计值。
上述各列会在每个收益值/结果下重复出现。
马尔可夫队列基本报告同样受 WCC 影响。
与传统模型一样,基本报告按状态显示一组更精简的结果,但额外增加了一列,用于显示 WCC 前后的状态层级数值。

WCC 模型与传统模型的贴现应用方式相似。
您可以借助树偏好设置(Tree Preferences)在传统(HCC)模型与 WCC 模型之间转换。在周期内校正与半周期校正之间转换(Converting between Within-Cycle Correction and Half-Cycle Correction)一节说明了具体做法。
马尔可夫队列汇总报告
马尔可夫队列汇总报告(Markov Cohort Summary Report)的输出采用未分组的二维(2-dimensional)网格格式。

由于没有分组且采用标准网格格式,这种输出通常更适合导出到 Excel。
状态图、生存曲线与其他图形
您还可以单击输出数据右侧的链接,从马尔可夫队列分析输出中生成图形化数据。每个选项都会生成一张图形,以时间(阶段)为横轴追踪计算值。各选项说明如下:
状态概率(State probabilities):该图形绘制每个周期各状态概率的变化。
生存曲线(Survival curve):生存曲线是展示马尔可夫分析结果的标准方式。TreeAge Pro 会提示您选择哪些状态代表死亡,然后绘制“存活”状态概率之和。该图形也可用于创建对其他类型状态进行分组的概率曲线——例如绘制无病生存率。
阶段成本(Stage cost):该图形显示每个周期累积的成本。任何收益值均可使用此图形。
累计成本(Cumulative cost):该图形显示每个周期累积的累计成本。任何收益值均可使用此图形。
马尔可夫状态图(Markov State Graph)展示模型所有周期内状态成员数的变化。有关编辑图形的更多细节,请参阅图形(Graphs)一节。具体而言,x 轴可以很方便地编辑以更改时间单位,详见图形坐标轴控件(Graph Axis Controls)一节。

生存曲线图显示每个周期开始时处于存活状态(即任何非死亡状态)的队列百分比。

您可以将状态概率(StateProb)或生存曲线图与另一策略中同类型的图形合并,在一张图中查看总体结果。在任一图形右侧的操作/报告(Actions/Reports)选项中,都有合并(Combine)选项。选择该选项后,您可以选择(同类型的)其他图形进行合并。更多细节请参阅合并图形(Combining Graphs)一节。
从标签到坐标轴等诸多图形编辑选项,在图形(Graphs)一章中均有说明。您也可以将 x 轴重新缩放到不同的时间段。
将生存数据导出到表格
状态概率(StateProb)图和生存曲线图的数据都可以导出到表格,以便进一步评估并进行由生存数据计算风险率(Calculating Hazards from Survival Data)。在评估模型是否应用了合适的死亡和/或进展风险时,这可能很有用。
要从折线图的任一数据系列生成表格:
生成图形。
点击图形右侧“Actions”下的“Convert to table”链接。
选择一个已打开的模型,表格将添加到该模型中。
输入表格名称。
如果图形中包含多个系列,请选择所需的系列。
随后,所选模型中会新增一个表格。您可以接着通过从生存数据计算风险率对该表格进行评估。