模型比较
ClearML Web UI 提供了比较模型的功能,允许定位、可视化和分析模型差异。 您可以查看模型详细信息、配置、标量值等方面的差异。
选择要比较的模型
选择要比较的模型:
- 转到包含要比较的模型的模型表。
- 选择要比较的模型。一旦选择了多个模型,批量操作栏就会出现。
- 在批量操作栏中,点击COMPARE。
比较页面在详细信息标签中打开,模型被并排比较。
修改模型选择
点击MODELS
按钮查看当前比较的模型。点击列出的模型上的X
将其从比较中移除。
您可以添加/移除模型到您的比较中:
- 点击任意比较标签中的
+
按钮。这将打开一个窗口,其中包含一个模型表,当前比较的模型位于顶部。 - 通过使用适当的列标题控件对模型进行排序和过滤来找到要添加的模型。或者,使用搜索栏按名称查找模型。
- 选择要包含在比较中的模型(和/或清除您希望移除的任何模型的选择)。
- 点击APPLY。
分享比较页面
要分享比较页面,请从地址栏复制完整的URL并发送给队友以协作。他们将获得完全相同的页面(包括选定的标签等)。
嵌入比较可视化
要在您的报告中嵌入比较页面的图表和调试样本,请将鼠标悬停在资源上并点击,这将复制嵌入代码到剪贴板,以便放入您的报告中。这些可视化会随着模型的更新而实时更新。企业计划和托管服务支持将资源嵌入到外部工具中(例如Notion)。
比较模式
比较选项卡提供以下视图:
并排文本比较
在详细信息和网络标签中,您可以查看模型名义值的差异。详细信息显示模型的一般信息、标签、元数据和谱系。网络显示模型的配置。每个模型的信息都显示在一列中,因此每个字段都是并排排列的。
左侧的模型被用作基础模型,其他模型将与之进行比较。您可以通过以下方式之一设置新的基础模型:
- 悬停并点击 将成为新基础的模型。
- 悬停并点击在新基础模型上,并将其一直拖动到左侧
模型之间的差异被突出显示。您可以通过打开隐藏相同字段开关来隐藏相同的字段。
表格标量比较
标量选项卡(值视图)将模型报告的指标值以表格形式展示:每行代表一个指标/变体,每列代表一个模型。从下拉菜单中选择要显示的指标值:
- 最后值:每个模型最后报告的值
- 最小值:报告的最小值
- Maximum value: The maximum value reported
您可以通过点击下载标量比较表为CSV文件。
打开显示行极值开关以突出显示每个变体的最大值和最小值。
图形比较
标量(图形视图)和图表标签显示与模型相关的图表。标量标签将标量值作为时间序列折线图进行比较。图表标签比较每个比较模型中每个指标/变体组合的最后报告的迭代样本。
线图、散点图、箱线图和条形图通过每个指标/变体的单一图表进行比较,所有比较模型的图表都合并到其中。
其他类型的图表会为每个模型单独显示。
所有单一值的标量都被绘制在“摘要”标题下的一个单一簇状条形图中,其中每个簇代表一个报告的指标,簇中的每个条形代表一个模型。
为了更好地进行绘图分析,请参阅绘图控制。