ImagenHub是一个旨在标准化所有条件图像生成模型推理和评估的一站式库。该项目定义了七个关键任务,创建了高质量的评估数据集,并构建了统一的推理管道,以确保模型之间的公平比较。同时,设计了两个人工评估指标,语义一致性和感知质量,并通过专家评审员进行了高度一致的评估。对约30个模型进行了全面评估,并持续更新排行榜以跟踪领域的进展。
['定义七个主要的条件图像生成任务', '构建高质量的评估数据集', '建立统一的推理管道', '设计语义一致性和感知质量两个人工评估指标', '训练专家评审员进行评估', '全面评估约30个条件图像生成模型', '更新排行榜跟踪领域进展']
None
['ImagenHub收集了七个主要的条件图像生成任务,为研究人员提供了全面的评估数据集。', '建立了统一的推理管道,确保公平比较不同模型。', '设计了两个人工评估指标,语义一致性和感知质量,通过专家评审员获得了高的评估者间一致性。']
None
None