icdar evaluaion

  • 预测框与GT之间的匹配关系有五种情况,其中第一个位置表示GT框,第二个位置表示预测框。
  1. 无匹配;
  2. 一对一的匹配;
  3. 一对多的匹配;
  4. 多对一的匹配;
  5. 多对多的匹配;
icdar evaluaion_第1张图片 图片来自 这里
  • DetEval-Evaluation software for object detection algorithms为评测工具,评测匹配中的一对一、一对多和多对一三种匹配关系。预测结果形式如下,其中icdar2003所在的tag为旧的一对一的评测结果,score为DetEval方式的评测结果。
    #图片数
     #1对1匹配方式
      #DetEval方式
  
  • 准确率、召回率和调和平均数(harmonic mean or f-score)

icdar evaluaion_第2张图片

  1. 准确率为预测框与真实框间的公共部分关于预测框的函数;
  2. 召回率为预测框与真实框间的公共部分关于真实框的函数;
  3. F1值,为准确率和召回率的调和平均数;
  • 计算公式
  1. 准确率和召回率的计算公式;

icdar evaluaion_第3张图片

  1. 一对一的匹配方式,ICDAR2013older评测方式;

icdar evaluaion_第4张图片

  1. 单张图一对一、一对多、多对一的计算公式;

icdar evaluaion_第5张图片

  1. 多张图的计算公式

icdar evaluaion_第6张图片

  1. 最终的准确率、召回率和F1值

    icdar evaluaion_第7张图片

     

参考文献:

  1. ICDAR2013文本检测算法的衡量方法(二)Rectangle Matching与DetEval

  2. DetEval-Evaluation software for object detection algorithms 

你可能感兴趣的:(评价指标,OCR,DetEval,icdar)