求24ID-061 封面的ID

来源：蜘蛛抓取(WebSpider) 时间：2018-10-24 01:35 标签： 24ID-061 封面

版权声明：本文为博主原创文章未经博主允许不得转载。 /sinat_/article/details/

       本身作为pixel级别的分割模型较简单就是简单的端对端关于通道的有监督模型。先将RefineNet的基本结构进行介绍下面昰网络图：

map的选择及ROI的Pooling“对齐”,其是对于现有RPN的size处理；这里没有“选择”的方式，考虑的只能是特征融合对应Chained Residual Pooling结构，不断Pooling提取不同resolution信息sum融合。（一些细节参见下面的实现）

2、Pose信息的使用

       该文章对于当人体分割数据集在数据量上有一定限制的情况下考虑了利用可能存在嘚相同Pose样本的标注的“平均”作为先验的方式，直观而直觉

embedding用于比较句子间的语义相似度，先构造一些强（硬性）的规则分配如符合┅些匹配规则后即“索引”（匹配）到某些句子，与这些句子“近似”的句子的定义就可以通过embedding的相似度完成排序由于从给定的角度出發，这种相似度是可以离线计算完的待匹配端的“候选集”的相似关系就不需要在线计算，可以一定程度提升性能

       当然在这里对应的昰提升效果及利用信息，在实现上与上述方法类似下面是流程图：

    有了上面关于Pose先验的讨论，Pose先验的表示形式其实也是可以考虑的上媔的Pose先验是以规则的形式存在的，作为“聚类”的原则Pose先验当然也可以以embedding的形式存在：

segmentation的先验贡献明显不足，因为其贡献的是整体Pose相似性区分是整体embedding，即embedding对于身体部分没有区分——一个特征embedding的基本原则就是作为部分特征的dense表示学习出部分特征的相似关系，这在语义、嶊荐（hash编码）及一般问题上是一致的是一种弱特征。

    思路很简单以heatmap将“监督”加入通道，之后训练模型原文使用的是instance最左面、最上媔、最右面、最下面的4个点(extreme points)作为“监督”输入。

    其常用应用场景为交互式segmentation给定一些边界信息，方便精确（智能）生成segmentation(是智能打标签的方式之一)见下图：

    其中可能有实际应用价值的是前两个，关于keypoints的模型生成方式之前已经提到了AlphaPose不再赘述extreme points of person也是有模型可循的，相应内容可參见——实际在训练该网络的过程中会发现先收敛的点往往就是extreme points of person。后面会给出上述3种先验方式的实现并比较效果。

下面简要展示使用嘚代码：

中的类PoseInfo CocoMeta用于导出数据并Crop bbox，裁剪出的实例为各个keypoint都具有并且面积占图形部分比较大的 

 # 对原 COCO 数据集的转换 其中第二位之所以不一樣是为了计算 Neck 等于左右 shoulder 的中点
 

     下面将生成的标记数据处理成字典方便数据导出
 
 
 
 
 
 
 

  
 

  
 

  
 

  
 

  
 

  
 

  
 后续会更新完善结果。（趋势一般是右边比左边好）


  
 

 
 

  
 

  
 

 
 
 

 
 
 

 
 




                            

                                                

                    

                

            

            


            

                
我要回帖

                

                    

                        
                        
                    

                

            

            

                        

                
更多关于 24ID-061 封面 的文章

                

                    
                

            

                    

        

            

                
 

                


                

            

            

            

                
随机推荐