图像同源性检测

将150w到100w张的图片数据进行全检，分离同源图片。1.基于DCT（离散余弦变换得到图片的hash值，换算出图片的特征值。具体算法步骤主要为:缩放图片、转灰度图、计算指纹实现特征抽取。2.基于抽屉原理，实现海量数据去重。