Pinterest推出感知上下文的可视化搜索工具Complete the Look
2019年06月19日 由 明知不问 发表
929642
0
Pinterest推出了Complete the Look,这是一款为家居装饰和时尚类别开发的视觉搜索工具,可为照片中的多件物品提供样式建议,如衬衫,连衣裙,鞋子或太阳镜。
Complete the Look建议会考虑周围物体和照片中的元素的背景,如季节,体型,设计美学,甚至图像是在室内还是室外拍摄。
建模时尚兼容性的结果可能是主观的,但Pinterest工程师在早期实验中发现,完整的外观比以前的系统更能准确地做出推荐。
Pinterest视觉搜索工具目录于2017年开始使用Lens,这项服务每月为数亿次搜索提供支持,并继续推出完全自动化,以便购买收藏过的产品,并为Lens提供个性化结果。
Pinterest在一篇论文中详细介绍了完成这一外观所采取的方法,该论文已被计算机视觉和模式识别(CVPR)大会接受。Pinterest没有透露关于何时为用户提供Complete the Look视觉搜索的详细信息。
Complete the Look是一个使用STL-Dataset训练的深度卷积前馈神经网络,首先使用ResNet50网络生成场景和产品图像,并创建故事特征图。
研究人员在报告中说:“我们从场景和产品图像中学习全局嵌入,从场景的局部区域学习局部嵌入,并在分类引导注意力的统一风格空间中测量场景与产品兼容性。”
Pinterest的视觉搜索工具竞争对手包括谷歌智能助理的Lens,它可以提供实时类似的服装风格推荐,识别对象,翻译文本或从餐馆菜单中挑选最好的项目。此外,本月亚马逊推出了StyleSnap,用于基于杂志,社交媒体或相机胶卷的照片进行时尚推荐。