一、课题来源与背景：中华文明的重要发源地，吸引了来自海内外的大量游客。在旅游高峰季节，景点的导游成为一个不容忽视的难题。我们不难发现：节假日及游客众多的情况下，传统的人工导游景点显得力不从心。如何有效利用社会媒体以及智能手机在集成用户属性、便利的信息获取与传播特性，自动进行景点导游及景点位置相关服务推荐，对提升用户旅游质量及进行深度文化旅游有重要的社会价值，对带动传统旅游行业及其所辐射的相关服务业等有重要的经济价值。随着智能手机的发展和功能日趋强大，人们可以非常方便地通过智能手机获取信息。在社会网络上有大量用户分享的旅游信息的照片和评论信息、有关旅游景点的介绍信息。如何有效地利用网络上大众贡献的媒体大数据来进行自适应的景点导游能能够达到自动的旅游导游的目的。本报告依托用户所携带的智能手机终端以及网络媒体大数据进行自动的景点数据收集，估计用户拍摄图片的位置，自动地对景点图片进行导游词的生成，达到自主旅游的目的。

     二、技术原理及性能指标：1）基于社会媒体的旅游景点信息收集与索引建立2) 自动的景点挖掘与用户拍摄景点图像地理位置估计3) 基于社会媒体用户个性化的位置服务推荐4) 基于智能手机的图像检索中特征描述方法的语义保持性问题。

     三、技术的创造性与先进性：1.相关研究内容如下1)基于社会媒体的旅游景点挖掘。2)基于智能手机端用户拍摄图像的自动景点导游3)基于用户兴趣的个性化景点相关服务推荐。4)基于智能手机的图像检索方法。 2.解决的关键技术问题：1) 景点图像地理位置估计。2) 社会媒体用户个性化服务推荐的有效性。3) 智能手机端图像检索中压缩特征描述方法的语义保持性问题。 3.项目技术创新点：1） 基于社会媒体聚类滤波与多代表性图像约束的景点图像位置估计方法。提出首先对社会媒体中含有地理位置标签的图像的GPS位置进行聚类滤波以自动挖掘景点，并对每个景点用视觉信息互补的多代表性图像进行表征，然后对智能手机端拍摄的图像用基于视觉内容相似性度量的方法提升景点图像位置估计性能，以有效消除社会媒体中噪声图像、mobile端捕获图像受拍摄时间、光照等因素对图像位置估计的影响。 2) 基于用户兴趣与好友影响力相结合的个性化服务推荐方法。本报告中提出将用户的兴趣以及用户所在社区的好友的影响力有效考虑在一个统一的框架下，进行个性化的服务推荐。该方法将景点位置相关服务与用户的兴趣有效结合，在保证推荐服务满足用户兴趣的同时，将好友的影响力融入其中，不仅使得推荐的服务满足用户需求，而且让用户放心接受所推荐服务。 3） 基于智能手机端重要信息挖掘与视觉特征可分级的语义图像检索方法。提出将用户智能手机端拍摄景点图像中重要内容进行有区分地对待，确定检索特征的优先级，实现智能手机端图像检索中可分级的信息传输。特征传输的优先级与特征对检索的贡献度紧密结合，达到传输为检索性能提升的目的。这样在降低视觉信息占用带宽的同时能够有效提升特征在检索中的语义区分度。 4） 新型个性化旅游推荐系统的开发。目前市面上主流的旅游应用，只是传统旅行社业务的在线移植，主要提供给用户的多是旅行社的旅游线路，景点周边的宾馆信息，机票车票预订等功能。随着社交应用的火热发展，自媒体的出现以及web2.0时代的到来，不难看出现代用户渴望创造并分享个性化的内容，同时也希望平台提供符合自身喜好的推荐服务。因此，基于当前市场趋势，把握用户需求痛点，结合前期在图像检索领域及大数据领域的相关研究经验，我们将结合相关推荐算法，开发一个在传统旅游APP的基础上，增加内容交互性，体现用户个性，准确把握用户喜好，让用户之间分享喜悦，交流经验的新型旅游个性化推荐平台。

    四、项目取得的技术成果： 发明专利： 钱学明，徐伟，侯兴松，“一种基于无人机的实时三维重建方法”，专利申请号201810138581.3，申请日期：2018-2-1 钱学明，汪寒雨，侯兴松，“一种基于时空信息与深度网络的监控视频对象检测方法”，专利申请号201810118845.9，申请日期：2018-2-6 软件著作权： 钱学明，周澎，种冲“旅游助手手机客户端软件”，完成日期2018-01-04，登记号：2018SR448047 本报告相关的研究已发表SCI论文5篇 。

    五、技术的成熟程度，适用范围和安全性：1）提出了一种进行景点图片自动展示的方法，该方法能够有效利用社交媒体中大量用户产生的图片数据，通过3D重建获取景点分布的点云，在点云图的基础上通过自适应聚类发现优美视角、通过选取互补视角的优美度图片作为景点展示图片。相关工作发表在IEEE TIP上。2）提出一种基于主题多样性的社会网络媒体图像检索方法，该方法能够通过主题的聚类，将结果的进行主题进行排序从而达到主题多样性。相关工作发表在IEEE TIP上。3）提出了一种能够融合多源信息的社会媒体图像点位方法，该方法充分利用多维异质信息的互补性来提升图像定位的性能。4）开发了一个基于智能手机的旅游景点导游系统，能进行自动的景点播报和直观展示。相关方法和系统已经申请专利和软件著作权。