基于商标图形识别并互动的方法及系统与流程

本发明属于互动技术领域，尤其涉及一种基于商标图形识别并互动的方法及系统。

背景技术：

随着智能客户端的普及和技术的发展，扫描二维码为我们的工作和生活带来了许多便利，这让丰富的内容(图文、影像、h5等等；承载和传播的方式缩小到一个二维码上，这也成为众多商家推广和集客的重要路径。但是现有技术的二维码局限了其使用的范围，第一，这种扫描触发的方式必须有一个二维码，而二维码又需要专业工具生产并且分发，相对于想把自己的品牌通过识别码进行推广的商家，采用二维码的方式着实不够直接方便；第二，现有技术的二维码扫描没有结合三维技术，通过扫描识别码获得的信息为二维信息，且用户无法基于识别码进行互动，局限性比较明显。

为了解决上述技术问题，人们进行了长期的探索，例如中国专利公开了一种基于3d全息投影进行身份认证的支付方法及系统[申请号：cn104574052a]，本方案利用带有3d全息投影模块的pos机读取消费者支付卡的识别码，并结合消费内容生成了电子形式的支付订单并将订单发送到支付服务器，支付服务器将订单发送到消费者客户端上进行验证，消费者验证通过后发送订单确认信息到支付服务器，同时输入指纹到pos机，pos机将读取的指纹数据发送到支付服务器，支付服务器接收到订单确认信息后还需对消费者的指纹进行验证，指纹验证通过后支付服务器向pos机返回与该消费者支付卡识别码绑定的消费者3d全息图像，pos机投影出该3d全息图像供商家对消费者身份进行审核，审核通过后支付服务器才对与消费者支付卡绑定的账号进行扣款，通过多级审核，大大增强了支付安全性。

再如，一种移动电子设备与传统玩具互动的方法及实现该方法的装置[申请号：cn104021407a]，该方法是由制造商或销售商把与其生产或销售的玩具对应的信息编制成软件后传送到网站或云端、再将记载有该玩具对应软件识别码的射频识别标签植入玩具中，消费者购买上述玩具后，根据商家的提示，利用带有射频识别读写器的移动电子设备到相应的网站或云端下载对应软件，消费者将移动电子设备中的射频识别读写器打开后靠近所购买的玩具，触发对应软件打开，通过视频和/或音频将所购买玩具的信息表达出来。本方案为静态的玩具增加生动的画面和声音，通过识别码实现在传统玩具的基础上，与其进行互动，实现识别码应用的进一步突破。

上述两个方案虽然在一定程度上将识别码的信息从二维发展到了三维，但是其互动程度不够高，而且扫描触发的方式都需要有一个二维码。而品牌化是企业发展的必经之路，无论是企业还是企业的产品，最终呈现在市场再到消费者面前，都会聚焦在品牌上面。市面上不计其数的产品，各大商圈卖场，我们身边充斥着无数的品牌，这些具有统一形象，图形化或是文字的品牌商标，如果本身就是一个“识别码”的话，那信息传递的方式和效率会再次发生改变

技术实现要素：

本发明的目的是针对上述问题，提供一种基于商标图形识别并互动的方法；

本发明的另一目的是针对上述问题，提供一种基于商标图形识别并互动的系统。

为达到上述目的，本发明采用了下列技术方案：本发明的基于商标图形识别并互动的方法包括以下步骤：

s1：接收图像识别模块通过识别商标图形获得的商标图形信息，同时基于商标图形信息展示初始选择模块；

s2：获取客户端发送的接触指令，根据接触指令对所述的初始选择模块进行筛选，并将筛选结果和通过检测算法处理的商标图形信息传送于云平台；

s3：接收云平台传送的与步骤s1中获得的商标图形信息和步骤s2中的接触指令具有映射关系的调取信息；

s4：对调取信息进行处理，并根据调取信息合成互动内容进行展示并供用户进行交互。

通过上述的技术方案，用户只需通过扫描商标图形，然后即可选择从云平台接收需要的信息，将二维信息进行三维展示，十分方便直观，且展示生动全面，更有利于商家进行品牌推广。

在上述的基于商标图形识别并互动的方法中，在步骤s3中，所述的调取信息包括精准结果和/或模糊结果，所述的精准信息包括所识别的商标图形对应的产品信息、品牌信息、以及商标所属的官方旗舰店信息和官网信息中的任意一种或多种组合的商标信息；所述的模糊结果包括所识别的商品图像对应的相关产品信息和/或相关品牌信息。

在上述的基于商标图形识别并互动的方法中，在步骤s4中，对所述的精准结果的调取信息以ar的形式进行展示，展示内容通过与预设手势一致的接触指令进行切换。

在上述的基于商标图形识别并互动的方法中，将调取信息以ar的形式进行展示的方式包括产品ar展示和/或品牌ar展示，其中在产品ar展示的过程中提供ar互动界面和/或产品简介界面；在品牌ar展示的过程中提供旗舰店信息界面、品牌信息界面和品牌活动界面。

在上述的基于商标图形识别并互动的方法中，当接收到进入ar互动界面的指令后，进入显示有场景融合、放大缩小、拆解和换颜色/包装中的任意一种或多种选择功能的互动选择界面；当接收到进入产品简介界面的指令后，进入显示有产品参数和/或客户评论的信息选择界面。

通过上述技术方案，用户可通过扫描商标了解其他客户对携带该商标的商品，或者该商标的其他商品的评论，使用户即使在线下购买也有参考，在商品选择方面会更加理智，同时有利于督促商家，规范市场。

在上述的基于商标图形识别并互动的方法中，在步骤s1之前还包括：

获取客户端发送的操作指令，并判断操作指令为扫描指令、查询指令或者入驻指令，

若判断结果为扫描指令，则执行步骤s1；

若判断结果为查询指令，则直接将查询结果传送给显示模块进行显示，同时判断是否存在接触指令，在当存在接触指令的时候，根据所查询的商标图形信息和接触指令合成互动内容并进行展示；

若判断结果为入驻指令，则等待接收商标图形和商标图形对应的商标信息，并在接收到商标图形和商标图形对应的商标信息后，将两者以映射关系传送于云平台。

一种基于商标图形识别并互动的系统，包括具有图像识别模块、显示模块和通信模块的客户端，其特征在于，所述的客户端还包括交互模块，所述的交互模块通过通信模块连接于云平台，其中，

图像识别模块：用于识别商标图形，并将通过识别商标图形获得的商标图形信息传于交互模块进行处理；

显示模块：触摸显示屏，用于接收用户的接触指令，并显示由交互模块发来的互动内容；

交互模块：用于供用户进行二维交互和/或三维交互；

通信模块：用于根据交互模块发送的通信信号与云平台进行通信；

云平台：用于存储商标图形和每个商标图形对应的商标信息，以及根据交互模块通过通信模块发来的接触指令向交互模块发送调取信息。

在上述的基于商标图形识别并互动的系统中，所述的交互模块包括用于对商标图形信息进行算法分析处理的算法模块，且该算法模块为susan角点检测算法模块。

在上述的基于商标图形识别并互动的系统中，所述的交互模块还包括供用户选择的商标详情模块、收藏模块和分享模块，且其中商标详情模块又包括产品ar展示模块和/或品牌ar展示模块。

在上述的基于商标图形识别并互动的系统中，所述的产品ar展示模块包括ar互动单元、产品简介单元和选择购买单元中的任意一种或多种的组合；所述的品牌展示模块包括旗舰店单元、品牌信息单元、品牌圈单元和品牌活动单元中的任意一种或多种的组合。

本发明的优点在于：1、扫描触发不受限，任何带有商标图形的产品、物体或场景都可以进行扫描随时进入了解信息；2、采用ar增强现实技术将虚拟内容套在现实场景并进行互动，通过线下即眼前实物进行扫描触发，将线上的内容信息调出来进行叠加显示得到线上三维展示；3、提高信息传播效率；4、硬件构架简，操作方便，智能化程度高；5、实现了一种新型的电商模式：互联网是一个二维世界，易于传播信息而难于体验；现实是一个三维世界，信息传播的效率相对低却容易产生体验，尤其是真实感和场景化营销让用户更有参与感，相比传统网购的方式，本发明很好的结合了线下真实和线上互联的优势，现实场景里的产品具有所见即所得的真实感，扫描商标图形后即可链接到电商进行购买，实现线下到线上的流量变现。

附图说明

图1是本发明实施例一的功能流程图；

图2是本发明实施例一的界面结构图；

图3是本发明中susan算法的圆形模板；

图4是本发明中susan算法的usan典型区域图；

图5是本发明实施例二的流程图；

图6是本发明实施例三的工作原理图；

图7是本发明实施例三的结构框图。

图中，图像识别模块1；显示模块2；通信模块3；交互模块4；算法模块41；商标详情模块42；产品ar展示模块421；品牌ar展示模块422；收藏模块43；分享模块44；切换模块45；云平台5。

具体实施方式

以下是本发明的优选实施例并结合附图，对本发明的技术方案作进一步的描述，但本发明并不限于这些实施例。

实施例一

如图1，本实施例的商标图形识别并互动的方法包括以下步骤：

s1：接收图像识别模块1通过识别商标图形获得的商标图形信息，同时基于商标图形信息展示初始选择模块；

如图2，初始选择模块包括收藏模块、商标详情模块和分享模块，用户选择收藏模块43以后app将扫描到的商标进行收藏，之后需要浏览或分享该商标或该商标信息的时候直接进入收藏界面找到收藏的商标即可，用户可根据收藏的商标调取对应的商标信息，也可以在接收相关信息以后将相关信息与商标一起进行收藏；

商标详情模块42用于了解商标详情，用户选择商标详情模块42以后产品ar展示界面和/或品牌ar展示界面出现在触摸显示屏上供用户进一步选择，当然在产品或产品图像上扫描商标图形，并且将产品外观一并扫描的时候，优先出现产品ar展示界面；将商标和产品名称一并扫入的时候，也会出现ar展示界面和/或品牌ar展示界面，而且由于扫描到商品信息，所以优先出现产品ar展示界面；以便用户在扫描产品上的商标的时候直接可以出现该产品信息，且产品ar展示界面和品牌ar展示界面之间和相互切换，例如在伊利的红枣酸奶上的伊利商标带有该红枣酸奶的标识，用户在扫描红枣酸奶的伊利商标的时候正中间或最前面出现的是该红枣酸奶的ar展示界面其次才是用于展示伊利商标这个品牌的品牌展示界面，各个展示界面之间可以通过上下或左右滑动触摸显示屏的接触指令来进行切换。其中，根据用户爱好，ar展示界面也可转换为二维模式，二维模式为普通的图片文字介绍，本实施例针对ar展示进行具体介绍说明：ar展示为一种增强现实技术的三维模式，它是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,声音,味道,触觉等),通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在，增强现实技术，不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来，两种信息相互补充、叠加。在视觉化的增强现实中，用户利用客户端摄像头，把真实世界与电脑图形多重合成在一起，便可以看到真实的世界围绕着它。具体到本实施例，即将从云平台5获取的调取信息叠加显示获得三维效果。

分享模块44用于将扫描到的商标或连带商标信息一起分享与好友、非好友或者朋友圈等社交平台。

本实施例把扫描商标所获得的虚拟内容套在现实场景中，并供用户进行互动，通过线下眼前实物进行扫描触发，将线上的内容信息调取出来进行叠加显示，打破了传统的o2o的界限，其所具有的真实感和场景化营销让用户更有参与感，而不是面对线上产品只能查看图片或者被动地看产品视频，无法体验线下购物随心所欲的了解商品的每一角落，其结合了传统的网购模式和线下购物模式，传承了两者的优势。

s2：获取客户端发送的接触指令，根据接触指令对所述的初始选择模块进行筛选，并将筛选结果和通过检测算法处理的商标图形信息传送于云平台5；

其中，检测算法为susan角点检测算法；

这里的susan角点检测算法1997年牛津大学的smith等人提出的一种处理灰度图像的方法,它主要是用来计算图像中的角点特征。如图3所示为susan算法选用圆形模板，将位于圆形窗口模板中心等待检测的像素点称为核心点。核心点的邻域被划分为两个区域:亮度值相似于核心点亮度的区域即核值相似区(univaluesegmentas-similatingnueleus,usan)和亮度值不相似于核心点亮度的区域。

usan的典型区域如图4所示，模板在图像上移动时,当圆形模板完全在背景或者目标区域时,其usan区域最大,如图4(a)；当核心在边缘时,usan区域减少一半,如图4(c)；当核心在角点时,usan区域最小,如图4(d)，基于这一原理,smith提出了最小核值相似区角点检测算法，

susan角点检测算法的具体步骤如下:

(1)在图像上放置一个37个像素的圆形模板，模板在图像上滑动，依次比较模板内各个像素点的灰度与模板核的灰度，判断是否属于usan区域，判别函数如下：

(2)统计圆形模板中和核心点有相似亮度值的像素个数n(r0),

其中，d(r0)是以r0为中心的圆形模板区域；

(3)使用如下角点响应函数，若某个像素点的usan值小于某一特定阈值，则该点被认为是初始角点，其中，g可以设定为usan的最大面积的一半。

(4)对初始角点进行非极值抑制来求得最后的角点。

s3：接收云平台5传送的与步骤s1中获得的商标图形信息和步骤s2中的接触指令具有映射关系的调取信息；

其中，调取信息包括精准结果和/或模糊结果，精准信息包括所识别的商标图形对应的产品信息、品牌信息、以及商标所属的官方旗舰店信息和官网信息中的任意一种或多种组合的商标信息，调取susan角点检测算法模块，调取摄像头进行识别点计算，有效识别品牌和产品型号/外观，精准识别具体产品，进行展示并互动操作；模糊结果包括所识别的商品图像对应的相关产品信息和/或相关品牌信息，客户端在接收到这些信息后以二维模式或者叠加显示的三维模式进行展示，此在前有描述，不再赘述。

具体地，当susan角点检测算法对品牌和产品型号/外观都不能进行有效识别的清康熙啊，将对扫描物体进行拍照并调取图像识别算法，对后台数据库进行图像检索，将近似产品检索结果以列表形式进行显示。

s4：对精准结果的调取信息进行处理，并根据调取信息合成互动内容进行展示并供用户进行交互，本实施例中采用对调取信息以ar的形式进行展示，展示内容通过与预设手势一致的接触指令进行切换，预设手势为上下和/或左右滑动屏幕。

进一步地，将调取信息以ar的形式进行展示的方式包括产品ar展示和/或品牌ar展示，其中在产品ar展示的过程中提供ar互动界面和/或产品简介界面；在品牌ar展示的过程中提供旗舰店信息界面、品牌信息界面和品牌活动界面，上述的各个界面由用户自行选择进入，系统根据用户的选择呈现相应的界面。

进一步地，用户在选择浏览选择模式的时候会进入产品ar展示界面和品牌ar展示界面的选择界面，进入到产品ar展示界面后，系统便会进一步显示ar互动、产品简介和选择购买的互动选择界面，当接收到用户给出的进入ar互动界面的指令后，进入ar互动界面，且界面中显示有场景融合、放大缩小、拆解和换颜色/包装中的任意一种或多种功能选择模块，当接收到进入产品简介界面的指令后，进入产品简介界面，且显示有产品参数显示和/或客户评论信息显示的信息选择界面供用户对感兴趣信息进行选择；同样地，进入到品牌ar展示界面后，系统便会进一步显示包括旗舰店、推荐、品牌信息和品牌活动等供用户选择项目的界面，当接收到进入旗舰店的指令后得到商品列表，收到推荐指令后，得到推荐商品的列表，收到显示品牌信息指令后得到品牌信息介绍，收到进入品牌活动指令后，显示商家参与的品牌活动。

场景融合：ar模型根据周围的环境进行一个很好的融合搭配，例如宜家家居的ar功能，可以在真实的场景中实时看到家具摆放在家里的位置和效果，清晰明了的了解到物品的尺寸。

放大缩小：可以对所有的模型都自由的进行缩放，有利于顾客在仅有大小的手机屏幕里看到物品的细节及远近效果。

拆解：此功能针对部分产品，例如汽车，家电，电子产品等注重内部品质的产品，使物品的内部结构清晰明了的展现给顾客。

换颜色/包装：更改物品的颜色和外包装，定制自己个性的产品。

通过上述的技术方案，用户只需通过扫描商标图形，即可选择从云平台5接收需要的信息，将二维信息进行三维展示，十分方便直观，且展示生动全面，更有利于商家进行品牌推广，同时用户可通过扫描商标了解其他客户对属于该商标的商品，或者该商标的其他商品的评论，使用户即使在线下购买也有参考，在商品选择方面会更加理智，同时有利于督促商家，规范市场。

进一步地，在步骤s4中，交互包括二维交互和/或三维交互，且三维交互包括：基于商标图形信息和接触指令获得商品三维图像、品牌三维图像、商标所属的官方旗舰店三维图像和官网三维图像中的任意一种或多种的组合，这里的三维图像即通过将云平台5的信息利用ar增强现实技术进行叠加处理的展示效果。

进一步地，用户除了在客户端内扫描logo和产品外观以获取相应商标信息，还可以通过在客户端内通过品牌/产品名称检索后台数据库，调取相应信息进行展示并互动操作。

本实施例所说的用户发出的指令均为在触摸显示屏上进行的触摸操作，不同的触摸手势对应着不同的接触指令，接触指令通过触摸显示屏接收并传送给交互模块4，由交互模块4对接触指令进行处理和分析从而获得相应的互动指令以根据互动指令从云平台5接收相应的信息，并通过触摸显示屏进行展示。

通过本实施例，实现线上线下相互联系、转化，即在实体场景中，扫描产品的商标图形即可链接进入电商进行购买，实现线下到线上的流量变现；而在虚拟场景中，通过任意商标图形进入该商标图形对应的增强现实旗舰店或官网。

实施例二

本实施例与实施例一类似，不同之处在于，本实施例中，在步骤s1之前还包括：

如图5所示，获取客户端发送的操作指令，并判断操作指令为扫描指令、查询指令或者入驻指令，即在进入该系统的界面时，首先出现的是供用户选择的指令，进一步地操作指令还可以是进入我的品牌圈指令，我的品牌圈包括了用户喜爱的品牌圈列表，用户在浏览商标详情的时候随时可将商标进行分享、收藏和加入我的品牌圈。

用户选择扫描商标的情况下，客户端即发送扫描指令给交互模块4，交互模块4为一个应用程序以app的形式嵌入到客户端，此时判断的结果为扫描指令，则执行步骤s1；扫描结果出来后，用户可选择步骤s1中介绍的收藏、浏览或介绍，其中，浏览品牌又分为多个模块，如旗舰店、品牌推荐、品牌信息、品牌活动和品牌圈等，当然品牌浏览的过程中用户可自行下单购买；

若用户选择的是查询，则直接将查询结果传送给显示模块2进行显示，当然，查询的内容以数据库的内容为基础进行查找，也就是说进入后台数据库进行查询，同时判断是否存在接触指令，这里的接触指令是指各种互动指令，即查询商标或所查询产品对应的ar增强现实旗舰店等指令，当存在接触指令的时候，根据所查询的商标图形信息和接触指令合成互动内容并进行展示；

若用户选择的是入驻，这个模块通常由商家完成，以不断完善云平台5的数据信息，交互模块4等待接收商标图形和商标图形对应的商标信息，并在接收到商标图形和商标图形对应的商标信息后，将两者以映射关系传送于云平台5，审核通过后该入驻信息即成功入驻。

当然在进行入驻、收藏等操作时需要先进行注册登录，以保存特定用户特定的信息。

其次，通过以下两个方法向客户端发放优惠券：

第一：通过检测已建立自己的品牌圈的客户端账户是否成功发表心得，以及是否成功分享，若成功发表心得并且成功分享即向客户端分发优惠券；

第二：通过品牌活动模块供商家与用户互动，通过检测客户端账户是否正在或者已经完成ar互动游戏并成功分享，当检测结果为是的时候，即向客户端账户分发优惠券。

通过上述两个方法，使客户能够与品牌圈圈内好友进行交流、分享心得等活动，同时在分享成功的情况下，还可获得优惠券等奖励，也可以通过ar互动游戏等获得优惠券等奖励，通过分享即可领取使用。一方面商家通过向客户分发优惠券从而扩展自己的品牌知名度；另一方面，增强购物趣味，在交流娱乐的同时获得商家优惠，使客户以更大的优惠度购买产品。

实施例三

如图6和图7，本实施例与实施例一或实施例二类似，不同之处在于，本实施例是一种为实现实施例一或实施例二的基于商标图形识别并互动的方法的基于商标图形识别并互动的系统，包括图像识别模块1、显示模块2和通信模块3的客户端，其特征在于，所述的客户端还包括交互模块4，所述的交互模块4通过通信模块3连接于云平台5，其中，

图像识别模块1：用于识别商标图形，并将通过识别商标图形获得的商标图形信息传于交互模块4进行处理；

显示模块2：触摸显示屏，用于接收用户的接触指令，并显示由交互模块4发来的互动内容，该互动内容包括互动过程和互动结果；

交互模块4：用于供用户进行二维交互和/或三维交互；通过处理接触指令以获取互动指令，并根据商标图形信息和互动指令通过ar增强现实技术合成互动内容；

通信模块3：用于根据交互模块4发送的通信信号与云平台5进行通信；

云平台5：用于存储商标图形和每个商标图形对应的商标信息，以及根据交互模块4通过通信模块3发来的接触指令向交互模块4发送调取信息。

进一步地，交互模块4包括用于对商标图形信息进行算法分析处理的算法模块41，且该算法模块41为susan角点检测算法模块；还包括供用户选择的商标详情模块42、收藏模块43和分享模块44，且其中商标详情模块42又包括产品ar展示模块421和/或品牌ar展示模块422；还包括用于切换各个界面的切换模块45，当然产品ar展示模块421可通过切换模块直接切换到品牌ar展示模块422，同样地，品牌ar展示模块422也可以通过切换模块切换到的产品ar展示模块421。

优选地，产品ar展示模块421包括ar互动单元、产品简介单元和选择购买单元中的任意一种或多种的组合；品牌ar展示模块422包括旗舰店单元、品牌信息单元、品牌圈单元和品牌活动单元中的任意一种或多种的组合。ar互动单元可供用户进行场景融合、放大缩小、拆解和换颜色/包装等操作，产品简介单元向用户介绍产品信息和显示客户评论，选择购买单元可供用户进行购买操作。

本文中所描述的具体实施例仅仅是对本发明精神作举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。

尽管本文较多地使用了图像识别模块1；显示模块2；通信模块3；交互模块4；算法模块41；商标详情模块42；产品ar展示模块421；品牌ar展示模块422；收藏模块43；分享模块44；切换模块45；云平台5等术语，但并不排除使用其它术语的可能性。使用这些术语仅仅是为了更方便地描述和解释本发明的本质；把它们解释成任何一种附加的限制都是与本发明精神相违背的。