首页> 中国专利> 使用虚拟相机的个性化购物商场系统

使用虚拟相机的个性化购物商场系统

摘要

所公开的是一种使用虚拟相机的个性化购物商场系统,其通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面,能够使得用户感觉仿佛他或她实际上在光顾线下商店并购物。

著录项

  • 公开/公告号CN106530028A

    专利类型发明专利

  • 公开/公告日2017-03-22

    原文格式PDF

  • 申请/专利权人 爱题埃克斯M2M株式会社;

    申请/专利号CN201610815428.0

  • 发明设计人 朴相烈;

    申请日2016-09-09

  • 分类号G06Q30/06;H04N13/02;

  • 代理机构北京度衡知识产权代理有限公司;

  • 代理人杨黎峰

  • 地址 韩国首尔市

  • 入库时间 2023-06-19 01:49:42

法律信息

  • 法律状态公告日

    法律状态信息

    法律状态

  • 2020-05-15

    授权

    授权

  • 2017-04-19

    实质审查的生效 IPC(主分类):G06Q30/06 申请日:20160909

    实质审查的生效

  • 2017-03-22

    公开

    公开

说明书

相关申请的交叉引用

该申请要求在韩国知识产权局于2015年9月9日提交的韩国专利申请No.10-2015-0127917、于2015年9月23日提交的韩国专利申请No.10-2015-1034902、于2016年1月19日提交的韩国专利申请No.10-2016-0006535、于2016年6月8日提交的韩国专利申请No.10-2016-0071101的优先权,其公开通过其完整引用合并到此。

技术领域

以下描述涉及与在线购物商场关联的技术,更具体地说,涉及使用虚拟相机的个性化购物商场系统。

背景技术

于2011年6月29日公开的韩国专利申请公开No.10-2011-0072846已经提出一种用于从输出自相机的图像剪切存在移动的部分或受关注的部分(例如人类面部或车辆号牌板)并且输出所剪切的部分的技术。

于2013年4月22日公开的韩国专利申请公开No.10-2013-0039652已经提出一种负载平衡技术,其用于搜索存储内容的两个或更多个子网,从两个或更多个所发现的子网当中选择提供根据网络状态所请求的内容的一个子网,选择提供所请求的内容的节点,并且将内容传送到用户。因此,在内容服务器将内容传送到用户的同时,可以从网络选择最佳服务器节点,以增加业务效率并且提供高质量实时流送服务。

本发明的发明人对用于使用图像剪切技术从一个物理相机所捕获的线下商店的图像创建具有不同兴趣区域(ROI)的虚拟相机并且流送包括虚拟相机的购物商场页面的技术进行了研究。

此外,本发明的发明人对用于使用图像剪切技术从通过依次连接多个物理相机所捕获的线下商店的图像所形成的的线下商店屏幕创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面的技术进行了研究。

此外,本发明的发明人对用于从包括3D对象的线下商店屏幕创建具有使用部署得彼此相邻并且被配置为实时捕获商店图像的多个物理相机所捕获的线下商店的各2D图像之间的立体视差检测到的3D对象定位为ROI的区域的多个不同虚拟相机并且流送包括虚拟相机的购物商场页面的技术进行了研究。

此外,本发明的发明人对用于从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机、提供包括所创建的虚拟相机的购物商场页面、并且发布而且然后发送购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像的流送负载的技术进行了研究。

发明内容

提供本发明内容以通过简化形式介绍以下在具体实施方式中进一步描述的构思的选择。本发明内容不意图标识所要求的主题内容的关键特征或必要特征,也不意图用作有助于确定所要求的主题内容的范围。

以下描述涉及提供一种使用虚拟相机的个性化购物商场系统,其从一个物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机,并且流送包括虚拟相机的购物商场页面。

以下描述还涉及一种使用虚拟相机的个性化购物商场系统,其从通过依次连接多个物理相机所捕获的线下商店的图像所形成的线下商店屏幕创建具有不同ROI的虚拟相机,并且流送包括虚拟相机的购物商场页面。

以下描述还涉及提供一种使用虚拟相机的个性化购物商场系统,其从包括3D对象的线下商店屏幕创建具有使用部署得彼此相邻并且被配置为实时捕获商店的图像的多个物理相机所捕获的线下商店的各2D图像之间的立体视差所检测到的3D对象定位为ROI的区域的多个不同虚拟相机,并且流送包括虚拟相机的购物商场页面。

以下描述还涉及提供一种用于使用虚拟相机的个性化购物商场页面的负载发布系统,其从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机,提供包括虚拟相机中的每一个的购物商场页面,并且发布而且流送购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像的负载。

在一个普通方面中,一种使用虚拟相机的个性化购物商场系统,包括:物理相机,被配置为:实时捕获线下商店的图像;图像处理装置,包括:图像接收单元,被配置为:接收所述物理相机所捕获的所述线下商店的图像;以及虚拟相机管理单元,被配置为:从所述图像接收单元接收到的所述线下商店的图像生成具有不同兴趣区域(ROI)的多个虚拟相机;以及虚拟相机,包括:ROI选择单元,被配置为:从所述物理相机所捕获的所述线下商店的图像选择ROI;ROI播放单元,被配置为:播放所述ROI选择单元所选择的ROI的图像;以及图像处理单元,被配置为:根据用户终端的操控来执行所述ROI播放单元所播放的ROI的图像的摇摄/倾斜(tilting)或放大/缩小处理。

可以提供多个所述物理相机。

所述相机管理单元可以通过依次连接所述多个物理相机所捕获的所述线下商店的图像来形成整合式线下商店屏幕,并且可以从所形成的线下商店屏幕创建具有不同ROI的多个虚拟相机。

所述虚拟相机管理单元可以包括:连接管理单元,被配置为:处理所述用户终端的连接和断开;虚拟相机创建单元,被配置为:创建待提供给所述连接管理单元允许连接的用户终端的虚拟相机;购物商场页面创建单元,被配置为:形成购物商场页面,在该购物商场页面中,在虚拟相机区域中包括虚拟相机创建单元所创建的虚拟相机;购物商场页面提供单元,被配置为:向所述用户终端提供由所述购物商场页面创建单元所生成的、在虚拟相机区域中包括所述虚拟相机的所述购物商场页面;以及控制权限分配单元,被配置为:将用于控制由所述购物商场页面提供单元所提供的所述购物商场页面中所包括的所述虚拟相机的权限分配给所述用户终端。

所述用于控制所述虚拟相机的权限可以是对在虚拟相机屏幕上摇摄/倾斜或放大/缩小的授权。

所述购物商场页面创建单元所创建的所述购物商场页面可以包括:对管理者终端所上传的感兴趣产品(POI)的图像进行注册的POI区域。

所述购物商场页面创建单元所创建的所述购物商场页面可以包括处理管理者终端与所述用户终端之间的视频交谈的视频交谈区域。

所述购物商场页面创建单元所创建所述购物商场页面可以包括提供线下商店信息的商店信息区域。

所述虚拟相机可以还包括仿真式摇摄/倾斜/变焦处理单元,被配置为:对所述图像处理单元输出虚拟相机控制命令,以根据用于摇摄/倾斜或放大/缩小的操控信号通过软件在所述虚拟相机区域的范围中在由所述ROI播放单元所播放的ROI图像上进行摇摄/倾斜或放大/缩小。

所述虚拟相机可以还包括光学摇摄/倾斜/变焦处理单元,被配置为:对所述物理相机输出物理相机驱动命令,以当所述ROI播放单元所播放的所述ROI图像超出所述虚拟相机区域的范围时摇摄/倾斜所述物理相机或使所述物理相机进行(物像)放大/缩小。

所述虚拟相机可以还包括:设置信息存储单元,被配置为:存储虚拟相机设置信息;以及虚拟相机设置单元,被配置为:从用户接收所述虚拟相机设置信息。

所述虚拟相机设置单元可以将初始ROI位置、ROI大小、分辨率、质量、压缩格式和虚拟相机区域图案中的至少一个设置为所述虚拟相机设置信息。

所述图像处理单元可以包括:存储器,被配置为:存储所述物理相机所捕获的所述商店图像;ROI提取单元,被配置为:从所述相机设置信息中所包括的所述存储器中所存储的所述商店图像提取所述ROI选择单元所选择的ROI的ROI大小化图像(ROI sized image);图像比例器,被配置为:将所述ROI提取单元所提取的所述ROI图像转换为所述相机设置信息中所包括的分辨率;以及编解码器,被配置为:以所述相机设置信息中所包括的所述压缩格式来压缩经所述图像比例器转换的所述ROI图像。

所述图像处理单元可以还包括帧率改变单元,被配置为:将帧率改变为适合于所述相机设置信息中所包括的所述质量。

所述图像处理单元可以从所述ROI图像提取背景对象和前景对象,并且执行处理,从而通过ROI播放单元播放已经移除所述前景对象的、仅包括所述背景对象的ROI的图像。

所述图像处理单元可以从所述ROI图像识别人,并且对所识别的人的面部执行掩蔽处理。

所述ROI选择单元所选择的ROI可以彼此重叠。

所述图像处理装置可以还包括:复用单元,被配置为:将所述多个虚拟相机所播放的所述ROI图像转换为源自具有相同网络地址的不同端口的分组图像信号,并且将所述分组图像信号复用为单个分组图像流;以及图像发送单元,被配置为:通过单个物理层将通过所述复用单元进行复用所获得的所述单个分组图像流发送到所述用户终端。

所述虚拟相机管理单元可以还包括控制权限收回单元,被配置为:收回被分配给所述连接管理单元允许断开的用户终端的虚拟相机控制权限。

所述多个物理相机可以按行安装。

所述多个物理相机可以按径向图案安装。

所述虚拟相机管理单元可以连接线下商店的图像,从而图像彼此部分地重叠。

根据以下具体实施方式、附图和权利要求,其它特征和方面将变得显然。

附图说明

图1是示出根据本发明第一实施例的使用虚拟相机的个性化购物商场系统的框图。

图2是示出根据本发明第二实施例的使用虚拟相机的个性化购物商场系统的框图。

图3是示出图2所示的使用虚拟相机的个性化购物商场系统的物理相机的商店屏幕和安装布局的示例的视图。

图4是示出图2所示的使用虚拟相机的个性化购物商场系统的物理相机的商店屏幕和安装布局的另一示例的视图。

图5是示出根据本发明第三实施例的使用虚拟相机的个性化购物商场系统的框图。

图6是示出图5所示的使用虚拟相机的个性化购物商场系统的物理相机的安装布局的示例的视图。

图7是示出根据本发明第四实施例的使用虚拟相机的个性化购物商场系统的框图。

图8是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的图像处理装置的虚拟相机管理单元的框图。

图9是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的图像处理装置所创建的购物商场页面的示例的框图。

图10是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的虚拟相机的框图。

图11是示出图1所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

图12是示出图2所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

图13是示出图5所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

图14是示出图7所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

图15是示出图10所示的虚拟相机所执行的兴趣区域(ROI)提取过程的示例的流程图。

贯穿附图和详细描述,除非另外描述,否则相同附图标号将理解为指代相同要素、特征和结构。为了清楚、说明和方便,这些要素的相对大小和描述可以夸大。

具体实施方式

提供以下描述以协助读者获取在此所描述的方法、装置和/或系统的全面理解。相应地,在此所描述的方法、装置和/或系统的各种改变、修改和等同将建议给本领域技术人员。此外,为了增加清楚性和简明性,可省略公知功能和构造的描述。

下文中,将参照附图通过示例性实施例详细描述本发明以供本领域技术人员容易地理解并且实施。

在以下描述中,当有关的公知功能或配置的详细描述确定为不必要地模糊本发明的重要点时,将省略详细描述。

此外,在此所使用的术语是考虑它们在本发明示例性实施例中的功能而定义的,并且因此可以取决于用户、操作者的意图或惯例而改变。相应地,应基于该说明书的以下总体描述而定义术语。

图1是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的框图。如图1所示,根据本发明该实施例的使用虚拟相机的个性化购物商场系统包括一个物理相机100和图像处理装置200。

图2是示出根据本发明第二实施例的使用虚拟相机的个性化购物商场系统的框图。如图2所示,根据本发明该实施例的使用虚拟相机的个性化购物商场系统包括多个物理相机100和图像处理装置200。

图3是示出图2所示的使用虚拟相机的个性化购物商场的物理相机的商店屏幕和安装布局的示例的视图。如图3所示,多个物理相机100可以按行安装。

图4是示出图2所示的使用虚拟相机的个性化购物商场的物理相机的商店屏幕和安装布局的另一示例的视图。如图4所示,物理相机100可以按径向图案安装。

图5是示出根据本发明第三实施例的使用虚拟相机的个性化购物商场系统的框图。如图5所示,根据本发明该实施例的使用虚拟相机的个性化购物商场系统包括部署得彼此相邻的多个物理相机100和图像处理装置200。

图6是示出图5所示的使用虚拟相机的个性化购物商场的物理相机的安装布局的示例的视图。如图6所示,部署得彼此相邻的多个物理相机100可以安装在四个方向上。

图7是示出根据本发明第四实施例的使用虚拟相机的个性化购物商场系统的框图。如图7所示,根据本发明该实施例的使用虚拟相机的个性化购物商场系统包括物理相机100、图像处理装置200、图像处理装置200、本地服务器300以及专用流送服务器400。

相机100安装在线下商店中,并且被配置为:实时捕获线下商店的图像。例如,相机100可以包括普通高分辨率相机、全景相机、鱼眼镜头相机等。

图像处理装置200从物理相机100所捕获的线下商店的图像创建具有不同的兴趣区域(ROI)的多个虚拟相机,形成多个购物商场页面并且将所形成的购物商场页面提供给用户终端,其中在所述购物商场页面中,在虚拟相机区域中包括所述多个虚拟相机。

在此,具有不同ROI的虚拟相机是从线下商店的图像剪切针对每个用户所个性化的不同ROI的图像并且播放所剪切的图像的软件模块。

本地服务器300向用户终端流送图像处理装置200已经提供给用户终端的购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像。

当本地服务器300的流送负载超过阈值时,专用流送服务器400而非本地服务器300发布用于购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像的流送负载,并且执行流送。

图8是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的图像处理装置的虚拟相机管理单元的框图。图像处理装置200包括图像接收单元210和虚拟相机管理单元220。

(第一实施例)

图像接收单元210接收物理相机100所捕获的线下商店的图像。

虚拟相机管理单元220从图像接收单元210接收到的线下商店的图像创建具有不同ROI的多个虚拟相机。

虚拟相机管理单元220包括连接管理单元221、虚拟相机创建单元222、购物商场页面创建单元223、购物商场页面提供单元224以及控制权限分配单元225。

连接管理单元221处理用户终端的连接和断开。例如,连接管理单元221可以关于从已经请求对图像处理装置200的连接的用户终端录入的用户ID和密码搜索成员注册DB(未示出),以处理用户终端的连接。

根据来自已经连接到图像处理装置200的用户终端的断开请求,连接管理单元221可以处理用户终端的断开。在此,用户终端可以是个人计算机(PC)或移动终端(例如智能电话)。

虚拟相机创建单元222创建待提供给连接管理单元221允许连接的用户终端的虚拟相机。例如,虚拟相机创建单元222可以从接收到的线下商店的图像创建具有不同ROI的多个虚拟相机。

在此,虚拟相机是稍后将详细描述的从线下商店的图像剪切用户有兴趣的特定ROI的图像并且播放所剪切的图像的软件模块。

购物商场页面创建单元223形成虚拟相机区域包括虚拟相机创建单元222所创建的虚拟相机的购物商场页面。在此,购物商场页面可以还包括对管理者终端(未示出)所上传的感兴趣产品(POI)的图像进行注册的感兴趣产品(POI)区域、处理管理者终端与用户终端之间的视频交谈的视频交谈区域、提供线下商店信息的商店信息区域等。

购物商场页面提供单元224向用户终端提供由购物商场页面创建单元223所创建的、在虚拟相机区域中包括虚拟相机的购物商场页面。

当购物商场页面提供给用户终端时,购物商场页面的虚拟相机区域中所包括的虚拟相机实时流送实际线下商店的ROI图像。

用户于在线观看虚拟相机实时流送的线下商店的ROI图像的同时感觉仿佛他或她实际上正光顾线下商店并购物。

控制权限分配单元225对用户终端分配用于控制购物商场页面提供单元224所提供的购物商场页面中所包括的虚拟相机的权限。

在此,虚拟相机控制权限可以是对在虚拟相机屏幕上摇摄/倾斜或放大/缩小的授权。虚拟相机屏幕上的摇摄/倾斜或放大/缩小并非物理操作控制,而是软件处理(例如屏幕的上、下、左或右移动或增大/减小)。

例如,当手指在已经被分配了控制权限的用户终端的触摸屏幕上触摸并且上、下、左或右移动时,摇摄/倾斜虚拟相机屏幕的事件可以产生,因此移动ROI。因此,线下商店的另一区域的图像可以得以流送并且由虚拟相机播放。

作为另一示例,当两个手指在已经被分配了控制权限的用户终端的触摸屏幕上朝向或远离彼此移动时,虚拟相机屏幕上的放大/缩小产生,并且因此,ROI可以增大或减小。

每个用户对提供给他或她自身的用户终端的购物商场页面中所包括的虚拟相机执行独立控制,并且接收他或她有兴趣的ROI的图像。因此,对于每个用户终端播放针对每个用户而不同的个性化ROI图像。

使用该实现方式可以通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

(第二实施例)

图像接收单元210接收多个物理相机100所捕获的线下商店的图像。

虚拟相机管理单元220通过依次连接图像接收单元210接收到的线下商店的图像来形成整合式线下商店屏幕,并且从所形成的线下商店屏幕创建具有不同ROI的多个虚拟相机。

在此情况下,虚拟相机管理单元220可以连接线下商店的图像,以形成线下商店屏幕,从而图像彼此部分地重叠。当进行连接从而线下商店的图像彼此部分地重叠时,可以防止漏掉的区域。

虚拟相机管理单元220包括连接管理单元221、虚拟相机创建单元222、购物商场页面创建单元223、购物商场页面提供单元224以及控制权限分配单元225。

连接管理单元221处理用户终端的连接和断开。例如,连接管理单元221可以关于从请求连接到图像处理装置200的用户终端录入的用户ID和密码搜索成员注册DB(未示出),以处理用户终端的连接。

根据来自已经连接到图像处理装置200的用户终端的断开请求,连接管理单元221可以处理用户终端的断开。在此,用户终端可以是PC或移动终端(例如智能电话)。

虚拟相机创建单元222创建待提供给连接管理单元221允许连接的用户终端的虚拟相机。例如,虚拟相机创建单元222可以通过依次连接接收到的线下商店的图像来形成整合式线下商店屏幕,并且可以从所形成的线下商店屏幕创建具有不同ROI的多个虚拟相机。

在此,虚拟相机是稍后将详细描述的从线下商店的图像剪切用户有兴趣的特定ROI的图像并且播放所剪切的图像的软件模块。

购物商场页面创建单元223形成:在虚拟相机区域中包括由虚拟相机创建单元222所创建的虚拟相机的购物商场页面。在此,购物商场页面可以还包括对管理者终端(未示出)所上传的感兴趣产品(POI)的图像进行注册的POI区域、处理管理者终端与用户终端之间的视频交谈的视频交谈区域、提供线下商店信息的商店信息区域等。

购物商场页面提供单元224对用户终端提供由购物商场页面创建单元223所创建的、在虚拟相机区域中包括虚拟相机的购物商场页面。

当购物商场页面提供给用户终端时,购物商场页面的虚拟相机区域中所包括的虚拟相机实时流送实际线下商店的ROI图像。

用户于在线观看虚拟相机实时流送的线下商店的ROI图像的同时感觉仿佛他或她实际上正光顾线下商店并购物。

控制权限分配单元225对用户终端分配用于控制购物商场页面提供单元224所提供的购物商场页面中所包括的虚拟相机的权限。

在此,虚拟相机控制权限可以是对在虚拟相机屏幕上摇摄/倾斜或放大/缩小的授权。虚拟相机屏幕的摇摄/倾斜或其上的放大/缩小并非物理操作控制,而是屏幕的上、下、左或右移动或增大/减小的软件处理。

例如,当手指在已经被分配了控制权限的用户终端的触摸屏幕上触摸并且上、下、左或右移动时,摇摄/倾斜虚拟相机屏幕的事件可以产生,因此移动ROI。因此,线下商店的另一区域的图像可以得以流送并且由虚拟相机播放。

作为另一示例,当两个手指在已经被分配了控制权限的用户终端的触摸屏幕上朝向或远离彼此移动时,虚拟相机屏幕上的放大/缩小可以产生,因此增大或减小ROI。

每个用户对提供给他或她自身的用户终端的购物商场页面中所包括的虚拟相机执行独立控制,并且接收他或她有兴趣的ROI的图像。因此,对于每个用户终端播放针对每个用户而不同的个性化ROI图像。

使用该实现方式可以通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

(第三实施例)

图像接收单元210接收部署得彼此相邻的多个物理相机100所捕获的线下商店的二维(2D)图像。

虚拟相机管理单元220使用图像接收单元210接收到的线下商店的各2D图像之间的立体视差来检测3D对象,形成包括检测到的3D对象的线下商店屏幕,并且从所形成的线下商店屏幕创建具有3D对象定位为ROI的区域的多个不同的虚拟相机。

在此情况下,虚拟相机管理单元220所形成的线下商店屏幕可以是通过组合安装在四个方向上的多个物理相机100当中的安装在一个方向上的多个物理相机100实时捕获的图像所形成的线下商店屏幕。

作为使用归因于接收归因于左眼与右眼之间的位置差异而产生的不同图像的人类视觉系统以及从不同图像识别三维形状的大脑而创建立体效果以感受到距离感的原理的3D图像处理技术的用于使用立体视差来检测3D对象的立体视觉技术是在提交该专利申请之前公知的技术。因此,将省略其详细描述。

虚拟相机管理单元220包括连接管理单元221、虚拟相机创建单元222、购物商场页面创建单元223、购物商场页面提供单元224以及控制权限分配单元225。

连接管理单元221处理用户终端的连接和断开。例如,连接管理单元221可以关于从请求连接到图像处理装置200的用户终端录入的用户ID和密码搜索成员注册DB(未示出),以处理用户终端的连接。

根据来自已经连接到图像处理装置200的用户终端的断开请求,连接管理单元221可以处理用户终端的断开。在此,用户终端可以是PC或移动终端(例如智能电话)。

虚拟相机创建单元222创建待提供给连接管理单元221允许连接的用户终端的虚拟相机。例如,虚拟相机创建单元222可以使用接收到的线下商店的各2D图像之间的立体视差来检测3D对象,形成包括检测到的3D对象的线下商店屏幕,并且从所形成的线下商店屏幕创建具有3D对象定位为ROI的区域的多个不同的虚拟相机。

在此,虚拟相机是稍后将详细描述的从线下商店屏幕剪切不同3D对象所位于的个性化ROI的图像并且播放所剪切的图像的软件模块。

购物商场页面创建单元223形成:在虚拟相机区域中包括虚拟相机创建单元222所创建的虚拟相机的购物商场页面。在此,购物商场页面可以还包括对管理者终端(未示出)所上传的感兴趣产品(POI)的图像进行注册的POI区域、处理管理者终端与用户终端之间的视频交谈的视频交谈区域、提供线下商店信息的商店信息区域等。

购物商场页面提供单元224对用户终端提供由购物商场页面创建单元223所创建的、在虚拟相机区域中包括虚拟相机的购物商场页面。

当购物商场页面提供给用户终端时,购物商场页面的虚拟相机区域中所包括的虚拟相机实时流送实际线下商店的ROI图像。在此情况下,立体视差检测到的3D对象得以在虚拟相机区域中呈现并且显示。

用户于在线观看位于虚拟相机实时流送的线下商店的ROI图像中的3D对象的同时感觉仿佛他或她实际上正光顾线下商店并购物。

控制权限分配单元225对用户终端分配用于控制购物商场页面提供单元224所提供的购物商场页面中所包括的虚拟相机的权限。

在此,虚拟相机控制权限可以是用于旋转、放大/缩小或摇摄/倾斜得以呈现并且显示的3D对象的授权。虚拟相机屏幕上所呈现并且显示的3D对象的旋转、其上的放大/缩小或其摇摄/倾斜并非物理操作控制,而是屏幕的旋转、增大/减小或上、下、左或右移动的软件处理。

例如,当手指在已经被分配了控制权限的用户终端的触摸屏幕上触摸并且上、下、左或右移动时,旋转3D对象的事件可以产生,因此在对应方向上旋转虚拟相机屏幕上所呈现并且显示的3D对象。

作为另一示例,当两个手指在已经被分配了控制权限的用户终端的触摸屏幕上朝向或远离彼此移动时,3D对象上的放大/缩小可以产生,因此增大/减小虚拟相机屏幕上所呈现并且显示的3D对象。

每个用户对提供给他或她自身的用户终端的购物商场页面中所包括的虚拟相机执行独立控制,并且接收包括他或她有兴趣的3D对象的区域的图像。因此,对于每个用户终端播放针对每个用户而不同的个性化ROI图像。

使用这种实现方式可以通过从包括3D对象的线下商店屏幕创建具有使用部署得彼此相邻并且被配置为实时捕获商店图像的多个物理相机所捕获的线下商店的各2D图像之间的立体视差检测到的3D对象定位为ROI的区域的多个不同的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

在此,每个用户可以执行控制,以旋转、放大/缩小或摇摄/倾斜通过虚拟相机所呈现并且显示的3D对象,因此关于使用单个相机所流送的图像克服仅可以受控于一个人的图像的限制。

(第四实施例)

图像接收单元210接收物理相机100所捕获的线下商店的图像。

虚拟相机管理单元220从图像接收单元210接收到的线下商店的图像创建具有不同ROI的多个虚拟相机。

虚拟相机管理单元220包括连接管理单元221、虚拟相机创建单元222、购物商场页面创建单元223、购物商场页面提供单元224以及控制权限分配单元225。

连接管理单元221处理用户终端的连接和断开。例如,连接管理单元221可以关于从请求连接到图像处理装置200的用户终端录入的用户ID和密码搜索成员注册DB(未示出),以处理用户终端的连接。

根据来自已经连接到图像处理装置200的用户终端的断开请求,连接管理单元221可以处理用户终端的断开。在此,用户终端可以是PC或移动终端(例如智能电话)。

虚拟相机创建单元222创建待提供给连接管理单元221允许连接的用户终端的虚拟相机。例如,虚拟相机创建单元222可以从接收到的线下商店的图像创建具有不同ROI的多个虚拟相机。

在此,虚拟相机是稍后将详细描述的从线下商店的图像剪切用户有兴趣的特定ROI的图像并且播放所剪切的图像的软件模块。

购物商场页面创建单元223形成:在虚拟相机区域中包括虚拟相机创建单元222所创建的虚拟相机的购物商场页面。在此,购物商场页面可以还包括:对管理者终端(未示出)所上传的感兴趣产品(POI)的图像进行注册的POI区域、处理管理者终端与用户终端之间的视频交谈的视频交谈区域、提供线下商店信息的商店信息区域等。

购物商场页面提供单元224对用户终端提供由购物商场页面创建单元223所创建的、在虚拟相机区域中包括虚拟相机的购物商场页面。

当购物商场页面提供给用户终端时,购物商场页面的虚拟相机区域中所包括的虚拟相机实时流送实际线下商店的ROI图像。

用户于在线观看虚拟相机实时流送的线下商店的ROI图像的同时感觉仿佛他或她实际上正光顾线下商店并购物。

控制权限分配单元225对用户终端分配用于控制购物商场页面提供单元224所提供的购物商场页面中所包括的虚拟相机的权限。

在此,虚拟相机控制权限可以是对在虚拟相机屏幕上摇摄/倾斜或放大/缩小的授权。虚拟相机屏幕的摇摄/倾斜或其上的放大/缩小并非物理操作控制,而是屏幕的上、下、左或右移动或增大/减小的软件处理。

例如,当手指在已经被分配了控制权限的用户终端的触摸屏幕上触摸并且上、下、左或右移动时,摇摄/倾斜虚拟相机屏幕的事件可以产生,因此移动ROI。因此,线下商店的另一区域的图像可以得以流送并且由虚拟相机播放。

作为另一示例,当两个手指在已经被分配了控制权限的用户终端的触摸屏幕上朝向或远离彼此移动时,虚拟相机屏幕上的放大/缩小可以产生,因此增大或减小ROI。

每个用户对提供给他或她自身的用户终端的购物商场页面中所包括的虚拟相机执行独立控制,并且接收他或她有兴趣的ROI的图像。因此,对于每个用户终端播放针对每个用户而不同的个性化ROI图像。

本地服务器300向用户终端流送图像处理装置200已经提供给用户终端的购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像。

当本地服务器300的流送负载超过阈值时,专用流送服务器400而非本地服务器300发布用于购物商场页面的虚拟相机区域中所包括的虚拟相机所重新播放的ROI图像的流送负载,并且执行流送。

也就是说,当图像处理装置200将购物商场页面提供给用户终端时,本地服务器300或专用流送服务器400实时流送购物商场页面的虚拟相机区域中所包括的虚拟相机所捕获的实际线下商店的ROI图像。

在此情况下,取决于本地服务器300的流送负载,虚拟相机所播放的ROI图像由本地服务器300直接地或通过专用流送服务器400间接地得以流送。

根据本发明该实施例的使用虚拟相机的个性化购物商场系统可以还包括购物商场管理服务器500。购物商场管理服务器500监控本地服务器300的流送负载,以确定本地服务器300的流送负载是否超过阈值。当确定本地服务器300的流送负载超过阈值时,购物商场管理服务器从本地服务器300收回流送控制权限,并且将流送控制权限传送到专用流送服务器400。

例如,可以通过检测每秒可处理的会话(SPS)、每秒可处理的分组(PPS)、每秒可处理的交易(TPS)等来执行确定本地服务器的流送负载是否超过阈值。

当流送控制权限传送到专用流送服务器400并且本地服务器300的流送负载也掉落到阈值之下时,购物商场管理服务器500从专用流送服务器400收回流送控制权限,并且将流送控制权限返回到本地服务器300。

通过这种实现方式,用户于在线观看虚拟相机实时流送的线下商店的ROI图像的同时感觉仿佛他或她实际上正光顾线下商店并购物。

此外,可以通过发布用于购物页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像的流送负载并且进行流送来以高速度提供购物商场页面。

将参照图9描述根据第一实施例至第四实施例所创建的购物商场页面。图9是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的图像处理装置所创建的购物商场页面的示例的框图。可见,购物商场页面600中包括虚拟相机区域610、感兴趣产品(POI)区域620、视频交谈区域630以及商店信息区域640。

根据本发明的附加方面,图像处理装置200可以还包括复用单元230以及图像发送单元240。

复用单元230将多个虚拟相机所播放的ROI图像转换为源自具有相同网络地址的不同端口的分组图像信号,并且将分组图像信号复用为单个分组图像流。

图像发送单元240通过单个物理层将通过复用单元230进行复用所获得的单个分组图像流发送到用户终端。

例如,多个虚拟相机所输出的ROI图像信号可以是具有差别网络地址的分组信号。在此情况下,为了执行复用,复用单元230在使用网络地址转译(NAT)功能将ROI图像信号的网络地址转换为相同网络地址的同时将不同的端口编号分配给多个虚拟相机所输出的ROI图像信号。

例如,多个虚拟相机所输出的ROI图像信号可以是图像流数据。在此情况下,为了执行复用,复用单元230可以将多个虚拟相机所输出的ROI图像信号转换为具有相同网络地址和不同端口编号的分组。

例如,“160,245,200,1:8091”可以分配给一个虚拟相机所输出的ROI图像信号的地址,“160,245,200,1:8092”可以分配给另一虚拟相机所输出的RIO图像信号的地址。可以通过作为单个物理层PHY的图像发送单元240输出所复用的具有相同IP地址的图像分组。

根据本发明附加方面,虚拟相机管理单元220可以还包括控制权限收回单元226。控制权限收回单元226收回被分配给连接管理单元221允许断开的用户终端的虚拟相机控制权限。

也就是说,在该实施例中,当控制权限分配单元225已经分配虚拟相机控制权限的用户终端断开时,控制权限收回单元226收回已经分配给用户终端的虚拟相机控制权限。

通过该实现方式,本发明可以通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

此时,由于每个用户可以对于虚拟相机控制摇摄/倾斜控制,因此用户的单独ROI可以彼此重叠,因此对于使用单个相机所流送的图像克服仅可以受控于一个人的摇摄/倾斜的限制。

图10是示出根据本发明实施例的使用虚拟相机的个性化购物商场系统的虚拟相机的框图。如图10所示,购物商场页面的虚拟相机区域中所包括的虚拟相机700包括ROI选择单元710、ROI播放单元720以及图像处理单元730。

对于第一实施例、第二实施例和第四实施例,ROI选择单元710从物理相机100所捕获的线下商店的图像当中选择ROI。例如,当显示线下商店的流行产品的区域存储为初始ROI位置时,ROI选择单元710可以选择与初始ROI位置对应的区域作为ROI。

对于第三实施例,ROI选择单元710从线下商店屏幕选择特定3D对象定位为ROI的区域。例如,ROI选择单元710可以关于使用定位得彼此相邻的多个物理相机100所捕获的线下商店的各2D图像之间的立体视差检测到的3D对象通过用户选择来选择特定3D对象定位为ROI的区域。

对于第一实施例、第二实施例和第四实施例,ROI播放单元720播放ROI选择单元710所选择的ROI的图像。因此,用户于在线观看虚拟相机实时流送的线下商店的ROI图像的同时感觉仿佛他或她实际上正光顾线下商店并购物而且享受在线购物。

对于第三实施例,ROI播放单元720呈现并且显示ROI选择单元710所选择的ROI的3D对象。因此,用户于在线观看虚拟相机实时呈现并且显示的ROI的3D对象的同时感觉仿佛他或她实际上正光顾线下商店并购物而且享受在线购物。

对于第一实施例、第二实施例和第四实施例,根据通过用户终端的操控,图像处理单元730处理ROI播放单元720所播放的ROI的图像的摇摄/倾斜或放大/缩小。

对于第三实施例,根据通过用户终端的操控,图像处理单元730处理ROI播放单元720所呈现并且播放的3D对象的旋转、其上的放大/缩小或其摇摄/倾斜。

当在ROI中存在重叠的多个3D对象时,ROI播放单元720可以显示从所述多个3D对象当中选择的特定3D对象。也就是说,当存在与待呈现并且显示为前景对象或背景对象的3D兴趣对象重叠的另一3D对象时,ROI播放单元720可以仅选择待呈现并且显示的3D兴趣对象并且显示所选择的3D对象。因此,ROI选择单元710可以选择待呈现并且显示的3D兴趣对象。

对于第一实施例、第二实施例和第四实施例,凭借通过已经被分配了虚拟相机控制权限的用户终端操控虚拟相机屏幕的摇摄/倾斜或其上的放大/缩小来改变ROI选择单元710所选择的并且由ROI播放单元720播放的ROI图像。

根据通过用户终端操控虚拟相机屏幕的摇摄/倾斜或其上的放大/缩小,图像处理单元730处理ROI图像的摇摄/倾斜或其上的放大/缩小。

对于第三实施例,凭借通过已经被分配了虚拟相机控制权限的用户终端操控3D对象的旋转、其上的放大/缩小或其摇摄/倾斜来改变ROI选择单元710所选择的并且由ROI播放单元720播放的ROI图像。

根据通过用户终端操控3D对象的旋转、其上的放大/缩小或其摇摄/倾斜,图像处理单元730执行ROI图像中所包括的3D对象的旋转、其上的放大/缩小或其摇摄/倾斜。

根据本发明附加方面,虚拟相机700可以还包括仿真式摇摄/倾斜/变焦处理单元740。根据摇摄/倾斜或放大/缩小操控信号,仿真式摇摄/倾斜/变焦处理单元740对图像处理单元730输出虚拟相机控制命令,以通过软件在虚拟相机区域的范围内在ROI播放单元720所播放的ROI图像上进行摇摄/倾斜或放大/缩小。

当用户通过用户终端执行摇摄/倾斜或放大/缩小操控时,仿真式摇摄/倾斜/变焦处理单元740对图像处理单元730输出虚拟相机控制命令,以响应于用户操控而在ROI播放单元720所播放的ROI图像上进行摇摄/倾斜或放大/缩小,并且图像处理单元730通过软件在虚拟相机区域的范围内的ROI图像上进行摇摄/倾斜或放大/缩小,以改变ROI。

根据本发明附加方面,虚拟相机700可以还包括光学摇摄/倾斜/变焦处理单元750。当ROI播放单元720所播放的ROI图像超出虚拟相机区域的范围时,光学摇摄/倾斜/变焦处理单元750对物理相机100输出物理相机驱动命令,以摇摄/倾斜物理相机100或使得物理相机100放大/缩小。

关于通过仿真式摇摄/倾斜/变焦处理单元740通过软件控制摇摄/倾斜虚拟相机或使得虚拟相机放大/缩小存在限制。当ROI图像超出虚拟相机区域的范围时,通过软件控制摇摄/倾斜虚拟相机或使得虚拟相机放大/缩小变得不可能,物理相机100于是应直接受控为通过光学摇摄/倾斜/变焦处理单元750进行摇摄/倾斜或放大/缩小。

当ROI图像通过用户终端通过摇摄/倾斜或放大/缩小操控超出虚拟相机区域的范围时,光学摇摄/倾斜/变焦处理单元750对物理相机100输出物理相机驱动命令,以摇摄/倾斜物理相机100或使得物理相机100放大/缩小,并且物理相机100可以在超出虚拟相机区域的范围的ROI图像上进行摇摄/倾斜或放大/缩小,以改变ROI。

根据本发明附加方面,虚拟相机700可以还包括设置信息存储单元760和虚拟相机设置单元770。

设置信息存储单元760存储虚拟相机设置信息。例如,虚拟相机设置信息可以包括初始ROI位置、ROI大小、分辨率、质量、压缩格式以及虚拟相机区域图案中的至少一个。

虚拟相机设置单元770从用户接收虚拟相机设置信息,并且将虚拟相机设置信息存储在设置信息存储单元760中。例如,虚拟相机设置单元770可以将初始ROI位置、ROI大小、分辨率、质量、压缩格式和虚拟相机区域图案中的至少一个设置为虚拟相机设置信息。

根据本发明附加方面,图像处理单元730可以包括存储器731、ROI提取单元732、图像比例器733和编解码器734。

存储器731存储物理相机所捕获的商店图像。例如,存储器731可以是缓冲物理相机100所捕获的商店图像并且按帧存储商店图像的半导体存储器。在此情况下,存储器731中所存储的商店图像的大小可以小于或等于物理相机所捕获的商店图像的大小。

ROI提取单元732根据相机设置信息中所包括的ROI大小从存储器731中所存储的商店图像提取ROI选择单元710所选择的ROI的图像。

例如,ROI提取单元732可以实时从存储器中所缓冲并且存储的商店图像帧提取具有ROI大小的ROI图像。在此,ROI大小可以小于存储器731中所缓冲并且存储的商店图像的大小。

图像比例器733将ROI提取单元732所提取的ROI的图像转换为相机设置信息中所包括的分辨率。例如,当相机设置信息中所包括的分辨率为640*480时,图像比例器733可以将ROI图像转换为640*480的分辨率。

编解码器734以相机设置信息中所包括的压缩格式来压缩图像比例器733所转换的ROI图像。例如,编解码器734可以通过特定格式(例如运动图像专家组(MPEG)-2)来压缩ROI图像,并且输出压缩的ROI图像。

根据本发明附加方面,图像处理单元730可以还包括帧率改变单元735。帧率改变单元735将ROI图像的帧率改变为适合于相机设置信息中所包括的质量。在此,相机设置信息中所包括的质量可以设置在多个等级中(例如,设置为高、中或低)。帧率改变单元735将帧率转换为相对高,从而ROI图像的质量可以设置为高。

根据本发明附加方面,图像处理单元730可以使用视频分析技术从ROI图像提取背景对象和前景对象,ROI播放单元720可以播放已经移除前景对象的仅包括背景对象的ROI图像。

例如,通过提供用于“仅播放背景图像”的菜单,当用户选择用于“仅播放背景图像”的菜单时,图像处理单元730可以播放已经移除前景对象的仅包括背景对象的ROI的图像。

在该实施例中,由于当人在商店中所显示的产品与相机之间移动或停留时可能无法看见产品,因此仅作为背景对象的产品通过移除作为前景对象的人而得以展示。

根据本发明附加方面,图像处理单元730可以从ROI图像识别人,并且对所识别的人的面部执行掩蔽处理。

例如,图像处理单元730可以识别出现在ROI中的多个对象当中的人,并且对所识别的人的面部执行掩蔽处理。

在该实施例中,可以通过对在线用户提供在线下商店处购物的消费者的面部受掩蔽以使得消费者不可标识的商店图像来保护个人信息。

将参照图11至图14描述如上所述根据本发明实施例的使用虚拟相机的个性化购物商场系统所执行的购物商场页面提供操作。

图11是示出图1所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

在步骤810中,首先,当用户终端连接时,图像处理装置创建待提供给用户终端的虚拟相机。

在步骤820中,图像处理装置形成:在虚拟相机区域中包括步骤810中所生成的虚拟相机的购物商场页面。

在步骤830中,图像处理装置对用户终端提供虚拟相机区域中包括虚拟相机的、步骤820中所形成的购物商场页面。

在步骤840中,图像处理装置将用于控制步骤830中所提供的购物商场页面中所包括的虚拟相机的权限分配给用户终端。

在步骤850中,由待提供给用户终端的购物商场页面的虚拟相机区域中所包括的虚拟相机播放由安装在线下商店中的物理相机实时捕获的线下商店的图像中的兴趣区域(ROI)的图像。

在步骤860中,根据已经被分配了虚拟相机控制权限的用户终端的虚拟相机区域中所包括的虚拟相机所播放ROI图像的用户的操控,执行关于ROI图像的摇摄/倾斜或放大/缩小操作。

通过该实现方式,本发明可以通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

图12是示出图2所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

在步骤910中,首先,当用户终端连接时,图像处理装置创建待提供给用户终端的虚拟相机。

在步骤920中,图像处理装置形成:在虚拟相机区域中包括步骤910中所生成的虚拟相机的购物商场页面。

在步骤930中,图像处理装置对用户终端提供在虚拟相机区域中包括虚拟相机的、步骤920中所形成的购物商场页面。

在步骤940中,图像处理装置将用于控制步骤930中所提供的购物商场页面中所包括的虚拟相机的权限分配给用户终端。

在步骤950中,待提供给用户终端的购物商场页面的虚拟相机区域中所包括的虚拟相机播放通过依次连接安装在线下商店中的多个物理相机实时捕获的线下商店的图像所形成的线下商店屏幕中的ROI的图像。

在步骤960中,根据已经被分配了虚拟相机控制权限的用户终端的虚拟相机区域中所包括的虚拟相机所播放ROI图像的用户的操控,执行关于ROI图像的摇摄/倾斜或放大/缩小操作。

通过该实现方式,本发明可以通过从通过依次连接多个物理相机所捕获的线下商店的图像所形成的线下商店屏幕创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

图13是示出提供图5所示的使用虚拟相机的个性化购物商场系统的操作的购物商场页面的示例的流程图。

在步骤1010中,首先,当用户终端连接时,图像处理装置创建待提供给用户终端的虚拟相机。

在步骤1020中,图像处理装置形成:在虚拟相机区域中包括步骤1010中所生成的虚拟相机的购物商场页面。

在此,购物商场页面的虚拟相机区域可以包括选自使用部署得彼此相邻的多个物理相机所捕获的线下商店的各2D图像之间的立体视差所检测的3D对象当中的特定3D对象。

在步骤1030中,图像处理装置向用户终端提供:在虚拟相机区域中包括虚拟相机的、步骤1020中所形成的购物商场页面。在此,通过购物商场页面中所包括的虚拟相机呈现并且显示3D对象。

在步骤1040中,图像处理装置将用于控制通过步骤1030中所提供的购物商场页面中所包括的虚拟相机所呈现并且显示的3D对象的权限分配给用户终端。

在步骤1050中,根据来自已经被分配了3D对象控制权限的用户终端的用户操控,图像处理装置控制通过虚拟相机所呈现并且显示的3D对象。

在此,3D对象的控制可以是虚拟相机所呈现并且显示的3D对象的旋转、其上的放大/缩小或其摇摄/倾斜。

通过这种实现方式,本发明可以通过从包括3D对象的线下商店屏幕创建具有使用部署得彼此相邻并且被配置为实时捕获商店图像的多个物理相机所捕获的线下商店的各2D图像之间的立体视差检测到的3D对象定位为ROI的区域的多个不同的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

图14是示出图7所示的使用虚拟相机的个性化购物商场系统的购物商场页面提供操作的示例的流程图。

在步骤1110中,首先,当用户终端连接时,图像处理装置创建待提供给用户终端的虚拟相机。

在步骤1120中,图像处理装置形成:在虚拟相机区域中包括步骤1110中所生成的虚拟相机的购物商场页面。

在步骤1130中,图像处理装置向用户终端提供在虚拟相机区域中包括虚拟相机的步骤1120中所形成的购物商场页面。

在步骤1140中,图像处理装置将用于控制步骤1130中所提供的购物商场页面中所包括的虚拟相机的权限分配给用户终端。

由待提供给用户终端的购物商场页面的虚拟相机区域中所包括的虚拟相机播放由安装在线下商店中的物理相机实时捕获的线下商店的图像中的ROI的图像。

在步骤1150中,取决于本地服务器的流送负载,虚拟相机所播放的ROI图像由本地服务器直接地或通过专用流送服务器间接地得以流送。

在步骤1160中,根据对已经被分配了虚拟相机控制权限的用户终端的虚拟相机区域中所包括的虚拟相机所播放ROI图像进行的用户操控,执行关于ROI图像的摇摄/倾斜或放大/缩小操作。

通过这种配置,本发明可以通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机,提供包括所创建的虚拟相机中的每一个的购物商场页面,并且发布购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像的流送负载来快速地提供使得用户感觉仿佛他或她正光顾线下商店并购物的购物商场页面。

将参照图15描述根据本发明实施例的使用虚拟相机的个性化购物商场系统的虚拟相机的ROI提取操作。图15是示出图10所示的虚拟相机所执行的ROI提取过程的示例的流程图。

在步骤1210中,首先,虚拟相机从用户接收虚拟相机设置信息,并且存储接收到的虚拟相机设置信息。例如,虚拟相机设置信息可以包括初始ROI位置、ROI大小、分辨率、质量、压缩格式以及虚拟相机区域图案中的至少一个。

在步骤1220中,虚拟相机将虚拟相机设置信息中所包括的初始ROI位置确定为ROI,以ROI大小从接收自物理相机的商店图像提取与ROI对应的部分,并且显示对应部分。

在步骤1230中,当用户执行摇摄/倾斜或放大/缩小的操控时,虚拟相机通过软件在虚拟相机区域的范围中在虚拟相机所播放的ROI的图像上进行摇摄/倾斜或放大/缩小。

在步骤1240中,当来自用户的摇摄/倾斜或放大/缩小的操控所播放的ROI图像超出虚拟相机区域的范围(物理相机捕获范围)时,虚拟相机对物理相机输出物理相机驱动命令,以摇摄/倾斜物理相机或使得物理相机进行放大/缩小。

如上所述,本发明可以通过从一个物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

此外,本发明可以通过从通过依次连接多个物理相机所捕获的线下商店的图像所形成的线下商店屏幕创建具有不同ROI的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

此外,本发明可以通过从包括3D对象的线下商店屏幕创建具有使用部署得彼此相邻并且被配置为实时捕获商店图像的多个物理相机所捕获的线下商店的各2D图像之间的立体视差检测到的3D对象定位为ROI的区域的多个不同的虚拟相机并且流送包括虚拟相机的购物商场页面来使得用户感觉仿佛他或她实际上正光顾线下商店并购物。

此外,本发明可以通过从物理相机所捕获的线下商店的图像创建具有不同ROI的虚拟相机,提供包括所创建的虚拟相机中的每一个的购物商场页面,并且发布购物商场页面的虚拟相机区域中所包括的虚拟相机所播放的ROI图像的流送负载来快速地提供使得用户感觉仿佛他或她正光顾线下商店并购物的购物商场页面。

线下商店线下商店

线下商店线下商店线下商店线下商店线下商店线下商店线下商店线下商店

虽然已经结合附图通过优选实施例描述了本发明,但显然,可以在不脱离所附权利要求所限定的本发明的范围的情况下进行各种修改。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号