图像编辑装置、图像编辑方法、图像编辑程序以及计算机可读取的记录介质

摘要

本发明提供一种图像编辑装置、图像编辑方法、图像编辑程序以及计算机可读取的记录介质，该图像编辑装置具有：输入部(103)，其接收图像数据的输入，该图像数据包含与日期时间有关的信息；获取与移动体移动的路径和时刻有关的信息的取得部(104)；以及关联部(105)，其根据由输入部(103)接收到的图像数据的与日期时间有关的信息和由取得部(104)获取的与路径和时刻有关的信息，将图像数据与地图信息关联起来。图像编辑装置按照时序或者路径顺序来自动编辑图像数据。

说明书

技术领域

本发明涉及编辑照片等的图像数据的图像编辑装置、图像编辑方法、图像编辑程序以及计算机可读取的记录介质。其中，本发明的使用不限于上述图像编辑装置、图像编辑方法、图像编辑程序以及计算机可读取的记录介质。

背景技术

近些年来，伴随数字相机(Digital Still Camera：DSC)和数字摄像机(Digital Video Camera：DVC)等的普及，提供了如下的电子相册(album)制作装置，该电子相册制作装置使用拍摄到的静止图像或运动图像的图像数据来制作所谓的电子相册，可以在网页等上容易地进行公开。通过这种电子相册制作装置可制成如下的电子相册。

具体而言，例如在与互联网连接的服务器内具有编辑数字图像数据而制作电子相册的程序软件，该服务器可以接收用数字相机拍摄到的图像数据、该图像的拍摄时间数据、移动终端所获得的位置数据和获取该位置数据时的时间数据，将这些接收到的数据分别关联起来，通过程序软件制作电子相册(例如参照下述专利文献1。)。

专利文献1：日本特开2002-183742号公报

发明内容

但在上述专利文献1中所述的电子相册制作装置中，由于通过服务器内的程序软件例如使图像数据的拍摄时刻和拍摄场所等关联起来制作电子相册，所以举出了必须确立与服务器之间的连接氛围，而且装置结构整体变得复杂的问题作为一例。

本发明的第一方面的图像编辑装置的特征在于，该图像编辑装置具有：输入单元，其接收图像数据的输入，该图像数据包含与日期时间有关的信息；获取与移动体移动的路径和时刻有关的信息的取得单元；以及关联单元，其根据由上述输入单元接收到的图像数据的与上述日期时间有关的信息和由上述取得单元获取到的与路径和时刻有关的信息，将上述图像数据与地图信息关联起来。

而且，本发明的第十方面的图像编辑方法的特征在于，该图像编辑方法包括：输入步骤，输入图像数据，该图像数据包含与日期时间有关的信息；获取与移动体移动的路径和时刻有关的信息的取得步骤；以及关联步骤，根据由上述输入步骤输入的图像数据的与上述日期时间有关的信息和由上述取得步骤获取的与路径和时刻有关的信息，将上述图像数据与地图信息关联起来。

并且，本发明的第十一方面的图像编辑程序的特征在于，该图像编辑程序使计算机执行第十方面所述的图像编辑方法。

另外，本发明的第十二方面的计算机可读取的记录介质的特征在于，该计算机可读取的记录介质记录有第十一方面所述的图像编辑程序。

附图说明

图1是表示实施方式的图像编辑装置的功能结构的一个例子的框图。

图2是表示实施方式的图像编辑装置的图像编辑处理步骤的一个例子的流程图。

图3是表示安装有实施例的图像编辑装置的车辆内部的一个例子的说明图。

图4是表示实施例的图像编辑装置的硬件结构的一个例子的框图。

图5是表示实施例的图像编辑装置的图像编辑部的内部结构的一个例子的框图。

图6是表示实施例的图像编辑装置的音频再现部的内部结构的一个例子的框图。

图7是表示实施例的图像编辑装置的图像编辑处理步骤的一个例子的流程图。

图8是表示实施例的图像编辑装置的图像编辑处理中的音频数据的其他关联处理步骤的一个例子的流程图。

图9是表示实施例的图像编辑装置的图像编辑处理中的音频数据的其他关联处理步骤的一个例子的流程图。

图10是表示实施例的图像编辑装置的图像编辑处理中的图像数据的分配处理步骤的一个例子的说明图。

图11是表示实施例的图像编辑装置的图像编辑处理的具体处理例的说明图。

符号说明

101摄影部；102集音部；103输入部；104取得部；105关联部；106显示部；107检测部；108控制部；109、414音频再现部；310图像编辑装置；412图像编辑部；510图像编辑处理部；610音频再现处理部

具体实施方式

下面参照附图详细说明本发明的图像编辑装置、图像编辑方法、图像编辑程序以及记录有该程序的计算机可读取的记录介质的优选实施方式。

(实施方式)

(图像编辑装置的功能性结构)

首先说明本发明的实施方式的图像编辑装置的内容。图1是表示本发明的实施方式的图像编辑装置的功能性结构的一个例子的框图。图1中，图像编辑装置构成为例如安装在车辆(包含四轮车、两轮车)等的移动体上，其包含摄影部101、集音部102、输入部103、取得部104、关联部105、显示部106、检测部107、控制部108、以及音频再现部109。

摄影部101拍摄图像。由摄影部101拍摄的图像可以举出拍摄了车辆的内部或者外部而得到的图像。该摄影部101构成为一体地或者可拆装地安装在图像编辑装置上。集音部102例如收集车辆内部的音频。通过集音部102收集的音频可以举出从车辆内部的声场收集到的音频。

输入部103接收包含与日期时间有关的信息(例如时间戳数据，timestamp data)在内的图像数据的输入。而且输入部103接收由摄影部101拍摄的图像的图像数据和由集音部102收集的音频的音频数据的输入。取得部104获取与车辆移动的路径和时刻有关的信息。另外，取得部104获取与车辆的动作有关的动作信息。该动作信息具体是指表示车辆的移动或者停止状态的信息，可以举出例如包含与车辆的速度有关的信息(速度信息、加速度信息、角速度信息等)、倾角信息、横向G(Gravity，重力加速度)信息和当前位置信息中的至少任一个在内的信息。

关联部105根据由输入部103接收到的图像数据的与日期时间有关的信息和由取得部104获得的与车辆的路径和时刻有关的信息以及动作信息，将图像数据与地图信息关联起来。通过关联部105的关联，确定由摄影部101所拍摄的图像数据是在何时在何地拍摄到的图像数据。

显示部106显示通过关联部105而关联起来的图像数据。在显示部106上可以以按照例如拍摄图像数据的时序、车辆通过的路径顺序配置的状态进行显示。检测部107检测由摄影部101所拍摄的图像的图像数据中所包含的图像影像的特征量和集音部102所收集的音频的音频数据所包含的音频参数的特征量。

图像影像的特征量具体可举出例如包含在图像的图像数据中的人物的脸部图像影像的特征量等。而且音频参数的特征量具体可举出例如音量分量(音量大小)、时间分量(发生持续时间)和频率分量(频率高低)的特征量等。

控制部108根据由检测部107检测出的图像影像的特征量和音频参数的特征量来控制摄影部101。而且，当检测部107所检测出的特征量中产生了变化时，控制部108控制摄影部101来进行图像的拍摄。

音频再现部109再现音频数据。而且，当显示部106显示图像数据时，音频再现部109根据例如检测部107所检测出的特征量和取得部104所获得的动作信息等来选择进行要再现的音频数据。通过音频再现部109再现的音频，可以举出音乐等的乐曲和效果音等。

(图像编辑装置的图像编辑处理步骤)

接着说明本发明的实施方式的图像编辑装置的图像编辑处理步骤。图2是表示本发明的实施方式的图像编辑装置的图像编辑处理步骤的一个例子的流程图。

在图2的流程图中，首先通过输入部103(参照图1、以下亦同)来从一个或者多个摄影部101(参照图1、以下亦同)输入例如包含人物或风景的图像影像并包含与日期时间有关的信息在内的图像数据(步骤S201)。接着，通过取得部104(参照图1、以下亦同)来获得与车辆移动的路径和时刻有关的信息(步骤S202)。

然后通过关联部105(参照图1、以下亦同)，根据在步骤S201中所输入的图像数据的与日期时间有关的信息和在步骤S202中所获得的与路径和时刻有关的信息，将图像数据与地图信息关联起来(步骤S203)。这样，将图像数据与地图信息关联起来之后，通过显示部106(参照图1、以下亦同)来显示图像数据(步骤S204)。由此结束本流程图的图像编辑处理。

并且，虽然省略了图示，但在步骤S204中进行显示部106对图像数据的显示处理时，还可以根据检测部107(参照图1、以下亦同)检测出的图像影像的特征量以及音频参数的特征量和取得部104获得的动作信息，通过音频再现部109(参照图1、以下亦同)选择要再现的音频数据，再现所选择的音频数据。而且，通过控制部108(参照图1、以下亦同)，当检测部107检测出的特征量产生了变化时，还可以控制摄影部101而拍摄图像。

如上所述，根据本发明实施方式的图像编辑装置，可以根据图像数据的与日期时间有关的信息和所获得的与路径和时刻有关的信息，不通过服务器等而将所输入的图像数据与地图信息关联起来。因此可以将驱动车辆之中等获得的图像数据自动与车辆的通过地点和通过时刻结合起来按照时序或通过路径顺序进行编辑，而不会使装置结构变得复杂，从而可以减少图像编辑时复杂的劳动和成本。

接着详细说明本发明的实施方式的实施例。此处，举例表示将本实施方式的图像编辑装置应用于车载导航装置上的情况而对其加以说明。

实施例

(安装有图像编辑装置的车辆内部的说明)

首先说明安装了本发明的实施例的图像编辑装置的车辆内部。图3是表示安装有本发明的实施例的图像编辑装置的车辆内部的一个例子的说明图。图3中，例如在驾驶席座椅311和副驾驶席座椅312的周围设有作为图1中的显示部106的监视器302a和作为音频再现部109的音频输出装置的扬声器304。而且在车辆的顶棚部314设有作为图1中的摄影部101的相机305和作为集音部102的话筒306。

而且在副驾驶席座椅312上朝向后排座椅313的搭乘者设有作为显示部106的监视器302b。图像编辑装置310(310a、310b)具有这些监视器302(302a、302b)、扬声器304、相机305和话筒306。而且，相机305和话筒306可以分别安装在图像编辑装置310(310a、310b)上。另外，该图像编辑装置310(310a、310b)还可以具有能拆装于车辆上的结构。

(图像编辑装置的硬件结构)

下面说明本发明的实施例的图像编辑装置的硬件结构。图4是表示本发明的实施例的图像编辑装置的硬件结构的一个例子的框图。

在图4中，图像编辑装置310如上所述可拆装地安装在车辆上，其构成为包含控制部400、用户操作部(遥控器、触摸面板)401、显示部(监视器)402、位置取得部(GPS、传感器)403、记录介质404、记录介质解码部405、引导音输出部406、通信部407、路径搜索部408、路径引导部409、引导音生成部410、扬声器411、图像编辑部412、图像输入输出I/F413、音频再现部414、音频输出部415、摄影部416、集音部417和音频输入I/F418。

控制部400例如掌控图像编辑装置310整体的控制，通过按照控制程序来执行各种运算处理，总体控制图像编辑装置310所具备的各部分。控制部400可以通过微型计算机等来实现，该微型计算机例如由执行规定的运算处理的CPU(Central Processing Unit)、存储各种控制程序的ROM(Read Only Memory)和作为CPU的工作区域工作的RAM(RandomAccess Memory)等构成。

而且，控制部400例如在车辆的路径引导时根据由位置取得部403获得的与车辆的当前位置有关的信息(当前位置信息)和由记录介质404经由记录介质解码部405得到的地图信息，计算出车辆正在地图上的哪个位置行进，并将计算结果输出给显示部402。该控制部400在上述路径引导时在路径搜索部408、路径引导部409和引导音生成部410之间进行与路径引导有关的信息的输入输出，其结果，将所得到的信息输出给显示部402和引导音输出部406。

用户操作部401将文字、数值、各种指示等由用户进行了输入操作的信息输出给控制部400。作为用户操作部401的结构，例如可以采用检测物理性的按下/非按下的按压按钮式开关、触摸面板、键盘、操作杆等的公知的各种方式。用户操作部401还可以使用后述的集音部417那样的从外部输入音频的话筒等来作为通过音频进行输入操作的方式。

该用户操作部401既可以一体设置在图像编辑装置310上，也可以是遥控器那样的可以从脱离了图像编辑装置310的位置进行操作的方式。而且，用户操作部401既可以由上述各种方式之中的任一种构成，也可以用多个方式构成。用户根据用户操作部401的方式通过进行适当的输入操作来输入信息。

作为通过用户操作部401的输入操作而输入的信息例如关于导航，可以举出目的地信息等。具体而言，例如在车辆等中具有图像编辑装置310的情况下，可设定成为搭乘该车辆的人物要到达的目标地点。而且，作为输入给用户操作部401的信息，例如关于图像编辑，可以举出从后述的图像输入输出I/F413输入到图像编辑部412的图像数据在电子相册上的显示形式的信息等。具体而言，例如可设定搭乘该车辆的人物期望的电子相册上的显示形式。

此处，例如在采用触摸面板作为用户操作部401的方式时，该触摸面板在显示部402的显示画面侧层叠而进行使用。此时，通过管理显示部402的显示定时和对于触摸面板(用户操作部401)的操作定时以及其位置坐标，识别输入操作下的输入信息。通过采用在显示部402层叠而成的触摸面板作为用户操作部401的方式，不会招致用户操作部401的方式的大型化，可以输入较多的信息。作为该触摸面板可以采用电阻膜式、感压式等的公知的各种触摸面板。

显示部402例如包含CRT(Cathode Ray Tube)、TFT液晶显示器、有机EL显示器、等离子体显示器等。具体而言，显示部402可以由例如未图示的视频I/F和与视频I/F连接的视频显示用的显示装置构成。具体而言，视频I/F例如由控制显示装置整体的图形控制器、暂时存储可以即时显示的图像信息的VRAM(Video RAM)等的缓存和根据从图形控制器输出的图像信息显示控制显示装置的控制IC和GPU(GraphicsProcessing Unit)等构成。在显示部402上显示有图标、光标、菜单、窗口或者文字和图像等的各种信息。而且，在显示部402上显示有通过后述的图像编辑部412所编辑的图像数据。

位置取得部403通过例如接收来自人造卫星的电波来获取安装有图像编辑装置310的车辆的当前位置信息(纬度经度信息)。此处，当前位置信息是接收来自人造卫星的电波，求出与人造卫星之间的几何学上的位置的信息，可以在地球上任意处进行计量来得到。而且，位置取得部403具有未图示的GPS天线。此处，所谓GPS(Global Positioning System)是指通过接收来自4个以上的人造卫星的电波，来正确求出在地面上的位置的系统。由于为公知技术，所以此处省略关于GPS的说明。该位置取得部403例如可以通过对从人造卫星接收的电波进行解调的调谐器和根据解调后的信息计算当前位置的运算电路等来构成。

并且，作为来自人造卫星的电波，以1.57542GHz的载波的方式，使用加载了C/A(Coarse and Access)码和行进方式消息的L1电波等来进行。由此，检测安装有图像编辑装置310的车辆的当前位置(纬度和经度)。而且，在检测车辆的当前位置时，还可以再加上由车速传感器和旋磁传感器等的各种传感器所收集的信息。车速传感器根据安装有图像编辑装置310的车辆的传输的输出侧轴检测车速。

之外，关于车辆的当前位置的检测，可以加载角速度传感器、行进距离传感器、倾角传感器、横向G(Gravity)传感器等的各种传感器所收集到的信息。角速度传感器检测车辆旋转时的角速度，输出角速度信息和相对方位信息。行进距离传感器通过对伴随车轮旋转而输出的规定周期的脉冲信号的脉冲数进行计数，计算车轮每旋转一圈所对应的脉冲数，输出基于该每旋转一圈所对应的脉冲数的行进距离信息。倾角传感器检测路面的倾角，输出倾角信息。横向G传感器检测车辆转弯时由于离心力而产生的作为朝向外方的力(重力)的横向G，输出横向G信息。而且，通过位置取得部403所获得的车辆的当前位置信息和这些车速传感器、旋磁传感器、角速度传感器、行进距离传感器、倾角传感器和横向G传感器检测出的信息作为与车辆的动作有关的动作信息被输出给控制部400。

记录介质404以计算机可读取的状态记录各种控制程序和各种信息。记录介质404接收记录介质解码部405对信息的写入，并非易失地记录所写入的信息。记录介质404可以例如通过HD(Hard Disk)来实现。记录介质404不限于HD，可取代HD或在HD的基础上使用DVD(DigitalVersatile Disk)和CD(Compact Disk)等能拆装于记录介质解码部405并具有可搬运性的介质来作为记录介质404。并且，记录介质404不限于DVD和CD，还可以使用CD-ROM(CD-R、CD-RW)、MO(Magneto-Opticaldisk)、存储卡等的能拆装于记录介质解码部405并具有可搬运性的介质。

而且，在记录介质404上记录有实现本发明的图像编辑程序、导航程序、图像数据和地图信息等。此处，图像数据是指例如表示与人物和风景有关的图像影像的2维排列的值。而且，地图信息具有例如表示建筑物、河流、地表面等的地面物质(特征)的背景信息和表示道路的形状的道路形状信息，在显示部402的显示画面上描绘成2维或3维形式。

背景信息具有表示背景形状的背景形状信息和表示背景类别的背景类别信息。背景形状信息例如包含表示地面物质的代表点、多段线、多边形建模、地面物质的坐标等的信息。背景类别信息例如包含表示地面物质的名称、住址和电话号码等的文本信息、表示建筑物/河流等地面物质的类别的类别信息等。

道路形状信息是与具有多个节点和链环有关的道路网络的信息。节点是表示三岔路、十字路、五岔路等多个道路交叉的交叉点的信息。链环是表示连接节点间的道路的信息。链环上还有具有可以表现曲线道路的形状补充点的情况。道路形状信息具有交通条件信息。交通条件信息是表示交叉点的特征、各链环的长度(距离)、车辆宽度、行进方向、通行禁止、道路类别等的信息。

作为该交叉点的特征，可以举出例如三岔路和五岔路等复杂的交叉点、道路在较小的角度下分支的交叉点、目的地周边的交叉点、高速道路的出入口和连接点、路径脱离率较高的交叉点等。路径脱离率例如可以通过过去的行进履历来计算。而且作为道路类别例如可以举出高速公路、收费公路、一般道路等。

而且本实施例中例如将图像数据和地图信息记录在记录介质404上，但并不限于此。图像数据和地图信息并非仅限于与图像编辑装置310的硬件一体设置而进行记录的部件，也可以设置在图像编辑装置310的外部。此时，图像编辑装置310例如通过通信部407经过网络获取图像数据。而且，图像编辑装置310例如通过通信部407经过网络获取地图信息。这样获得的图像数据和地图信息可以例如存储在控制部400的RAM等中。

记录介质解码部405控制对于记录介质404的信息读取/写入。例如使用HD作为记录介质404时，记录介质解码部405成为HDD(Hard DiskDrive)。同样，使用DVD或者CD(包含CD-R、CD-RW)作为记录介质404时，记录介质解码部405成为DVD驱动器或者CD驱动器。而且，使用CD-ROM(CD-R、CD-RW)、MO、存储卡等作为可写入且可拆装的记录介质404时，可以适当使用可对各种记录介质写入信息和可读取存储在各种记录介质中的信息的专用的驱动装置等作为记录介质解码部405。

引导音输出部406通过控制对于所连接的扬声器411的输出，从而再现导航的引导音。扬声器411可以为一个或多个。具体地说，引导音输出部406可以通过与音频输出用的扬声器411连接的未图示的音频I/F来实现。更具体而言，音频I/F可以由例如进行数字音频数据的D/A转换的D/A转换器、对从D/A转换器输出的模拟音频信号进行放大的放大器和进行模拟音频信号的A/D转换的A/D转换器构成。

通信部407在其与其他的图像编辑装置之间进行通信。本实施例的通信部407例如像移动电话那样既可以是经由基站(未图示)与通信服务器(未图示)进行通信的通信模块，也可以是与其他的图像编辑装置之间直接进行无线通信的通信模块。此处，所谓无线通信是指不使用成为通信介质的线而使用电波和红外线/超声波进行的通信。可进行无线通信的规格虽然例如有无线LAN、IrDA(Infrared Data Association)、HomeRF(Home Radio Frequency)、Bluetooth等的各种技术，但在本实施例中可以使用公知的各种无线通信技术。并且，从信息传输速度等角度考虑，可以使用无线LAN作为优选的一个例子。

此处，通信部407例如可以定期(也可以不定期)接收堵车和交通管制等的道路交通信息。通过通信部407接收的道路交通信息既可以在从VICS(Vehicle Information and Communication System)中心发布了道路交通信息的定时来进行，也可以定期对VICS中心请求道路交通信息来进行。并且，通信部407例如可以实现为AM/FM调谐器、TV调谐器、VICS/信标接收机和其他通信设备。

而且，虽然由于其为公知技术而省略了详细说明，但所谓“VICS”是指实时发送在VICS中心编辑、处理过的堵车和交通管制等的道路交通信息，以文字/图形在车载导航装置等的车载设备上进行显示的信息通信系统。作为将在该VICS中心编辑、处理过的交通管制等的道路交通信息(VICS信息)传递给导航装置的方法，具有使用设置在各道路上的“信标”和“FM复用播放”的方法。“信标”具有主要用于高度公路的“电波信标”和主要用于一般道路的“光信标”。使用“FM复用播放”的情况下，可以接收广域区域下的道路交通信息。使用“信标”的情况下，可以接收以本车(车辆)位置为基准的最近的道路的详细信息等在本车所处位置上所需的道路交通信息。而且，当通信部407与其他图像编辑装置之间的通信方法与用于接收图像数据和道路交通信息的通信方法不同的情况下，可以具有分别与之对应的多个通信单元。

路径搜索部408根据由位置取得部403所获得的车辆的当前位置信息和由用户输入的目的地的信息计算从当前位置到目的地的最佳路径。路径引导部409根据路径搜索部408搜索到的与引导路径有关的信息或者由通信部407接收的路径信息、位置取得部403所获得的当前位置信息和经过记录介质解码部405从记录介质404获得的地图信息，生成实时的路径引导信息。在路径引导部409生成的路径引导信息经过控制部400输出给显示部402。

引导音生成部410生成与图案对应的音调和音频信息。即，根据在路径引导部409生成的路径引导信息设定对应于引导点的虚拟声源以及生成音频导航信息，将它们经过控制部400输出给引导音输出部406。

扬声器411再现(输出)从引导音输出部406输出的导航的引导音和从后述的音频输出部415输出的音频。而且，还可以在该扬声器411上例如设置耳机等而适当改变引导音和音频的输出方式，以便不使其成为车辆内部整体输出的引导音和音频的声场。

图像编辑部412对由后述的摄影部416和通信部407通过图像输入输出I/F413获得的图像数据和记录在记录介质404中的图像数据等进行图像编辑处理。该图像编辑部412具体而言例如由GPU等构成。图像编辑部412按照来自控制部400的控制命令进行使用了图像数据的电子相册(下面称为“相册”)数据的制作处理。此处所谓相册数据是指，在显示部402的显示画面上如绘画日记和照片相册那样鉴赏，或者用个人计算机等可以阅览/编辑通过由数字相机(DSC)和数字摄像机(DVC)等摄影装置构成的摄影部416所拍摄的图像数据等的数字数据。

图像输入输出I/F413进行从外部相对于图像编辑部412进行输入输出的图像数据的输入输出。图像输入输出I/F413向图像编辑部412输出例如来自存储上述DSC和DVC等拍摄的图像数据的记录介质404的图像数据、通过USB(Universal Serial Bus)、IEEE1394(Institute of Electricaland Electronic Engineers 1394)和红外线等的通信将存储于DSC和DVC等的图像数据从通信部407进行输入的图像数据等输出给图像编辑部412，将从图像编辑部412输出的图像数据输出给记录介质404和通信部407。而且，图像输入输出I/F413在与记录介质404之间进行图像数据的输入输出时，具有对记录介质404的读/写进行控制的控制器的功能即可。而且，图像输入输出I/F413在与通信部407之间进行图像数据的输入输出时，具有对通信部407的通信进行控制的控制器的功能即可。

音频再现部414选择从记录介质404通过记录介质解码部405得到的音频数据和从通信部407通过控制部400得到的音频数据，对选择出的音频数据进行再现处理。而且，音频再现部414对存储在后述的音频数据库(下面称为“音频DB”)611(参照图6)这样的存储装置中的音频数据进行再现。所再现的音频数据可以举出音乐的乐曲和效果音等的音频数据。另外，当图像编辑装置310具有AM/FM调谐器或TV调谐器时，该音频再现部414也可以例如构成为再现收音机或电视机的音频。

音频输出部415根据在音频再现部414选择而进行了再现处理的音频数据来控制从扬声器411输出的音频输出。具体而言，例如进行音频的音量的调整和均衡处理等，控制音频的输出状态。该音频输出部415对音频输出的控制例如通过来自用户操作部401的输入操作和控制部400的控制来进行。

摄影部416由安装在图3的车辆上的相机305和上述DSC和DVC等的外部的摄影装置构成，其具有C-MOS或者CCD等的光电转换元件，拍摄车辆的内部和外部的图像。该摄影部416通过有线或者无线与图像编辑装置310连接，通过来自控制部400的摄影命令来拍摄例如搭乘于车辆上的人物。由摄影部416拍摄的图像的图像数据经由图像输入输出I/F413被输出给图像编辑部412。

集音部417由安装在图3的车辆上的话筒306等构成，例如从车辆的内部的声场收集搭乘车辆的人物的发声等的音频。音频输入I/F418将由集音部417收集到的音频转换为数字音频数据，输出给控制部400。更具体而言，音频输入I/F418可以由例如将所输入的模拟音频数据转换为数字音频数据的A/D转换器等构成。之外，音频输入I/F418还可以具有对数字音频数据进行滤波处理的过滤电路和放大模拟音频数据的放大电路等。

此处，上述控制部400根据通过摄影部416拍摄的、从图像编辑部412输出的图像数据和被集音部417所收集的、从音频输入I/F418输出的音频数据来判断车辆内部的氛围。具体而言，对车辆内部的氛围的判断是例如对搭乘的人物的表情和音频等的特征量的变化进行检测来进行的。因此，控制部400还可以构成为例如具有DSP(Digital SignalProcessor)的功能。

而且具体而言，例如通过摄影部416来实现图1中的摄影部101的功能，例如通过集音部417来实现集音部102的功能。另外，具体而言，例如通过图像输入输出I/F413和音频输入I/F418来实现图1的输入部103的功能，例如通过位置取得部403来实现取得部104的功能。

并且，具体而言，例如通过控制部400和图像编辑部412来实现图1的关联部105、检测部107和控制部108的功能。进而，具体而言，例如通过显示部402来实现图1的显示部106的功能，例如通过音频再现部414、音频输出部415和扬声器411来实现音频再现部109的功能。

此处，说明上述图像编辑部412和音频再现部414的内部结构。图5是表示本发明实施例的图像编辑装置的图像编辑部的内部结构的一个例子的框图。而且图6是表示本发明实施例的图像编辑装置的音频再现部的内部结构的一个例子的框图。

图5中，图像编辑部412构成为具有图像编辑处理部510、显示控制部511、图像识别部512、图像存储部513、人物识别部514和人物数据库(下面称为“人物DB”)515。图像编辑处理部510对从摄影部416(参照图4、以下亦同)或外部通过图像输入输出I/F413输入到图像编辑部412中的图像数据和从记录介质404(参照图4、以下亦同)通过记录介质解码部405(参照图4、以下亦同)和控制部400(参照图4、以下亦同)输入到图像编辑部412中的图像数据进行图像编辑处理。并且，图像编辑处理部510读取存储在后述的图像存储部513中的图像数据进行图像编辑处理。图像编辑处理内容可以举出例如将图像数据编辑到相册数据中等。

显示控制部511进行用于把从图像编辑处理部510输出的图像数据作为相册形式显示在显示部402的显示画面上的控制。图像识别部512根据输入到图像编辑处理部510的图像数据来识别该图像数据中包含何种图像影像。图像存储部513存储输入到图像编辑处理部510的图像数据。

当在输入到图像编辑处理部510的图像数据内的图像影像中包含有与人物有关的图像影像时，人物识别部514读取预先存储在人物DB515中的与人物有关的图像影像，对该图像影像表示的人物进行识别处理。具体而言，识别处理例如通过基于人物的脸部图像影像的脸部认证来进行。由于关于脸部认证属于公知技术，所以此处省略其说明。人物DB515存储包含搭乘车辆的人物的图像影像的图像数据和这些人物的年龄、性别等的个人识别数据等。

而且，图像编辑部412检测由图像识别部512所识别出的图像数据的图像影像和由人物识别部514所识别的与人物有关的图像影像的特征量，输出给控制部400。这些图像影像的特征量例如根据图像影像的色调数据和人物的脸部图像影像的感情参数来检测。具体而言，色调数据表示图像影像整体的色调与红蓝绿等中的哪个色相相近，感情参数表示人物的脸部图像与何种表情(喜怒哀乐)相近。

另一方面，在图6中，音频再现部414构成为具有音频再现处理部610、音频数据库(下面称为“音频DB”)611、选曲履历数据库(下面称为“选曲履历DB”)612。音频再现处理部610对输入到音频再现部414的音频数据和存储在音频DB611中的音频数据进行选择/再现处理。而且，音频再现处理部610例如与图像编辑部412(参照图4、以下亦同)中制作的相册数据内的图像数据关联起来，对音频数据进行选择/再现处理。此处的音频数据的关联只要根据相册数据内的图像数据所包含的时间戳数据、图像影像的色调数据和人物的脸部图像影像等的特征量来进行即可。

音频DB611对在音频再现部414中经过了再现处理的音频数据进行存储。存储在音频DB611中的音频数据既可以是从记录介质404(参照图4、以下亦同)和通信部407(参照图4、以下亦同)输入到音频再现部414中的音频数据，也可以是预先装载于图像编辑装置310中的音频数据。当在音频再现部414中经过了再现处理的音频数据为乐曲数据时等情况下，选曲履历DB612存储与该乐曲的再现履历和选曲履历有关的信息。例如将图像编辑装置310安装于车辆上的时候，该选曲履历DB612存储驱动时所再现的乐曲的与再现履历和选曲履历有关的信息等。

(图像编辑装置的图像编辑处理步骤)

接着说明本发明的实施例的图像编辑装置的图像编辑处理步骤。图7是表示本发明的实施例的图像编辑装置的图像编辑处理步骤的一个例子的流程图。图7中，首先通过车辆内部所具备的摄影部416(参照图4、以下亦同)拍摄车内的图像(步骤S701)，通过车辆内部所具备的集音部417(参照图4、以下亦同)来收集搭乘车辆的人(下面称作“乘员”)所发出的车内的音频(步骤S702)。

由摄影部416所拍摄的图像的图像数据通过图像输入输出I/F413(参照图4、以下亦同)输入给图像编辑部412(参照图4、以下亦同)，由集音部417所收集的音频的音频数据通过音频输入I/F418(参照图4、以下亦同)输入给控制部400(参照图4、以下亦同)，通过图像编辑部412和控制部400分别检测图像数据的图像影像的特征量和音频数据的音频参数的特征量(步骤S703)。在该步骤S703中，与图像编辑部412检测出的图像影像的特征量有关的信息被输出给控制部400。

检测出图像影像的特征量和音频参数的特征量之后，控制部400根据检测出的特征量来判断车内氛围是否产生了变化(步骤S704)。对车内氛围是否产生了变化的判断例如通过判断检测出的图像影像的特征量是否从表示“笑脸”的感情参数变为表示“哭脸”的感情参数、或是音频参数的特征量是否从表示“笑声”的频率分量变为表示“怒吼”的频率分量来进行的。

在步骤S704中，当控制部400判断为车内氛围没有产生变化时(步骤S704：否)，返回步骤S701，重复从步骤S701到步骤S704的处理。当在步骤S704中判断为车内氛围产生了变化时(步骤S704：是)，通过图像编辑部412获取包含摄影部416通过图像输入输出I/F413而拍摄的时间戳数据在内的图像数据(步骤S705)。

然后，在步骤S705中，获取图像数据，而且控制部400从位置取得部403(参照图4、以下亦同)获取车辆的当前位置信息(步骤S706)，从记录介质404(参照图4、以下亦同)通过记录介质解码部405(参照图4、以下亦同)获取地图信息(步骤S707)，进而获取与车辆移动的路径和时刻有关的信息(步骤S708)。

在步骤S708中，获取了与移动的路径和时刻有关的信息之后，通过控制部400核对图像编辑部412获取的图像数据的时间戳数据和与移动的路径和时刻有关的信息，检测出车辆在图像的时间戳数据表示的时刻所通过的地图上的地点，将图像数据与地图信息关联起来(步骤S709)。

然后，将图像数据与地图信息关联起来之后，通过图像编辑部412使用图像数据制作相册数据(步骤S710)。这样制作了相册数据之后，通过位置取得部403等获取与车辆的速度有关的信息和倾角信息等的与车辆的动作有关的动作信息(步骤S711)。

这样获得的动作信息通过控制部400被输出给音频再现部414(参照图6、以下亦同)，同时音频再现部414从图像编辑部412获取相册数据，通过音频再现处理部610(参照图6、以下亦同)参照来自音频DB611(参照图6、以下亦同)的音频数据、来自选曲履历DB612(参照图6、以下亦同)的与选曲履历有关的信息等，将音频数据与相册数据关联起来(步骤S712)。

此处，音频数据的关联是按照如下方式进行的：例如根据与相册数据关联起来的地图信息和动作信息来判断图像摄影时的地形和道路类别等，从音频DB611中读取适合于判断出的地形和道路类别等的乐曲等音频数据进行关联。此外，还可以参照上述图像影像的特征量和音频参数的特征量，使其与适合于这些特征量的音频数据关联起来。

在步骤S712中，把音频数据与相册数据关联起来之后，判断是否通过图像编辑部412和控制部400完成了相册数据(步骤S713)。在判断为没有完成相册数据时(步骤S713：否)，返回步骤S701，重复从步骤S701到步骤S713的处理。当判断为完成了相册数据时(步骤S713：是)，结束本流程图中的一系列的图像编辑处理。

此处，简单说明步骤S712中的把音频数据与相册数据关联起来的其他处理。图8和图9是表示本发明的实施例的图像编辑装置的图像编辑处理中的音频数据的其他关联处理步骤的一个例子的流程图。而且图8表示基于图像数据的时间戳数据的关联处理，图9表示基于图像数据的图像影像的色调数据的关联处理。

在图8中，首先，音频再现部414(参照图6、以下亦同)的音频再现处理部610(参照图6、以下亦同)从选曲履历DB612(参照图6、以下亦同)获得例如与在图像编辑装置310(参照图4、以下亦同)中再现的乐曲的再现履历有关的信息(步骤S801)。在获得了与再现履历有关的信息后，音频再现处理部610参照相册数据内的图像数据的时间戳数据(步骤S802)。

在步骤S802中参照了时间戳数据之后，音频再现处理部610选择具有与最接近于所参照的时间戳数据的时刻再现的再现履历相关的信息的乐曲的音频数据(步骤S803)。在这样选择了音频数据之后，音频再现处理部610使所选择的音频数据与相册数据关联起来(步骤S804)。在该步骤S804中，还可以例如对应于所选择的音频数据的副歌部分(高亮度部分)，而使音频数据与相册数据关联起来。

另一方面，在图9中，音频再现处理部610(参照图6、以下亦同)例如从图像编辑处理部510(参照图5、以下亦同)参照相册数据，参照色调数据的特征量作为相册数据内的图像数据整体的图像影像的特征量(步骤S901)。而且，音频再现处理部610从音频DB611(参照图6、以下亦同)中选择与所参照的色调数据的特征量对应的音频数据(步骤S902)。

对于该步骤S902中的音频数据的选择而言，例如在图像数据整体的图像影像的色调为蓝色的情况下，选择悲伤氛围下的曲调的音频数据，在绿色的情况下，选择轻快氛围下的曲调的音频数据，在红色的情况下，选择节奏高昂的曲调的音频数据。这样选择了音频数据之后，音频再现处理部610将选择出的音频数据与相册数据关联起来(步骤S903)。在该步骤S903中还可以例如对应于所选择的音频数据的副歌部分(高亮度部分)，使音频数据与相册数据关联起来。

并且，步骤S902中的音频数据的选择还可以例如根据图像数据的脸部图像影像表示的感情参数来进行。此时，例如脸部图像影像表示欢喜时，选择明亮氛围下的曲调的音频数据，当表示生气时，选择激烈氛围下的曲调的音频数据，当表示享受时，选择节奏高昂的曲调的音频数据。

接着说明本发明的实施例的图像编辑装置的图像编辑处理的具体例。图10和图11是表示本发明的实施例的图像编辑装置的图像编辑处理中的具体处理例的说明图。如图10所示，图像编辑装置310(参照图4、以下亦同)的图像编辑部412(参照图5、以下亦同)参照位置取得部403(参照图4、以下亦同)获得并通过控制部400(参照图4、以下亦同)而输入的车辆的当前位置信息和与路径及时刻有关的信息、从记录介质404(参照图4、以下亦同)通过控制部400输入的地图信息，在从车辆的出发地S到终点E为止的过程中所通过的路径上，根据来自摄影部416(参照图4、以下亦同)和集音部417(参照图4、以下亦同)的图像数据和音频数据的图像影像以及音频数据的各自的特征量，当判断为车内的氛围变化时获取图像数据。

图10所示的情况表示在照片获得点A～D上，判断为车内的氛围变化而获取了图像数据的情况。然后，图像编辑部412例如根据在照片获得点A～D获得的图像数据的时间戳数据、在照片获得点A～D获得的车辆的当前位置信息和与车辆的路径和时刻有关的信息，将在照片获得点A～D获得的图像数据与地图信息关联起来制作相册数据。由于在该相册数据上关联有乐曲等的音频数据，所以可以适当自动地再现音乐等。

如图11所示，这样由图像编辑部412制作的相册数据可以例如以翻页的相册的方式显示于显示部402(参照图4、以下亦同)的显示画面上。在该显示的相册数据1110上，例如可以按照时序显示在照片获得点A～D(参照图10、以下亦同)获得的图像数据1120、1130、1140、1150。所显示的各图像数据1120、1130、1140、1150显示照片获得点A～D的车内照片A～D的图像影像1121、1131、1141、1151和车辆之外的风景A～D的图像影像1122、1132、1142、1152即可。

另外，所显示的各图像数据1120、1130、1140、1150显示根据关联的地图信息等获得的表示地名和所拍摄的时刻或者车辆通过的时刻等的文本信息即可。图11中，例如图像数据1120表示在时刻“上午8点14分”被拍摄，拍摄到的照片获得点A为“寄居站附近”的情况。同样，图像数据1130表示在时刻“上午8点37分”被拍摄，拍摄到的照片获得点B为“长静附近”的情况。并且，图像数据1140表示在时刻“下午1点20分”被拍摄，拍摄到的照片获得点C为“秩父站附近”的情况。进而，图像数据1150表示在时刻“下午2点53分”被拍摄，拍摄到的照片获得点D为“正丸岬附近”的情况。而且，此处以时序显示了图像数据1120、1130、1140、1150，但例如也可以按照车辆经过的路径顺序来进行显示。

如上所述，本实施例的图像编辑装置可以根据车内的氛围变化时拍摄到的图像数据的时间戳数据和与车辆移动的路径和时刻有关的信息，不经过服务器等而将图像数据与地图信息关联起来制作相册数据。因此，能够自动按照时序或者路径顺序编辑图像数据而制作相册数据，减少图像编辑的工作。

而且，本实施例的图像编辑装置由于还可以不经过服务器等而将相册数据的图像数据与音频数据关联起来，所以可以提高娱乐性并减少图像编辑处理的工作和成本。

如上所述，根据本发明的图像编辑装置、图像编辑方法、图像编辑程序和计算机可读取的记录介质，可以获得如下效果，即，适当自动地拍摄图像，适当自动地把获得的图像数据与地图信息和音频数据关联起来制作电子相册。

另外，本实施方式中说明的图像编辑方法可以通过使用个人计算机或工作站等的计算机来执行预先准备好的程序而得以实现。该程序记录在硬盘、软盘、CD-ROM、MO、DVD等的计算机可读取的记录介质中，通过用计算机从记录介质中进行读取来执行。另外，该程序还可以是能够通过互联网等的网络进行发布的传播介质。