布局编辑装置、布局编辑方法及存储介质

摘要

本发明提供一种布局编辑装置、布局编辑方法及存储介质，其在进行图像的布局编辑的情况下，使用户可以容易地从大量的未使用图像中，选择期望的未使用图像。布局编辑装置具有：图像解析部，其根据用户的指示，对在画面显示部的编辑画面中显示的布局进行编辑；图像解析部，其对多个图像分别进行图像解析；喜好推测部，其基于布局的编辑结果及图像解析的结果，推测用户的喜好；图像评价部，其基于用户的喜好及图像解析的结果，对多个图像分别计算评价值；以及编辑辅助部，其基于多个图像各自的评价值，将用于辅助用户对布局的编辑作业的辅助信息显示在画面显示部的编辑画面上。

说明书

技术领域

本发明涉及一种布局编辑装置、布局编辑方法和程序，其对将 从多个图像中选择出的规定数量的图像配置在规定位置的布局进行 编辑。

背景技术

作为照片书，是用户从所拥有的多个图像（图像数据）选择规 定数量的图像，并使用所选择的规定数量的图像，生成用户所希望的 布局的写真集（相册）。近年来提供一种自动布局功能，其从用户所 拥有的多个图像中自动选择规定数量的图像，使用所选择的规定数量 的图像，自动地生成照片书的各个页面的布局。

在现有的照片书中，例如假定由旅行、婚礼等的一个活动中拍 摄的数百张左右的图像生成照片书。与之相对，近几年来，以虽然拥 有大量的图像，但没有生成照片书的时间的用户等为对象，例如，已 知一种作为纪念相册，由1年的一千至数千张这样大量的图像生成照 片书的情况。

提供一种选择辅助功能，其在不使用自动布局功能而进行照片 书的布局的情况下，例如进行图像解析，并提示推荐的图像等。但是， 在从一千至数千张这样大量的图像生成照片书的布局时，存在用户对 于从中选择的期望图像非常花费时间的问题。

另外，在使用自动布局功能的情况下，用户在自动生成的布局 中，实施图像的追加、删除等编辑处理。但是，即使在从1500张图 像自动地选择200张图像而自动生成照片书的布局的情况下，用户也 要一边确认在照片书中未被使用的1300张的未使用图像，一边进行 图像的追加、删除，存在非常花费时间的问题。

在这里，作为与本发明存在关联性的现有技术文献，存在专利 文献1。

专利文献1是关于一种图像管理装置，其经由网络将图像向多 个阅览者的信息处理装置提供，具有：设定单元，其用于对于每个阅 览者，分别设定阅览者对图像的行为模式；检索单元，其检索由设定 单元对于每个阅览者设定的行为模式和阅览者对所提供的图像的过 去操作履历相一致的图像；以及显示单元，其在画面上显示由检索单 元检索到的图像。

专利文献1日本特开2009-265886号公报

作为专利文献1，以图像的阅览者的行为模式为基础，进行图像 的选择，选择阅览者喜爱程度较大的图像并进行显示。与之相对，本 发明的不同点在于，是基于用户对布局的编辑结果，推测用户的喜好， 基于推测出的用户喜好，辅助用户对布局的编辑作业，可以实现照片 书的布局编辑的简易化。

本发明的目的在于，消除前述现有技术的问题点，提供一种在 进行图像的布局编辑的情况下，使用户容易从大量的未使用图像中容 易地选择期望的未使用图像的布局编辑装置、布局编辑方法及程序。

发明内容

为了实现上述目的，本发明是一种布局编辑装置，其对将从多 个图像中选择出的规定数量的图像配置在规定位置的布局进行编辑， 其特征在于，具有：

画面显示部，其显示布局的编辑画面；

指示输入部，其输入由于编辑布局的用户的输入；

布局编辑部，其基于用户的指示，对在画面显示部的编辑画面 上显示的布局进行编辑；

图像解析部，其对多个图像分别进行图像解析；

喜好推测部，其基于布局的编辑结果及图像解析的结果，推测 用户的喜好；

图像评价部，其基于用户的喜好及图像解析的结果，对多个图 像分别计算评价值；以及

编辑辅助部，其基于多个图像各自的评价值，将用于辅助用户 对布局的编辑作业的辅助信息，显示在画面显示部的编辑画面上。

在这里，优选喜好推测部，基于大于或等于1个的追加图像中 分别拍摄到的各个人物的出现次数、与大于或等于1个的删除图像中 分别拍摄到的与各个人物相同的人物的出现次数之差，计算各个人物 的重要性而作为用户的喜好，追加图像是基于用户的指示，从未使用 图像中向布局追加的图像，删除图像是基于用户的指示从布局中删除 的图像，所述未使用图像是多个图像中未在布局中使用的图像。

此外，优选喜好推测部，与追加图像及删除图像中分别拍摄到 的各个人物的面部的大小相对应，对重要性赋予权重。

此外，优选喜好推测部，基于布局中所使用的编辑图像中分别 拍摄到的各个人物的出现次数，计算各个人物的重要性，作为用户的 喜好。

此外，优选喜好推测部，根据各个人物的重要性，如下计算重 要性：对于在与重要性低的人物相比重要性高的人物被拍摄到的图像 中拍摄到的人物，在重要性高的人物被拍摄到的图像中出现次数多的 人物的重要性，比在重要性高的人物被拍摄到的图像中出现次数少的 人物的重要性高。

此外，优选喜好推测部，基于各个人物的重要性，如下计算重 要性：对于在与重要性低的人物相比重要性高的人物被拍摄到的图像 的拍摄日拍摄到的图像中拍摄到的人物，在重要性高的人物被拍摄到 的图像的拍摄日拍摄到的图像中出现次数多的人物的重要性，比在重 要性高的人物被拍摄到的图像的拍摄日拍摄到的图像中出现次数少 的人物的重要性高。

此外，优选喜好推测部，基于各个人物的重要性，如下计算重 要性：对于在与重要性低的人物相比重要性高的人物被拍摄到的图像 的拍摄日拍摄到的图像中拍摄到的人物，在重要性高的人物被拍摄到 的图像的拍摄日出现天数多的人物的重要性，比出现天数少的人物的 重要性高。

此外，优选喜好推测部，基于在布局中使用的各个编辑图像中 拍摄到的各个图像内容，计算各个人物的重要性，作为用户的喜好。

此外，优选喜好推测部，在基于用户的指示，将布局中使用的 编辑图像、和多个图像中未在布局中使用的未使用图像进行交换的情 况下，基于交换前后的图像中是否拍摄到人物的面部、交换前后的图 像中是否拍摄到同一人物、交换前后的图像是否为类似图像，计算交 换前后的图像中拍摄到的人物的重要性、以及交换前后的图像的场景 和构图的重要性，作为用户的喜好。

此外，优选喜好推测部，在基于用户的指示，将布局中使用的 编辑图像、和多个图像中未在布局中使用的未使用图像进行交换的情 况下，基于下述的任一个条件，推测用户的喜好：交换前后的图像的 拍摄时间、交换前后的图像的拍摄场所、交换前后的图像中拍摄到的 人物面部的大小、交换前后的图像拍摄到的人物面部的位置、交换前 后的图像中拍摄到的人物面部的方向、交换前后的图像中拍摄到的人 物的表情、交换前后的图像的场景、交换前后的图像整体的色调、交 换前后的图像是风景照还是人物照中。

此外，优选喜好推测部，如下计算重要性：对于在布局中使用 的编辑图像，基于用户的指示，从大于或等于2个的人物被拍摄到的 图像中仅提取包含规定人物在内的区域而配置在布局中情况下，使规 定人物的重要性比在图像中拍摄的大于或等于2个的人物中除了规 定人物以外的人物的重要性更高。

此外，优选对于多个图像中未配置在布局中的未使用图像，画 面显示部还将规定数量的未使用图像的一览显示在编辑画面上，编辑 辅助部，与评价值低的未使用图像相比，优先将评价值高的未使用图 像显示在未使用图像的一览内，作为辅助信息。

此外，优选编辑辅助部，与评价值低的未使用图像相比，将评 价值高的未使用图像配置在未使用图像的一览内的前侧。

此外，优选编辑辅助部，将评价值高的未使用图像，在未使用 图像的一览内进行强调显示。

此外，优选编辑辅助部，在未使用图像的一览内，通过对评价 值高的未使用图像附加标记、或者变更评价值高的未使用图像的显示 框颜色、或者变更评价值高的未使用图像的显示尺寸，从而进行强调 显示。

此外，优选编辑辅助部，与在布局中使用的编辑图像之中的、 基于用户的指示而指定的规定图像相对应，切换规定数量的未使用图 像，显示在未使用图像的一览内。

此外，优选喜好推测部，计算在多个图像中分别拍摄到的各个 人物或场所的重要性，作为用户的喜好，

编辑辅助部，在基于用户的指示而指定了布局中使用的编辑图 像之中的、重要性低的人物或场所被拍摄到的图像的情况下，将与重 要性低的人物或场所被拍摄到的图像相比重要性高的人物或场所被 拍摄到的未使用图像，显示在未使用图像的一览内。

此外，优选还具有自动布局部，其基于用户的喜好，自动地生 成布局，编辑辅助部还将由自动布局部生成的布局显示在画面显示部 的编辑画面上，作为辅助信息。

此外，优选编辑辅助部还基于用户的喜好，将背景底图、边框 装饰、剪贴画、文字输入用字体中的至少1个，显示在画面显示部的 编辑画面上，作为辅助信息。

此外，优选其对由多个页面构成的布局进行编辑，还具有自动 布局部，其自动地生成多个页面各自的布局，自动布局部，基于规定 页面的布局的编辑结果，对于多个页面之中的规定的页面以外的页面 生成布局。

此外，优选其对由多个页面构成的布局进行编辑，喜好推测部， 基于多个页面之中的大于或等于2个的页面的布局的编辑结果，推测 用户的喜好。

此外，优选其对由多个页面构成的布局进行编辑，喜好推测部， 基于多个页面各自的布局的编辑时间，推测用户的喜好。

此外，优选还具有喜好保存部，其保存用户喜好的数据，图像 评价部，基于在喜好保存部中保存的用户喜好的数据，对多个图像分 别计算评价值。

此外，本发明提供一种布局编辑方法，其对将从多个图像中选 择出的规定数量的图像配置在规定位置的布局进行编辑，其特征在 于，具有下述步骤：

布局编辑步骤，其基于经由指示输入部输入的用于对布局进行 编辑的用户的指示，对在画面显示部的编辑画面上显示的布局进行编 辑；

图像解析步骤，其对多个图像分别进行图像解析；

喜好推测步骤，其基于布局的编辑结果及图像解析的结果，推 测用户的喜好；

图像评价步骤，其基于用户的喜好及图像解析的结果，对多个 图像分别计算评价值；以及

编辑辅助步骤，其基于多个图像各自的评价值，将用于辅助用 户对布局的编辑作业的辅助信息，显示在画面显示部的编辑画面上。

另外，本发明提供一种程序，其用于使计算机执行上述记载的 布局编辑方法的各步骤。

本发明提供一种计算机可读取的存储介质，其记录有用于使计 算机执行上述布局编辑方法的各步骤的程序。

发明的效果

根据本发明，通过以用户的喜好为基础，辅助用户对布局的编 辑作业，从而能够使用户从大量的未使用的图像中容易地选择期望的 未使用图像，有效地进行编辑作业。

附图说明

图1是表示本发明的布局编辑装置的结构的一个实施方式的框 图。

图2是表示图1所示的布局编辑装置的动作的流程图。

图3是表示照片书的布局的显示画面的一个例子的概念图。

图4是表示照片书的布局的编辑画面的一个例子的概念图。

图5是表示未使用图像向布局的追加及编辑图像从布局删除的 一个例子的概念图。

图6是表示A某和B某这二人被拍摄到的图像的概念图。

图7是表示编辑图像和未使用图像进行交换的一个例子的概念 图。

图8是表示提取包含A某的面部在内的区域的一个例子的概念 图。

图9是表示对评价值高的未使用图像中附加“★”标记的一个 例子的概念图。

图10是重要性低的人物被拍摄到的图像被选择的情况下，将与 之对应的未使用图像显示在未使用图像的一览内的一个例子的概念 图。

图11是表示以1～2页的布局的编辑结果为基础，进行3～4页的 布局变更的一个例子的概念图。

具体实施方式

以下，以附图所示的优选实施方式为基础，详细说明本发明的 布局编辑装置、布局编辑方法和程序。

图1是表示本发明的布局编辑装置的结构的一个实施方式的框 图。该图所示的编辑布局装置10，将从多个图像中选择出的规定数 量的图像配置在规定位置上，对照片书的各个页面的布局进行编辑， 由下述部分构成：自动布局部12、指示输入部14、布局编辑部16、 图像解析部18、喜好推测部20、喜好保存部22、图像评价部24、编 辑辅助部26、以及画面显示部28。

自动布局部12，从照片书中可以使用的多个图像中，选择与各 个页面分别对应的规定数量的图像，配置在规定的位置，从而自动地 生成各个页面的布局（自动布局）。

自动布局部12，例如基于包含拍摄时间、拍摄位置等在内的图 像数据的附带信息，将照片书可使用的多个图像划分为规定的组，并 对于每个划分后的组，基于图像的评价值等，从组中所包含的图像中 选择规定数量的图像，将对于每个组所选择的规定数量的图像，配置 在与组对应的1个或大于或等于2个的页面上（自动布局）。

另外，自动布局方法并没有任何限定，自动布局部12可以利用 包含公知的自动布局方法在内的各种自动布局方法，进行照片书的各 个页面的自动布局。

以下依次说明，指示输入部14，输入用户用于对照片书的各个 页面的布局进行编辑的指示，除此之外，还输入用户用于对布局编辑 装置10进行操作的各种指示。作为指示输入部14，例如是鼠标、键 盘、触摸屏等输入单元，也可以对输入画面显示部28所显示的布局 的显示画面及编辑画面进行操作而指示输入。

用户在照片书的生成时，例如，经由指示输入部14输入照片书 的页数、照片书中可以使用的多个图像等的指示。另外，用户在照片 书的布局编辑时，例如，输入进行布局编辑的页面、编辑对象页面的 布局中所使用的编辑图像、照片书中可以使用的多个图像之中的未被 照片书使用的未使用图像的指定、编辑内容的指定等的指示。

然后，布局编辑部16，基于用户经由指示输入部14输入的指示， 对由自动布局部12自动生成、并在画面显示部28的编辑画面上显示 的照片书的各个页面的布局进行编辑。

图像解析部18，对于照片书中可以使用的多个图像，分别进行 各种图像解析，例如，图像中是否存在人物的面部（面部识别），在 图像中存在人物的面部的情况下，求出该人物面部的大小、面部的位 置、面部的朝向、表情、图像中包含的人物的数量等，并且，求出场 景（室内、室外、夜景等）、图像整体的色调（亮度、色彩度、对比 度等）、是风景照还是人物照等。

图像中是否存在人物的面部，例如可以使用下述方法：其记载 于在日本特开2004-348733号公报中引用的“H.Schneiderman et al., “A statistical method for3d object detection applied to faces and  cars,”in IEEE Conf.on Computer Vision and Pattern Recognition, 2000,pp.746-51”中，使用通过对图像进行小波变换而获得的DWT 系数，进行面部检测。

面部的大小，例如可以使用面部区域内的像素数、面部区域相 对于图像整体的比例、面部区域相对于图像宽度的比例等而求出。

面部的位置，例如使用将面部区域的中心位置（例如在面部区 域是矩形的情况下，为对角线的交点）的坐标值相对于图像的横向及 纵向的长度的比例以百分比表示的值。

面部的朝向，例如可以使用表示在面部区域中包含的面部的朝 向是正面或者横向的信息而求出。另外，作为面部的朝向，还可以从 面部区域检测眼睛，在检测出的眼睛为2个的情况下作为正面，在为 1个的情况下作为横向。另外，也可以从面部区域求出表示面部朝向 的特征量，使用该特征量决定面部的朝向是正面还是横向。

关于表情，例如使用在日本特开2001-43345号公报中记载的方 法，判定在图像中包含的面部是正在笑、还是没有笑。具体来说，对 于呈现各种表情的面部的图像，事先存储用于基于表皮动作模式识别 表情的特征向量，根据作为对象的图像计算特征向量，计算其与预先 存储的特征向量之间的距离，将与成为最近距离的特征向量对应的表 情，判定作为对象图像中包含的面部表情。

对于图像中包含的人物的数量、场景、图像的色调、是风景照 还是人物照等，均可以使用公知的包含图像解析在内的各种图像解析 而求出。

下面，喜好推测部20，基于布局编辑部16对布局的编辑结果、 以及图像解析部18的图像解析的结果，推测用户的喜好（编辑意图、 编辑倾向）。

喜好保存部22，保存由喜好推测部20推测出的用户喜好的数 据。

图像评价部24，根据由喜好推测部20推测出的用户的喜好、以 及由图像解析部18的图像解析的结果，对在照片书中可以使用的多 个图像分别计算评价值。在喜好保存部22中保存有用户喜好的数据 的情况下，图像评价部24也可以不是基于由喜好推测部20推测出的 用户的喜好，而是基于在喜好保存部22中保存的用户喜好的数据， 对各个图像的评价值进行计算。

编辑辅助部26，基于由图像评价部24计算出的照片书中可以使 用的多个图像各自的评价值，将用于辅助用户对布局的编辑作业的辅 助信息，显示在画面显示部28的编辑画面上。

画面显示部28，显示包括由自动布局部12自动生成的布局的显 示画面、由布局编辑部16编辑的布局的编辑画面在内的各种画面。

下面，一边参照图2所示的流程图，一边对用户进行布局编辑 时的布局编辑装置10的动作进行说明。

如果用户经由指示输入部14输入照片书的生成条件，例如希望 生成的照片书的页数、通过拍摄期间的指定而指示照片书中可以使用 的多个图像等，则利用自动布局部12，进行照片书的各个页面的自 动布局（步骤S1）。如果自动布局结束，则例如如图3所示，作为 布局的显示画面的初始画面，在画面显示部28上显示由自动布局部 12生成的照片书的合页版的1～2页的布局（步骤S2）。

图3是表示照片书的布局的显示画面的一个例子的概念图。该 图所示的布局的显示画面30，由布局显示区域32和指示输入区域36 构成。

在布局显示区域中，显示自动生成的照片书的各个页面的布局。 在该图中，作为布局的显示画面30的初始画面，显示在合页版的1～ 2页的布局中使用的规定数量的图像。

在指示输入区域36中，配置用于由用户经由指示输入部14输 入各种指示的各种按钮。例如，当用户通过鼠标点击或触摸屏触摸而 选择向右按钮38，则显示下一页的布局，如果选择向左按钮40，则 显示前一页的布局。另外，如果选择“进行编辑”按钮42，则显示 编辑对象页面的布局编辑画面。如果选择“保存”按钮44，则保存 当前布局的数据。如果选择“返回”按钮46，则显示布局自动生成 前的照片书生成条件的输入画面。

然后，如果用户经由指示输入部14选择“进行编辑”按钮42， 输入布局编辑的指示，则如图4所示，在画面显示部28上显示由用 户指定的编辑对象页面的布局编辑画面50（步骤S3）。

图4是表示照片书的布局编辑画面的一个例子的概念图。该图 所示的布局编辑画面50，由布局显示区域32、未使用图像显示区域 34、指示输入区域36构成。

在布局显示区域32中，显示编辑对象页面的布局。该图中，作 为布局编辑的初始画面，显示编辑对象的合页版的1～2页的布局中 使用的规定数量的编辑图像。

在未使用图像显示区域34中，缩小显示（略缩图显示）未使用 图像52中的规定数量的未使用图像的一览，该未使用图像52是在照 片书中可以使用的多个图像之中、未被照片书使用的图像。在编辑画 面50仅显示规定数量的未使用图像52，但如果用户选择向下按钮54， 则显示接下来的规定数量的未使用图像，如果选择向上按钮56，则 显示之前的规定数量的未使用图像。

在指示输入区域36中，配置用于使用户经由指示输入部14输 入各种指示的各种按钮。向右按钮38、向左按钮40、“保存”按钮 44与图3的情况相同。如果选择“布局变更”按钮48，则变更编 辑对象页面的布局。如果选择“返回”按钮46，则显示布局编辑前 的自动布局后的画面。

用户在编辑画面50中，通过经由指示输入部14输入各种指示， 从而例如可以从在布局显示区域32中显示的布局的编辑图像51中选 择希望编辑的图像，并进行所选择的编辑图像的旋转、扩大/缩小、 从布局删除、与未使用图像的替换等。另外，用户还可以从在未使用 图像显示区域34中显示的未使用图像52中，选择规定的未使用图像， 向布局中追加。另外，用户可以进行布局的变更、布局数据的保存等。

如果用户经由指示输入部14输入各种指示（步骤S4），则利 用布局编辑部16，基于用户经由指示输入部14输入的指示，对编辑 对象页面的布局进行编辑（步骤S5）。

下面，对喜好推测部20的动作进行说明。

首先，对于如图5中箭头所示，基于用户从未使用图像显示区 域34向布局追加的未使用图像（追加图像）、和用户从布局删除的 编辑图像（删除图像），喜好推测部20推测用户的喜好时的动作进 行说明。

该情况下，喜好推测部20基于布局编辑部16对布局的编辑结 果、以及图像解析部18对图像的解析结果，根据基于用户的指示而 从未使用图像向布局追加的大于或等于1个的追加图像中分别拍摄 到的各个人物的出现次数、以及基于用户的指示从布局删除的大于或 等于1个的删除图像中分别拍摄到的各个人物的出现次数之差，作为 用户的喜好，计算各个人物的重要性。

例如，如表1所示，作为追加图像中的人物的出现次数（追加 次数），A某为4次、B某为10次、C某为1次、D某为0次、E 某为12次、…，作为删除图像中的人物的出现次数（删除次数）， A某为0次、B某为2次、C某为3次、D某为10次、E某为7次、…。 因此，作为（追加次数-删除次数），A某为4次、B某为8次、C 某为-2次、D某为-10次、E某为5次、…。

表1

该情况下，喜好推测部20判断（追加次数-删除次数）越多的 人物，是重要性越高的人物。在表1的例子中，判断为B某的重要 性最高，然后，以E某、A某、C某、D某、…的顺序而重要性逐渐 降低。

然后，图像评价部24以各个人物的重要性及图像解析的结果为 基础，将B某被拍摄到的图像的评价值设定为最高，然后，以E某、 A某、C某、D某、…的顺序，将各个人物被拍摄到的图像的评价值 设定为逐渐降低。

另外，如图6所示，例如在用户将A某和B某这二人被拍摄到 的图像向布局追加的情况下，喜好推测部20对于A某和B某，均将 出现次数进行增加（提高重要性），但与追加图像中所拍摄到的各个 人物面部的大小相对应，对所增加的出现次数（重要性）赋予权重。 在图6的例子的情况下，使与B某相比面部尺寸更大的A某的出现 次数+1次，使B某的出现次数+0.5次。在删除图像的情况下，也同 样地对出现次数进行减少。

另外，喜好推测部20，根据在照片书（布局）中使用的编辑图 像（照片书的使用图像）各自拍摄到的各个人物的出现次数，作为用 户的喜好，判断各个人物的重要性。

表2是对于追加次数、删除次数、（追加次数-删除次数）与表 1相同的情况，表示照片书的使用图像中的人物的出现次数。在表2 的例子中，作为照片书的使用图像中的人物的出现次数，A某为20 次、B某为10次、C某为8次、D某为20次、E某为8次、…。

表2

在该情况下，D某的（追加次数-删除次数）为-10次，但由于 照片书的使用图像中的人物的出现次数为20次之多，所以喜好推测 部20判断用户对于表情、场景等不满意的图像较多，但判断D某的 重要性高。同样地，A某的重要性也高。另一方面，B某的（追加次 数-删除次数）为8次而最多，但由于照片书的使用图像中的人物的 出现次数为10次，因此判断B某与D某相比重要性更低。

另外，喜好推测部20，根据与重要性高的人物之间的关联性， 判断其他人物的重要性。

例如，喜好推测部20也可以根据如上所述计算出的各个人物的 重要性，进一步如下所述计算重要性：对于与重要性较低的人物相比 重要性更高的人物被拍摄到的图像上拍摄到的人物，使在重要性较高 的人物被拍摄到的图像中出现次数多的人物的重要性，与出现次数较 少的人物的重要性相比更高。

该情况下，喜好推测部20判断与重要性高的人物在同一图像中 被拍摄到的人物，是与重要性高的人物存在某种关联的人物（相关人 物），同样地，判断相关人物的重要性也高。

另外，喜好推测部20，基于如上所述计算出的各个人物的重要 性，如下所述计算重要性：对于在与重要性低的人物相比重要性更高 的人物被拍摄到的图像的拍摄日所拍摄到的图像中拍摄到的人物，使 在重要性高的人物被拍摄到的图像的拍摄日拍摄到的图像中出现次 数较多的人物的重要性，比出现次数较少的人物的重要性更高。

例如，在重要性高的人物被拍摄到的图像的拍摄日是3/4、5/4、 5/5、7/18的情况下，喜好推测部20判断在这全部的拍摄日拍摄到 的所有图像中出现次数较多的人物是相关人物，同样地，判断重要性 较高。

另外，喜好推测部20基于如上所述计算出的各个人物的重要性， 以下述方式计算重要性：对于在与重要性低的人物相比重要性高的人 物被拍摄到的图像的拍摄日所拍摄的图像中被拍摄到的人物，使在重 要性较高的人物被拍摄到的图像的拍摄日出现天数较多的人物的重 要性，比出现天数较少的人物的重要性更高。

例如，在重要性高的人物被拍摄到的图像的拍摄日为3/4、5/4， 5/5、7/18的情况下，喜好推测部20判断在这些拍摄日中，出现天数 较多的人物是重要性高的人物的相关人物，同样地，判断重要性较高。

喜好推测部20，例如，判断与仅在3/4拍摄的图像中出现的人 物相比，在3/4及5/4拍摄的图像中出现的人物的重要性更高，也就 是说，出现天数越多的人物，是重要性越高的人物。

另外，喜好推测部20也可以基于在布局中使用的各个编辑图像 中拍摄到的各个图像内容，计算各个图像内容的重要性，作为用户的 喜好。

在这里，所谓图像内容，是表示在图像中拍摄到的拍摄物情况 的信息，由图像解析部18通过图像解析求出。图像内容并不进行任 何限定，例如，可以例示图像上人物是否被拍摄到、人物以外的对象 （食物、儿童的玩具等）是否被拍摄到、怎样的场景（夜景、室外、 夕阳等风景等）是否被拍摄到、图像的亮度和模糊状况是怎样程度等。

例如，在“食物”图像在一定数量的布局中被使用的情况下， 喜好推测部20作为用户的喜好，判断“食物”是重要的，使“食物” 图像的重要性，比除此以外的东西被拍摄到的图像的重要性更高。另 外，例如，在无论多少但存在模糊的图像一张也没在布局中采用的情 况下，作为用户的喜好，判断“模糊状况”重要，使模糊较小的图像 的重要性比模糊较多图像的重要性更高。

下面，如图7箭头所示，对喜好推测部20以用户进行编辑图像 和未使用图像的替换的交换前后的图像为基础而推测用户喜好的情 况下的动作进行说明。

该情况下，喜好推测部20如表3所示，根据交换前后的图像中 是否拍到人物的面部（是否拍摄到人物）、交换前后的图像中是否拍 摄到同一个人物、交换前后的图像是否为类似图像，作为用户的喜好， 计算交换前后的图像中拍摄到的人物的重要性、以及交换前后的图像 的场景及构图的重要性。

表3

No.1的情况下，由于交换前后的图像中均拍摄到人物的面部， 并且是同一个人物，因此喜好推测部20判断交换前后的图像中拍摄 到的人物的重要性高。另外，由于交换前后的图像是类似图像，因此 喜好推测部20判断用户是对变更前的图像中拍摄到的人物的面部 （表情）不满而更换图像，并不是对场景和构图不满，判断其重要性 高。

以下按顺序进行说明，No.2的情况下，交换前后的图像均拍摄 到人物的面部，并且是同一个人物，喜好推测部20与No.1同样地， 判断交换前后的图像中拍摄到的人物的重要性高。另外，由于交换前 后的图像不是类似图像，因此喜好推测部20判断用户是对变更前的 图像中拍摄到的场景和构图不满而替换图像，判断变更前的图像的场 景和构图的重要性低。

No.3的情况下，交换前后的图像中均拍摄到人物的面部，但不 是同一个人物，因此喜好推测部20判断用户是对变更前的图像中拍 摄到的人物不满而替换图像，判断变更前的图像中拍摄到的人物的重 要性低。另外，由于交换前后的图像是类似图像，因此图像喜好推测 部20与No.1同样地，判断交换前后的图像的场景和构图的重要性 高。

No.4的情况下，交换前后的图像均拍摄到人物的面部，但不是 同一个人物，因此喜好推测部20与No.3同样地，判断变更前的图像 中拍摄到的人物的重要性低。另外，由于交换前后的图像不是类似的 图像，因此喜好推测部20与No.2同样地，判断变更前的图像中拍摄 到的场景和构图的重要性低。

No.5的情况下，变更前的图像中拍摄到人物的面部，但变更后 的图像中未拍摄到人物的面部，因此喜好推测部20判断变更前的图 像中拍摄到的人物的重要性较低。另外，由于交换前后的图像是类似 图像，因此喜好推测部20与No.1同样地，判断交换前后的图像的场 景和构图的重要性高。

No.6的情况下，变更前的图像中拍摄到人物的面部，但变更后 的图像中未拍摄到人物的面部，因此喜好推测部20与No.5同样地， 判断变更前的图像中拍摄到的人物的重要性低。另外，由于交换前后 的图像不是类似的图像，因此喜好推测部20与No.2同样地，判断变 更前的图像中拍摄的场景和构图的重要性低。

No.7的情况下，在变更前的图像中未拍摄到人物的面部，但变 更后的图像中拍摄到人物的面部，因此喜好推测部20判断变更后的 图像中拍摄到的人物的重要性高。另外，由于交换前后的图像是类似 图像，因此喜好推测部20与No.1同样地，判断交换前后的图像的场 景和构图的重要性高。

No.8的情况下，在变更前的图像上未拍摄到人物的面部，但变 更后的图像上拍摄到人物的面部，因此喜好推测部20与No.7同样地， 判断变更后的图像中拍摄到的人物的重要性高。另外，由于交换前后 的图像不是类似图像，因此喜好推测部20与No.6同样地，判断变更 前的图像中拍摄到的场景和构图的重要性低。

另外，并不限于上述例子，喜好推测部20可以利用图像解析部 18的解析结果，根据布局的编辑结果，例如，基于交换前后的图像 的拍摄时间、交换前后的图像的拍摄场所（GPS信息）、交换前后 的图像中拍摄到的人物的面部的大小、交换前后的图像中拍摄到的人 物面部的位置、交换前后的图像中拍摄到的人物面部的方向、交换前 后的图像中拍摄到的人物的表情、交换前后的图像的场景、交换前后 的图像的色调、交换前后的图像是风景照还是人物照等，推测用户的 喜好，基于推测出的用户的喜好，计算照片书中可以使用的各个图像 的评价值。

例如，喜好推测部20基于交换前后的图像的拍摄时间是否接近 （是否处于规定时间内），判断交换前后的图像中拍摄到的场景的重 要性。例如，在交换前后的图像的拍摄时间接近的情况下，判断交换 前后的图像中拍摄到的场景的重要性高。另一方面，在交换前后的图 像的拍摄时间远离的情况下，判断变更前的图像中拍摄到的场景重要 性低。

另外，喜好推测部20基于交换前后的图像的拍摄场所是否接近 （是否处于规定的范围内），判断交换前后的图像的拍摄场所的重要 性。例如，在交换前后的图像的拍摄场所接近的情况下，判断交换前 后的图像的拍摄场所的重要性高。另一方面，在交换前后的图像的拍 摄场所远离的情况下，判断变更前的图像的拍摄场所的重要性低。

在用户中，例如存在“喜欢儿童的面部较大”、“不喜欢自己 面部过大”等喜好。与之对应，喜好推测部20基于交换前后的图像 中拍摄到的人物、面部的尺寸等，判断用户对于面部尺寸的喜好。

在用户中，例如存在“喜欢面部存在于画面中心”、“喜欢面 部从画面中心稍微偏离”等喜好。与之对应，喜好推测部20基于交 换前后的图像中拍摄到的面部的位置，判断用户对于面部位置的喜 好。

在用户中，例如存在“喜欢面部朝向正面”、“喜欢面部稍微 倾斜的朝向”等喜好。与之对应，喜好推测部20基于交换前后的图 像中拍摄到的面部朝向，判断用户对于面部朝向的喜好。

在用户中，例如存在“喜欢儿童面部露出笑容”、“不喜欢自 己面部的笑容过度”等喜好。与之对应，喜好推测部20基于交换前 后的图像中拍摄到的人物、表情等，判断用户对于表情的喜好。

在用户中，例如存在“喜欢室内的图像”、“喜欢室外”、“喜 欢夜景”等喜好。与之对应，喜好推测部20基于交换前后的图像的 场景，判断用户对于场景的喜好。

在用户中，例如存在“喜欢淡雅的图像”、“喜欢对比强烈的 图像”等喜好。与之对应，喜好推测部20基于交换前后的照片的亮 度、色彩度、对比度，判断用户对于图像整体颜色的喜好。

在用户中，例如存在“喜欢风景照”、“喜欢人物照”等喜好。 与之对应，喜好推测部20基于交换前后的图像中拍摄到的人物、风 景等，判断用户对于人物照/风景照的喜好。

另外，在基于用户的指示，对于在布局中使用的编辑图像，从 拍摄到大于或等于2个人物的图像中提取出仅包含规定人物在内的 区域而配置在布局中的情况下，喜好推测部20如下所述计算重要性， 即，使提取出的规定人物的重要性，比在该图像中被拍摄到的大于或 等于2个人物之中、除规定人物以外的人物的重要性更高。

例如，如图8虚线所示，在从A某和B某这二人被拍摄到的图 像中，将包含A某的面部在内的虚线区域提取并放大而向布局中配 置的情况下，喜好推测部20判断与B某相比，A某的重要性高。

另外，喜好推测部20也可以根据对多个页面的布局编辑结果， 推测用户的喜好。

例如，在用户进行将A某被拍摄到的图像追加到全部页面中等， 对全部页面进行相同的编辑的情况下，喜好推测部20将该布局的编 辑结果作为最优先，推测用户的喜好，将A某被拍摄到的图像的评 价值优先地提高。另一方面，在用户在某一页面中追加A某被拍摄 到的图像，在其他页面中删除A某被拍摄到的图像的情况下，喜好 推测部20将A某被拍摄到的图像的评价值降低。

另外，喜好推测部20基于各个页面的编辑时间，判断各个页面 的重要性。

例如，对于用户不需要太多的时间而完成布局编辑的页面，认 为是用户没有犹豫。例如，在明显不相关人物在图像上被拍摄到的情 况下，用户不会花费时间而会立即将该图像删除。与之对应，喜好推 测部20判断该页面的布局的编辑结果的重要性高，将根据该页面的 布局编辑结果推测出的用户的喜好的优先度提高。

另一方面，对于用户花费时间实施了布局编辑的页面，认为用 户苦恼地判断。例如，还存在这种可能性：存在亲密的朋友A某和B 某，在某个页面中使用A某被拍摄到的图像，但在其他页面中还想 使用B某被拍摄到的图像。与之对应，喜好推测部20判断该页面的 布局编辑结果的重要性低，将根据该页面的布局编辑结果推测出的用 户的喜好的优先度降低。

下面，对编辑辅助部26的动作进行说明。

编辑辅助部26，基于由图像评价部24计算出的在照片书中可以 使用的多个图像各自的评价值，例如通过变更未使用图像的一览显示 方式等，辅助用户对布局的编辑作业。

例如，编辑辅助部26在将未使用图像显示区域34缩小显示的 未使用图像的一览中，优先显示对于用户来说重要性高的图像，即评 价值高的图像，降低显示评价值低的未使用图像的优先级。换言之， 编辑辅助部26，与评价值低的未使用图像相比，优先在未使用图像 的一览内显示评价值高的未使用图像。

编辑辅助部26，例如使评价值高的未使用图像与评价值低的未 使用图像相比，优先地在未使用图像的一览内的前侧配置而显示，或 者将评价值高的未使用图像在未使用图像的一览内强调显示，例如如 图9所示，对评价值高的未使用图像标记“★”等标志，或者改变评 价值高的未使用图像的显示框颜色，或者变更评价值高的未使用图像 的显示尺寸（增加评价值高的未使用图像的显示尺寸）。相反，编辑 辅助部26使评价值低的未使用图像例如移动至未使用图像一览的后 侧，或者不显示。

另外，编辑辅助部26，也可以与在布局中使用的编辑图像之中、 基于用户的指示而指定的规定编辑图像相对应，切换在未使用图像的 一览内显示的未使用图像。

例如，喜好推测部20，在计算照片书中可以使用的多个图像中 分别拍摄到的各个人物的重要性而作为用户喜好的情况下，在如图 10中粗线所示基于用户的指示而选择了在布局中使用的编辑图像中 的重要性低的人物被拍摄到的图像的情况下，编辑辅助部26将与该 重要性低的人物被拍摄到的图像相比重要性高的人物被拍摄到的未 使用图像，优先地显示在未使用图像的一览内。人物场所的情况下也 相同。

另外，编辑辅助部26，也可以不仅变更未使用图像的一览的显 示方法，还将由自动布局部12生成的布局显示在画面显示部28的编 辑画面上，作为辅助信息。

例如，在照片书的规定的页面上，用户对该页面的布局进行编 辑的情况下，自动布局部12基于用户的喜好，自动地选择图像，并 使用所选择的图像生成布局。并且，编辑辅助部26将由自动布局部 12生成的布局显示在画面显示部28的画面上，作为辅助信息。

因此，用户可以直接采用由编辑辅助部26提出的布局，或者参 照由编辑辅助部26提出的布局，进一步对编辑中的布局进行编辑。

此外，编辑辅助部26也可以基于用户的喜好，将背景底图、边 框装饰、剪贴画、文字输入用字体等装饰组件，显示在画面显示部 28的编辑画面上，作为辅助信息。

编辑辅助部26，例如在“儿童”的重要性高的情况下，优先显 示面向儿童的背景底图，或者，在“食物”图像的重要性高的情况下， 优先显示彰显“食物”图像的边框装饰。

因此，用户可以使用由编辑辅助部26提出的装饰组件，对编辑 中的布局进行装饰。

此外，在本实施方式的照片书这种，布局编辑装置10对由多个 页面构成的布局进行编辑的情况下，自动布局部12如图11所示，也 可以基于规定页面中的布局的编辑结果，生成多个页面中除了规定页 面以外的页面的布局。例如，在用户在合页版的1～2页将A某的图 像作为中心而追加的情况下，自动布局部12将合页版的3～4页及以 后的页面的布局变更为以A某为中心的布局。

此外，在本实施方式的照片书这种，布局编辑装置10对由多个 页面构成的布局进行编辑情况下，喜好推测部20也可以根据多个页 面之中的大于或等于2个页面的布局的编辑结果，推测用户的喜好。 当然，喜好推测部20也可以根据多个页面各自的布局的编辑时间， 推测用户的喜好。

如上所述，基于用户的喜好，辅助用户对布局的编辑作业，从 而可以使用户从大量未使用的图像中容易地选择期望的未使用图像， 可以有效地进行编辑作业。

在上述实施方式中，对将本发明应用于由多个页面构成的照片 书中的情况进行了说明，但本发明并不限定于此，并不一定是由多个 页面构成的，对于由1个页面构成的布局，也同样地适用。

另外，本发明的布局编辑的方法，可以作为用于通过计算机实 施该各个步骤的程序而实现。另外，也可以是记录了该程序的计算机 可读取的存储介质。

本发明基本上如上所述。

以上，对本发明详细进行了说明，但本发明并不限定于上述实 施方式，在不脱离本发明的主旨的范围内，当然也可以进行各种改良 和变更。

标号的说明

10布局编辑装置

12自动布局部

14指示输入部

16布局编辑部

18图像解析部

20喜好推测部

22喜好保存部

24图像评价部

26编辑辅助部

28画面显示部

30布局的显示画面

32布局显示区域

34未使用图像显示区域

36指示输入区域

38向右按钮

40向左按钮

42“进行编辑”按钮

44“保存”按钮

46“返回”按钮

48“布局变更”按钮

50布局的编辑画面

51编辑图像

52未使用图像

54向下按钮

56向上按钮