数字图像处理设备和控制所述数字图像处理设备的方法

摘要

一种数字图像处理设备和控制所述数字图像处理设备的方法。所述数字图像处理设备，包括：显示控制器，用于在显示单元上显示第一内容；图像产生器，用于基于可能从用户输入的拍摄信号来产生第二内容，以及产生与第二内容相关的第三内容。

说明书

技术领域

本申请要求于2012年1月17日提交到韩国知识产权局的第 10-2012-0005276号韩国专利申请的权益，所述申请的公开通过引用全部包含 于此。

背景技术

在此公开了一种数字图像处理设备和控制所述数字图像处理设备的方 法。

数字图像处理设备(诸如数字相机和摄像机)在一部分程度上由于电池 的小型化和发展等而变得便携，因此无论在任何地方都易于捕捉图像。另外， 即使用户并不是专家，数字图像处理设备也为用户提供各种功能来捕捉高质 量图像。

此外，数字图像处理设备提供用于在捕捉图像时或在捕捉图像之后编辑 图像的各种功能，使得用户可产生具有期望的形式的图像。

发明内容

本发明的一个或多个实施例提供了一种能够各种地制造与运动图像相关 的附加内容的数字图像处理设备以及一种控制所述数字图像处理设备的方 法。

根据本发明的实施例，提供了一种数字图像处理设备，包括：显示控制 器，用于在显示单元上显示第一内容；图像产生器，用于基于输入的拍摄信 号来产生第二内容，以及产生与第二内容相关的第三内容，其中，可从用户 输入所述输入的拍摄信号。

第三内容可以是基于拍摄信号被施加的时间点而产生的预定时间的运动 图像。

所述预定时间可包括拍摄信号被施加的时间点之前的间隔。

第三内容可包括指示第一内容的开始时间和结束时间的指针。

当第一内容的显示结束时可确定第三内容的最终产生。

第一内容可以是实时捕捉的运动图像。

第一内容可以是存储的运动图像。

第三内容的分辨率可低于或等于第二内容的分辨率。

显示控制器可在再现第二内容时同时再现第三内容。

当第二内容被再现时，显示控制器可首先再现第三内容，并在第三内容 的再现结束之后再现第二内容。

根据本发明的另一实施例，提供了一种控制数字图像处理设备的方法， 所述方法包括：显示第一内容；基于输入的拍摄信号产生第二内容，其中， 可从用户输入所述输入的拍摄信号；产生与第二内容相关的第三内容。

产生第三内容的步骤可包括：基于第二内容被产生的时间点来产生预定 时间的运动图像。

所述预定时间可包括拍摄信号被施加的时间点之前的间隔。

产生第三内容的步骤可包括：按照第三内容包括指示第一内容的开始时 间和结束时间的指针的方式产生第三内容。

所述方法还可包括：确定产生的第三内容的最终产生。

第一内容可以是运动图像。

第三内容的分辨率可低于或等于第二内容的分辨率。

根据本发明的另一实施例，提供了一种控制数字图像处理设备的方法， 其中，所述数字图像处理设备存储从构成运动图像的第一内容产生的第二内 容和与第二内容相关的第三内容，所述方法包括：再现第二内容和第三内容 中由用户选择的一个内容。

可在再现第二内容时同时再现第三内容。

再现的步骤可包括：当第二内容被再现时，首先再现第三内容，然后在 第三内容的再现结束之后再现第二内容。

第二内容可以是静止图像，第三内容可以是运动图像。

附图说明

通过参照附图对本发明的示例性实施例进行的详细描述，本发明的上述 和其他特点和优点将会变得更加清楚，其中：

图1是根据本发明的实施例的数字图像处理设备的框图；

图2是根据本发明的实施例的中央处理单元/数字信号处理器 (CPU/DSP)的框图；

图3是用于描述图2的CPU/DSP中的图像处理操作的框图；

图4是用于描述根据本发明的实施例的图像信号处理器的输入图像和输 出图像之间的关系的框图；

图5是用于描述根据本发明的实施例的产生内容的方法的时序图；

图6是用于描述根据本发明的另一实施例的产生内容的方法的时序图；

图7是用于描述根据本发明的另一实施例的产生内容的方法的时序图；

图8是用于描述根据本发明的实施例产生的内容的框图；

图9是根据本发明的实施例产生的内容的再现图像的示意图；

图10和图11是示出根据本发明的实施例的控制数字图像处理设备的方 法的流程图；

图12是示出根据本发明的另一实施例的控制数字图像处理设备的方法 的流程图；

图13是示出根据本发明的另一实施例的控制数字图像处理设备的方法 的流程图；

图14是示出根据本发明的另一实施例的控制数字图像处理设备的方法 的流程图；

图15是示出根据本发明的另一实施例的控制数字图像处理设备的方法 的流程图。

具体实施方式

因为本发明允许各种改变和多个实施例，因此将在附图中示出并且在写 出的说明书中详细描述具体实施例。然而，这并不意在将本发明限制在具体 实施模式，将理解，未脱离本发明的精神和技术范围的所有改变、等同物和 替代物被包含在本发明中。在本发明的描述中，当认为现有技术的某些详细 解释可能不必要地使本发明的本质模糊时，省略所述详细解释。

在本说明书中使用的术语仅仅被用于描述具体实施例，而不意在限制本 发明。除非在上下文中有明确地不同含义，否则用于单数形式的表达包括复 数的表达。在本说明书中，将理解，诸如“包括”或“具有”等的术语意在 指示在说明书中公开的特征、编号、步骤、动作、组件、部件或它们的组合 的存在，而不意在排除一个或多个其他特征、编号、步骤、动作、组件、部 件或它们的组合可能存在或者可能被添加的可能性。

不管附图序号如何，那些相同或相应的组件被表示为相同的标号，并且 省略多余的解释。

图1是根据本发明的实施例的数字图像处理设备1的框图。

参照图1，数字图像处理设备1可包括拍摄单元100、模拟信号处理器 110、中央处理单元/数字信号处理器(CPU/DSP)120、随机存取存储器(RAM) 130、存储器控制器140、存储器150、只读存储器(ROM)160、显示驱动 器170、显示单元171和操纵单元180。

数字图像处理设备1的总体操作由CPU/DSP 120控制。CPU/DSP 120向 镜头驱动器102、光圈驱动器104、图像拾取装置控制器106等提供用于操作 每个元件的控制信号。在当前实施例中，执行控制功能的CPU和执行信号处 理的DSP被配置为一个装置，但是可选择地，CPU和DSP可被配置为单独 的元件。

拍摄单元100是用于从入射光产生电信号的图像的元件。拍摄单元100 可包括镜头101、镜头驱动器102、光圈103、光圈驱动器104、图像拾取装 置105、图像拾取装置控制器106等。

镜头101可包括多组透镜或多个透镜。镜头101的位置可由镜头驱动器 102调整。镜头驱动器102根据CPU/DSP 120提供的控制信号调整镜头101 的位置。

光圈103的开/关程度由光圈驱动器104调整，并且光圈103调整入射到 图像拾取装置105上的光的量。光圈驱动器104根据CPU/DSP 120提供的控 制信号驱动光圈103。

图像拾取装置105通过捕捉经过镜头101和光圈103的对象的图像光来 产生图像信号。图像拾取装置105可包括按照矩阵形式布置的多个光电转换 装置、用于从光电转换装置传输电荷的电荷传输路径等。图像拾取装置105 可以是电荷耦合器件(CCD)图像传感器或互补金属氧化物半导体(CIS)图 像传感器。

图像拾取装置105的灵敏度等可由图像拾取装置控制器106调整。图像 拾取装置控制器106可根据由实时输入的图像信号而自动产生的控制信号或 根据用户手动输入的控制信号来控制图像拾取装置105。

图像拾取装置105的曝光时间由快门(未示出)调整。快门的示例包括 通过移动幕帘来调整光的入射的机械快门以及通过向图像拾取装置105提供 电信号来调整曝光的电子快门。

图像拾取装置控制器106产生时序信号并将所述时序信号施加到图像拾 取装置105，从而控制图像拾取装置105的成像操作。此外，当沿着图像拾 取装置105的每一扫描行的电荷累积完成时，图像拾取装置控制器106控制 图像拾取装置105顺序地读取图像信号。

模拟信号处理器110对从图像拾取装置105供应的模拟图像信号执行降 噪处理、增益调整、波形归一化、模数转换处理等。由模拟信号处理器110 处理的信号可通过RAM 130或者不通过RAM 130而被输入到CPU/DSP 120。

RAM 130用作数字图像处理设备1的主存储器，并临时存储当操作 CPU/DSP 120时所需的信息。ROM 160存储诸如操作系统或应用系统的程序， 以操作数字图像处理设备1。

存储器控制器140控制对存储器150的数据输入和输出。存储器150可 存储诸如静止图像或运动图像的文件。存储器150可单独存储构成第二内容 的双重捕捉图像和构成第三内容的运动图像精彩片段，其中，构成第二内容 的双重捕捉图像针对构成第一内容的主运动图像而被产生，构成第三内容的 运动图像精彩片段与双重捕捉图像一起被产生。此外，存储器150可将关于 第一内容到第三内容之间的相关信息的元数据存储在单独的文件中。

显示驱动器170控制对显示单元171的图像输出。

显示单元171可显示实时捕捉的实时取景图像、在图像捕捉之后临时显 示的快速查看图像、存储的图像的再现图像等。此外，显示单元171可显示 各条设置信息。

显示单元171和显示驱动器170可分别是液晶显示器(LCD)和LCD驱 动器。可选择地，显示单元171和显示驱动器170可分别是有机发光显示器 (OLED)和OLED驱动器。此外，用于识别触摸输入的触摸屏可作为操纵 单元180被设置在显示单元171。

操纵单元180是用于通过从用户接收各种命令来产生控制信号以操纵数 字图像处理设备1的单元。操纵单元180可包括各种输入键，诸如电源按钮、 快门释放按钮、变焦按钮、模式转盘、菜单按钮、四向按钮和拨盘。此外， 操纵单元180可包括检测用户的身体部分的接触并根据接触产生命令的触摸 屏。

CPU/DSP 120处理输入图像信号，并根据经过处理的输入图像信号或外 部输入信号控制每个元件。以下将参照图2和图3详细描述CPU/DSP 120。

图2是根据本发明的实施例的CPU/DSP 120的框图。

参照图2，CPU/DSP 120可包括图像信号处理器(ISP)121、运动图像 产生器122、静止图像产生器123、显示控制器124、控制器125和计时器126。

ISP 121降低输入图像数据中的噪声，并可执行用于提高图像质量的图像 信号处理，诸如伽马校正、滤色器阵列插值、颜色矩阵处理、颜色校正和颜 色增强。

ISP 121还可执行降噪处理、色彩处理、模糊处理、边缘增强处理、图像 插值处理、图像识别处理和图像效果处理。图像识别处理的示例包括面部识 别处理和场景识别处理。此外，ISP 121可执行用于在显示单元171上显示图 像的显示图像信号处理。例如，ISP 121可执行照明级别调整、颜色校正、对 比度调整、轮廓增强调整、屏幕划分处理、特征图像产生和图像合成处理。

数字图像处理设备1可连接到外部监视器，ISP 121可执行预定图像信号 处理，使得图像被显示在外部监视器上。经过处理的图像数据被发送到外部 监视器，并且对应的图像可被显示在外部监视器上。

运动图像产生器122可通过执行用于提高图像质量的图像信号处理并压 缩产生的图像数据来产生运动图像的文件。此外，运动图像产生器122可从 运动图像的文件恢复运动图像数据。可按照有损方式或无损方式压缩图像。

类似地，静止图像产生器123可通过执行用于提高图像质量的图像信号 处理并压缩产生的图像数据来产生静止图像的文件。此外，静止图像产生器 123可从静止图像的文件恢复静止图像数据。可按照有损方式或无损方式压 缩图像。

例如，静止图像可被转换为联合图像专家组(JPEG)格式或JPEG 2000 格式。此外，当运动图像被记录时，可通过根据运动图像专家组(MPEG) 标准压缩多个帧来产生运动图像的文件。可根据可交换图像文件格式(Exif) 标准来产生图像文件。

在当前实施例中，运动图像产生器122和静止图像产生器123被配置为 单独的单元，但是可选择地，它们可被配置为一个单元，并可根据输入图像 的类型执行合适的操作。

显示控制器124控制显示驱动器170以控制显示单元171上的图像显示。 例如，显示控制器124可控制显示驱动器170，使得正被捕捉的运动图像或 存储在存储器150中的运动图像被显示在显示单元171上。此外，在静止图 像正被再现时，显示控制器124可控制相关运动图像精彩片段的再现。

控制器125控制CPU/DSP 120中的每个元件。控制器125可执行存储在 ROM 160中的程序，或者可通过包括单独的模块来产生用于控制自动对焦、 变焦改变、对焦改变或自动曝光校正的控制信号。控制器125将产生的控制 信号提供给镜头驱动器102、光圈驱动器104和图像拾取装置控制器106，并 可控制包括在数字图像处理设备中的元件(诸如快门和闪光灯)的总体操作。

此外，控制器125可控制每个元件，使得所述元件根据经由操纵单元180 的操纵供应的信号执行操作。

计时器126提供时间信息。计时器126提供的时间信息可被插入到由运 动图像产生器122或静止图像产生器123产生的文件的头部区域。此外，时 间信息可被用作用于指示何时从主运动图像捕捉双重捕捉图像的指针。类似 地，时间信息可用作用于指示何时针对主运动图像的时间间隔产生运动图像 精彩片段的起始指针和结束指针。

从ISP 121输出的图像数据被直接输入到存储器控制器140或者通过 RAM 130被输入到存储器控制器140。存储器控制器140将图像数据自动存 储在存储器150中或者根据来自用户的信号将图像数据存储在存储器150中。 此外，存储器控制器140从存储器150中存储的图像文件读取关于图像的数 据，并通过RAM 130和显示控制器124或者通过另一路径将读取的数据输入 到显示驱动器170，从而图像被显示在显示单元171上。存储器150可以是 可拆卸的或者可被永久地安装在数字图像处理设备1中。

图3是用于描述图2的CPU/DSP 120中的图像处理操作的框图。在图3 中仅示出用于描述图像处理操作所需的元件。

在描述图3之前，将描述根据本发明的实施例的由数字图像处理设备1 产生的内容。

数字图像处理设备1可通过根据捕捉模式中的运动图像捕捉模式捕捉运 动图像，以产生运动图像的文件。当用户在捕捉运动图像的预定时间点施加 用于捕捉静止图像的捕捉信号时，从运动图像单独产生静止图像。换句话说， 双重捕捉图像被产生为针对构成第一内容的主运动图像的第二内容。此外， 当捕捉信号被施加以产生双重捕捉图像时，数字图像处理设备1基于捕捉信 号被施加的时间点在预定时间间隔期间单独产生运动图像。这样的运动图像 是构成与第二内容相关的第三内容的运动图像精彩片段。

数字图像处理设备1可再现已捕捉和存储的运动图像。如上所述，可针 对再现的运动图像产生构成第二内容的双重捕捉图像和构成第三内容的运动 图像精彩片段。

现在将详细描述上述主运动图像、双重捕捉图像和运动图像精彩片段的 产生。

参照图3，传感器输出被输入到CPU/DSP 120的ISP 121。这里，传感器 输出是这样的图像信号：所述图像信号从图像拾取装置105输出，并由模拟 信号处理器110对所述图像信号执行各种信号处理以及到数字信号的转换。

如上所述，ISP 121执行各种图像信号处理。此外，ISP 121对传感器输 出执行按比例缩小以保证传感器输出是标准尺寸。

图4是用于描述根据本发明的实施例的ISP 121的输入图像和输出图像 之间的关系的框图。从ISP 121输出的ISP输出小于传感器输出。从图像拾取 装置105输出的图像信号是实际文件，因此在尺寸上大于存储的运动图像。 因此，ISP 121将传感器输出按比例缩小到标准尺寸。所述标准尺寸可以是全 高清(HD)、HD或标清(SD)。

同时，可根据用户的控制(例如，当用户按下快门释放按钮时)产生双 重捕捉图像。这里，双重捕捉图像是静止图像。双重捕捉图像的尺寸可根据 设置而与传感器输出的尺寸相同。因此，ISP 121暂时存储未执行按比例缩小 的传感器输出，并可在需要产生双重捕捉图像时使用存储的传感器输出。ISP 121可包括用于存储传感器输出的缓冲存储器。可选择地，传感器输出可被 暂时存储在RAM 130中。

被ISP 121处理和输出的ISP输出被发送到运动图像产生器122。运动图 像产生器122通过使用作为编解码器(Codec)接收的ISP输出来产生运动图 像流，并通过使用产生的运动图像流产生运动图像的文件。这里，产生的运 动图像的文件是构成第一内容的主运动图像。

此外，当快门释放按钮被按下时(即，当双重捕捉命令被施加时)，ISP 121 将存储在缓冲存储器等中的全尺寸的传感器输出发送到静止图像产生器123。 当然，发送到静止图像产生器123的全尺寸的传感器输出也是由ISP 121执行 了各种图像信号处理的图像信号。

静止图像产生器123通过使用作为编解码器接收的ISP输出来产生静止 图像的文件。这里，产生的静止图像的文件是构成第二内容的双重捕捉图像。

另外，当双重捕捉命令被施加时，根据当前实施例的运动图像产生器122 基于双重捕捉命令被施加的时间点，在预定时间间隔期间产生运动图像的单 独文件。换句话说，运动图像产生器122产生构成第三内容的运动图像精彩 片段。

这里，可在捕捉主运动图像的同时产生运动图像精彩片段。如果所述预 定时间间隔包括双重捕捉命令被施加的时间点之前的间隔，则ISP 121或运动 图像产生器122可包括用于存储预定时间的ISP输出的缓冲存储器。因此， 双重捕捉命令被施加的时间点之前的帧图像可包括在运动图像精彩片段中。

可选择地，可在主运动图像的捕捉结束时产生运动图像精彩片段。可通 过使用关于所述预定时间间隔的时间信息从主运动图像提取需要的区域来产 生运动图像精彩片段。在这种情况下，即使所述预定时间间隔包括双重捕捉 命令被施加的时间点之前的间隔，也可以不需要单独的缓冲存储器。

当主运动图像的捕捉结束时，可根据产生的运动图像精彩片段是否被产 生为文件来最终确定产生的运动图像精彩片段。如果用户确定不需要运动图 像精彩片段，则可删除产生的运动图像精彩片段。可选择地，如果用户确定 需要运动图像精彩片段，则运动图像精彩片段被最终产生并被存储为运动图 像的文件。

为了在显示单元171上显示正被捕捉的图像，ISP121可将ISP输出发送 到显示控制器124。

显示控制器124将ISP输出发送到显示驱动器170，显示驱动器170可 在显示单元171上显示ISP输出。

图5是用于描述根据本发明实施例的产生内容的方法的时序图。在图5 中，当在运动图像捕捉模式下按下快门释放按钮时，开始运动图像捕捉操作。

参照图5，图像拾取装置105和运动图像产生器122根据运动图像捕捉 操作以预定时间段(例如，以1/60秒间隔)捕捉帧图像。通过使用捕捉的帧 图像产生运动图像流，并且当运动图像捕捉操作结束时，通过使用运动图像 流产生主运动图像的文件。

当在预定时间点按下快门释放按钮时，产生双重捕捉图像。双重捕捉图 像是静止图像，传感器输出的尺寸可按照原样被使用。换句话说，双重捕捉 图像可具有比主运动图像或运动图像精彩片段更高的分辨率。因此，临时存 储在ISP 121中的没有执行按比例缩小的传感器输出被用作双重捕捉图像。

这里，为了区分双重捕捉命令与主运动图像捕捉开始和结束命令，例如， 可通过半按下快门释放按钮来执行双重捕捉命令，并可通过完全按下快门释 放按钮来执行主运动图像捕捉开始和结束命令。在当前实施例中，仅使用快 门释放按钮，但是可选择地，可通过使用不同的按钮来执行双重捕捉命令和 主运动图像捕捉开始和结束命令。

此外，通过使用双重捕捉命令来执行用于捕捉运动图像精彩片段的操作。 在当前实施例中，运动图像精彩片段包括在施加双重捕捉命令的时间点之前 和之后的预定时间间隔Ta。时间间隔Ta可以是预先确定的，或者可由用户 设置或改变。

这样，在捕捉运动图像的同时，根据双重捕捉命令，不仅产生构成静止 图像的双重捕捉图像，而且产生与双重捕捉图像相关的运动图像精彩片段。

图6是用于描述根据本发明另一实施例的产生内容的方法的时序图。

观察图5和图6的方法之间的不同，图6的运动图像精彩片段仅包括在 施加双重捕捉命令的时间点之前的时间间隔Tb。

图7是用于描述根据本发明另一实施例的产生内容的方法的时序图。

观察图5和图7的方法之间的不同，图7的运动图像精彩片段仅包括在 施加双重捕捉命令的时间点之后的时间间隔Tc。

图8是用于描述根据本发明实施例产生的内容的示图。

参照图8，主运动图像被产生为第一内容，双重捕捉图像S1至Sn被产 生为与主运动图像相关的第二内容。此外，在产生双重捕捉图像S1至Sn的 同时，运动图像精彩片段M1至Mn被分别产生为与双重捕捉图像S1至Sn 相关的第三内容。

主运动图像、双重捕捉图像和运动图像精彩片段可以被存储为单独的文 件。此外，可在捕捉主运动图像结束时最终确定是否产生运动图像精彩片段。 换句话说，可仅产生双重捕捉图像，可不产生与双重捕捉图像相关的运动图 像精彩片段。运动图像精彩片段的产生可根据运动图像精彩片段被单独确定。

如上所述，根据当前实施例的数字图像处理设备1可在捕捉运动图像的 同时，在期望的时间点产生具有比运动图像更大尺寸(更高分辨率)的静止 图像，并且可单独地产生和再现与静止图像相关的运动图像精彩片段。

图9是根据本发明实施例产生的内容的再现图像的示图。

参照图9，当再现存储的运动图像时，在显示单元171上显示运动图像 屏幕900。此外，与运动图像相关的双重捕捉图像的缩略图像901至903也 可分别显示在显示单元171的区域(例如，显示单元171的底部)上。

用于指示整个运动图像中的当前再现位置的状态条901可显示在显示单 元171上。相应的双重捕捉图像的缩略图像可设置在状态条910上捕捉双重 捕捉图像的位置。捕捉双重捕捉图像的位置是时间位置，并且双重捕捉图像 的位置可通过使用指针来确定。

此外，当产生与双重捕捉图像相关的运动图像精彩片段时，状态条910 可显示包括运动图像精彩片段的时间间隔。显示时间间隔的位置可通过使用 开始指针SP1至SP3以及结束指针EP1至EP3来确定。

现在将详细描述包括开始指针和结束指针的指针或元数据。

为了在再现主运动图像的同时显示如图9所示的双重捕捉图像和运动图 像精彩片段或者与主运动图像相关的信息，需要记录图像彼此相关。这是因 为，当识别在捕捉相应的运动图像的同时存储的静止图像时，可以在再现运 动图像的同时链接相应的静止图像。

因此，元数据应该包括关于主运动图像、双重捕捉图像和运动图像精彩 片段的文件信息。这里，所述文件信息可以是主运动图像、双重捕捉图像和 运动图像精彩片段的文件名。

此外，元数据包括关于捕捉主运动图像、双重捕捉图像和运动图像精彩 片段的时间点的时间信息。主运动图像的时间信息是关于运动图像捕捉开始 时间的信息。双重捕捉图像的时间信息是关于运动图像中的帧编号或施加双 重捕捉命令的时间点的信息。运动图像精彩片段的时间信息是运动图像精彩 片段的开始时间和结束时间。可选择地，运动图像精彩片段的时间信息可以 是在开始时间和结束时间的主运动图像中的帧编号。

可通过将文件信息和时间信息包括在元数据中来管理文件信息和时间信 息，并且可通过使用各种方法中的任意一种来管理元数据。

可通过将元数据存储在主运动图像的头中作为扩展元数据来管理元数 据。可选择地，元数据可包括在双重捕捉图像或运动图像精彩片段的头中。 可选择地，不同范围的元数据可存储在每个内容中。例如，包括关于主运动 图像、双重捕捉图像和运动图像精彩片段的所有信息的元数据可记录在主运 动图像的头中，包括关于双重捕捉图像和运动图像精彩片段的信息的元数据 可记录在双重捕捉图像的头中，包括关于运动图像精彩片段的信息的元数据 可记录在运动图像精彩片段的头中。

可选择地，可通过将元数据存储为与每个内容分开的元文件来管理元数 据。这里，元文件可以是包括主运动图像、双重捕捉图像和运动图像精彩片 段的所有元数据的一个文件的形式。可选择地，元文件可以根据主运动图像 被单独地产生和存储。换句话说，每个元文件可仅包括关于针对相应的主运 动图像产生的双重捕捉图像和运动图像精彩片段的信息。

图10和图11是示出根据本发明实施例的控制图1的数字图像处理设备 1的方法的流程图。

参照图10，当开始捕捉模式时，在操作S100，在图像拾取装置中执行周 期性的成像。在操作S101，通过周期性的成像产生的图像信号被处理，并且 随后作为实时取景图像被显示在显示单元171上。

在操作S102，确定是否存在通过用户的快门输入，即，是否按下快门释 放按钮。如果确定不存在快门输入，则执行操作S100以显示实时取景图像。 另一方面，如果确定存在快门输入，则在操作S103，确定数字图像处理设备 1是否处于运动图像捕捉模式。

如果确定数字图像处理设备1没有处于运动图像捕捉模式，则确定数字 图像处理设备1处于静止图像捕捉模式，从而在操作S104执行自动聚焦(AF) 和自动曝光(AE)操作，并且在操作S105捕捉图像。然后，对捕捉的图像 执行各种图像信号处理，然后在操作S106产生静止图像的文件。

另一方面，如果确定数字图像处理设备1处于运动图像捕捉模式，则执 行运动图像捕捉操作。

参照图11，当开始运动图像捕捉操作时，在操作S200，通过使用ISP输 出来产生运动图像流。操作S200被连续执行，直到运动图像捕捉操作结束。

在操作S201，在产生运动图像流的同时确定用户是否施加了双重捕捉命 令，如果没有双重捕捉命令，则重复执行操作S200和确定是否结束运动图像 捕捉操作的操作S202。

另一方面，如果在产生运动图像流的同时施加了双重捕捉命令，则在操 作S203，产生双重捕捉图像。然后，在操作S204，产生与双重捕捉图像相关 的运动图像精彩片段。

在操作S205，确定运动图像捕捉操作是否结束，如果运动图像捕捉操作 没有结束，则重复操作S200至S204。如果在操作S205确定运动图像捕捉操 作结束，则在操作S206确定是否存储关于双重捕捉图像产生的运动图像精彩 片段。

如果确定用户存储运动图像精彩片段，则在操作S207，主运动图像、双 重捕捉图像和运动图像精彩片段的文件被分别产生和存储。另一方面，如果 确定用户不存储运动图像精彩片段，则在操作S208，主运动图像和双重捕捉 图像的文件被分别产生和存储。

在当前实施例中，在主运动图像的捕捉结束之后确定运动图像精彩片段 的存储，但是可选择地，所有运动图像精彩片段的文件可以被自动地产生和 存储，而不需要用户的决定。可选择地，可以按批或单独地确定运动图像精 彩片段的文件的产生。此外，可不仅针对运动图像精彩片段，而且针对双重 捕捉图像，来确定文件的产生。

图12是示出根据本发明另一实施例的控制图1的数字图像处理设备1 的方法的流程图。

参照图12，在操作S300，通过从主运动图像的选择的文件提取并显示运 动图像流来执行运动图像再现操作。运动图像被连续地再现，直到运动图像 再现操作结束。

在再现运动图像的同时，在操作S301，确定用户是否施加双重捕捉命令， 如果没有施加双重捕捉命令，则重复执行操作S300和确定是否结束运动图像 再现操作的操作S302。

如果在再现运动图像的同时施加了双重捕捉命令，则在操作S303，通过 从运动图像流提取帧图像来产生双重捕捉图像。这里，因为与在捕捉运动图 像的同时产生的双重捕捉图像不同，所以双重捕捉图像的最大分辨率是正被 再现的运动图像的分辨率，此时产生的双重捕捉图像的可获得的最大分辨率 是正被再现的运动图像的分辨率。

接着，在操作S304，通过提取正被再现的运动图像流的间隔来产生与双 重捕捉图像相关的运动图像精彩片段。

在操作S305，确定运动图像再现操作是否结束，如果没有结束，则重复 操作S300至S304。如果在操作S305确定运动图像再现操作结束，则在操作 S306，确定是否存储通过双重捕捉命令产生的运动图像精彩片段。

如果确定用户存储运动图像精彩片段，则在操作S307，双重捕捉图像和 运动图像精彩片段的文件被另外地分别产生和存储。另一方面，如果确定用 户不存储运动图像精彩片段，则在操作S308，仅有双重捕捉图像的文件被另 外地产生和存储。

在当前实施例中，在主运动图像的再现结束之后确定运动图像精彩片段 的存储，但是可选择地，可如上所述以任何方法确定双重捕捉图像和运动图 像精彩片段的文件的产生。

图13是示出根据本发明另一实施例的控制图1的数字图像处理设备1 的方法的流程图。

参照图13，当在操作S400用户选择静止图像时，在操作S401，确定是 否存在与选择的静止图像相关的运动图像精彩片段。

如果确定存在与作为双重捕捉图像的选择的静止图像相关的运动图像精 彩片段，则在操作S402，同时再现静止图像和运动图像精彩片段。例如，静 止图像可被再现到整个屏幕上，而运动图像精彩片段可以以小的尺寸再现到 显示单元171的部分区域上。另一方面，运动图像精彩片段可被再现到整个 屏幕上，而静止图像可以以小的尺寸再现到显示单元171的部分区域上。

同时，如果在操作S401确定不存在与选择的静止图像相关的运动图像精 彩片段，则在操作S403，仅有静止图像被再现。

图14是示出根据本发明另一实施例的控制图1的数字图像处理设备1 的方法的流程图。图14的方法与图13的方法的不同之处在于运动图像精彩 片段的再现，将仅描述这一不同。

参照图14，如果在操作S501确定存在与作为双重捕捉图像的选择的静 止图像相关的运动图像精彩片段，则在操作S502首先再现运动图像精彩片 段。然后，当运动图像精彩片段的再现结束之后，在操作S503再现选择的静 止图像。

图15是示出根据本发明另一实施例的控制图1的数字图像处理设备1 的方法的流程图。在当前实施例中，将如下的主运动图像选择为运动图像： 该主运动图像的双重捕捉图像和运动图像精彩片段被产生。

参照图15，在操作S600，通过从主运动图像的选择的文件提取和显示运 动图像流来再现运动图像。运动图像被连续地再现，直到运动图像再现操作 结束。

然后，在操作S601，将关于与主运动图像相关的双重捕捉图像和运动图 像精彩片段的信息一起显示。例如，所述信息可以是指示从正被再现的主运 动图像捕捉双重捕捉图像的时间点的指针或者指示捕捉运动图像精彩片段的 间隔的指针。可通过从记录在主运动图像的头区域的元数据或单独的元数据 提取文件信息或时间信息来显示所述信息。

然后，在操作S602，在再现主运动图像的同时确定用户是否选择了与主 运动图像一起显示的双重捕捉图像。如果选择了双重捕捉图像，则如参照图 13和图14所述再现静止图像。虽然没有示出，但是可暂时再现双重捕捉图 像，然后在预定时间之后再次再现主运动图像。

此外，在操作S603，再现主运动图像的同时确定用户是否选择了运动图 像精彩片段。如果选择了运动图像精彩片段，则在操作S604再现选择的运动 图像精彩片段，然后在操作S605确定运动图像精彩片段的再现是否结束。然 后，当运动图像精彩片段的再现结束时，再次再现主运动图像。

如果在操作S602和S603没有选择内容，则在操作S606，在确定运动图 像的再现是否结束的同时再现主运动图像。如果确定运动图像的再现没有结 束，则执行操作S600。

如上所述，根据当前实施例的数字图像处理设备1可在捕捉运动图像的 同时在用户期望的时间点产生具有比运动图像更大尺寸(或更高分辨率)的 静止图像，并单独产生和再现与静止图像相关的运动图像精彩片段。

根据本发明的实施例，数字图像处理设备可通过不同地产生与运动图像 相关的附加内容来满足用户的多样化口味。

本发明还可实施为计算机可读记录介质上的计算机可读代码。计算机可 读记录介质是能够存储其后可由计算机系统读取的数据的任何非易失性数据 存储装置。

计算机可读代码被配置为当通过处理器(例如，CPU/DSP 120)从计算 机可读记录介质读取和执行时，执行用于实现根据本发明的控制数字图像处 理设备的方法的操作。计算机可读代码可以以各种编程语言来实现。此外， 用于实现本发明的功能程序、代码和代码段可以由本发明所属领域的编程技 术人员容易地理解。

计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器 (RAM)、CD-ROM、磁带、软盘、光学数据存储装置等。计算机可读记录 介质还可分布在网路连接的计算机系统上，从而以分布方式存储和执行计算 机可读代码。

这里引用的所有参考文献(包括出版物、专利申请和专利)通过以就像 每一篇参考文献被单独和具体指示为通过引用合于此并在整体阐明于此一样 的程度被参考而合并于此。

这里的实施例可以按照功能块组件和各种处理步骤被描述。这种功能块 可以由任意数量的执行特定功能的硬件和/或软件组件来实现。例如，描述的 实施例可采用可在一个或多个微处理器或其他控制装置的控制下实现各种功 能的各种集成电路组件，如存储器元件、处理元件、逻辑元件、查找表等。 可以以在一个或多个处理器上运行的算法来实现功能方面。此外，本发明的 实施例可采用任意数量的用于电子构造、信号处理和/或控制、数据处理等的 传统技术。

为了简洁的原因，系统的传统电子设备、控制系统、软件开发和其他功 能方面(以及系统的单独操作组件的组件)可以不详细描述。此外，呈现的 各种附图中示出的连接线或连接器旨在表示各种元件之间的示例性功能联系 和/或物理或逻辑连接。应该注意，在实际装置中可能存在许多可选择的或附 加的功能关系、物理连接或逻辑连接。此外，除非元件被具体描述为“必须 的”或“关键的”，否则没有项或组件对于实施本发明是必须的。

这里使用“包括”、“包含”或“具有”及其变型表示包含其后列出的项 及其等同物以及附加项。除非另外指明或限制，否则术语“安装”、“连接”、 “支持”和“连结”及其变型被广义地使用，并且包含直接和间接的安装、 连接、支持和连结。此外，“连接”和“连结”不限于物理或机械的连接和连 结。在一系列元件之后的诸如“中的至少一个”的表述修饰整个一系列元件， 而不是修饰该系列中的单独元件。

除非这里另外指出或者除非通过上下文明显矛盾，否则这里描述的所有 方法的步骤可以以任何适当的顺序被执行。除非另外声明，否则这里提供的 任何和所有示例或示例性语言(例如，“诸如”)的使用仅意图更好地说明本 发明，而不是对本发明的范围加以限制。词语“机构”和“元件”在这里被 一般性地使用，而不是单独限于机械实施例。

尽管已经参照本发明的实施例具体显示和描述了本发明，但是本领域普 通技术人员将理解，在不脱离由权利要求限定的本发明的精神和范围的情况 下，可进行各种形式和细节上的改变。实施例应该仅以描述性的意义，而非 限制的目的被理解。因此，本发明的范围不是由本发明的详细描述来限定， 而是由权利要求来限定，并且所述范围之内的所有不同将被解释为包括在本 发明中。