信息创建方法、信息创建设备和网络信息处理系统

摘要

一种信息创建方法，包括以下步骤：记录来自活动图像/音频输入设备的活动图像/音频信息；记录显示在连接到网络的多个显示设备上的静止图像信息；以及在记录静止图像信息期间为活动图像/音频信息创建静止图像信息再现管理列表。该再现管理列表允许用来按照时间序列掌握在什么时候、从哪个显示设备、采用什么文件名显示静止图像。即使当再现采用HTML格式表达的内容时，也有可能容易地选择要在同一屏幕上再现的显示模式，因此有可能无误地在分割屏幕中容纳所有静止图像信息，并且显示它们。有可能实现如同实际进行的会议的状态。

说明书

技术领域

本发明涉及一种信息创建方法、信息创建设备和网络信息处理系统。更具体地说，首先，它涉及一种信息创建方法、信息创建设备和网络信息处理系统，通过其，当使用多台显示器来显示从活动图像/音频输入设备发送的活动图像/音频信息时，与活动图像/音频信息同步记录显示在各台显示器上的多条静止画面信息，并且根据这些信息创建再现内容，从而即使从多台显示器提供多条静止画面信息时也提供这些静止画面信息的同时显示，以使得能够防止丢失信息显示。

因此，在本发明所涉及的网络信息处理系统应用于电子会议系统等的情况下，即使当使用多台投影仪来显示演示材料以便会议可以进行时，也能记录显示在多台投影仪上的多个演示材料，并且当要再现它们的内容时，与会议的进展同步地将这些演示材料显示在同一屏幕上。

第二，本发明涉及这样一种信息创建方法、信息创建设备和网络信息处理系统，通过其，即使在从多台显示器提供多条静止画面信息的情况下，通过提供多条静止画面信息的同时显示并实际提供实际与所得到的活动图像/音频信息同步再现的这些静止画面信息的放大显示，也能容易地查看该静止画面信息的内容。

因此，在本发明所涉及的网络信息处理系统应用于电子会议系统等的情况下，有可能与会议的进展同步在同一屏幕上显示演示材料，并且提供这些实际使用的演示材料的放大显示，以便可以容易地查看其内容。

第三，本发明涉及这样一种信息创建方法和网络信息处理系统，通过其，与活动图像/音频信息同步地与再现管理列表一起记录显示在多台显示器上的多条静止画面信息，以便在再现时，可以在同一屏幕上显示这些静止画面信息，而且即使当在搜寻(seeking)模式下再现活动图像/音频信息时，通过参考插入在该活动图像/音频信息中的再现时间信息和存在于再现管理列表中的时间管理信息，从而使得能够再现对应于搜寻完成时间的静止画面信息。

因此，在本发明所涉及的网络信息处理系统应用于电子会议系统等的情况下，可以反映(reflect)目标图像，并且在搜寻出反映会议状态的图像的情况下可以显示与目标图像相关的演示材料，从而即使当搜寻出该图像时，也与该图像同步地显示与在实际举行的会议中实际上所使用相同的材料。

第四，本发明涉及这样一种信息创建方法、信息创建设备和网络信息处理系统，通过其，当使用多台显示器时，与活动图像/音频信息同步地记录分别显示在这些显示器上的多条静止画面信息，并且如果给出捕获指令时，记录该捕获指令所指向的显示器上的多条静止画面信息之一，从而使得能够在活动图像/音频信息与静止画面信息之间建立更紧密的对应关系。

因此，在本发明所涉及的网络信息处理系统应用于电子会议系统的情况下，当在使用视频投影仪显示演示材料的情况下开展会议时，当滚动导致显示内容发生不一致时，即使其是先前使用的演示材料之一，也可以通过给出捕获指令来记录和再现与在实际举行的会议中所使用的相同的材料。

背景技术

可能的利用网络的信息处理系统可以包括网络电子会议系统(网络会议系统)、网络教育系统、网络游戏系统等。

例如，在其中的网络电子会议系统中，利用视频摄像机拍摄会议情况，并使用视频投影仪将演示中使用的材料提供给会议参加者。

为了记录如此获得的信息并在以后根据这些信息制作会议文集(会议内容)，典型地，常见的做法是相互分开地存储通过拍摄会议状态而获得的活动图像/音频信息和在会议中使用的静止画面信息(在演讲中使用的演示材料)。这是因为通常记录会议情况的活动图像/音频信息由会议组织者管理，而演示材料则由提供演示材料的人(发言者)本人来管理。这样，以后，当会议组织者下达命令时，会议参加者将使用相互分开地存储的这些信息来制作作为电子数据的会议文集(会议内容)。

因此，利用相互分开地存储的活动图像/音频信息和演示材料来制作会议文集是麻烦的。另外，它还产生下列问题。

为了举行会议，会议中使用的投影仪(视频投影仪等)的数目不限于一台。通常，在会议进行时经常使用若干台投影仪来显示不同的演示材料。

在使用一台投影仪的情况下，通过重复在再现包括在一天中的活动图像/音频信息时检查插入演示材料的时刻并在适当时刻将演示材料插入到活动图像/音频信息中的处理，可以电子方式创建一天的会议记录。

然而，当在会议进行使用若干台投影仪来显示不同的演示材料时，在发言进行时在每个场景中使用哪一个演示材料是不清楚的。

即使预先知道使用每个演示材料的时刻，在很多情况下也不能确定将演示材料合成到活动图像/音频信息中的时刻；而且，在这种情况下，代替紧邻之前使用的演示材料来插入新的演示材料，从而使先前的演示材料消失。然而，在实际会议中，在很多情况下，在会议进行时这些材料都会被使用。因此，不能在作为会议文集的会议内容中再现与实际上举行的会议相同的会议状态。

此外，会议主持者(发言者)将必要的演示材料传输到投影仪(视频投影仪等)以与会议的进展同步地将它们显示在视频投影仪上，在这种情况下，最好是在每次将材料传输到投影仪时记录它们，因为可以作为与会议的进展一致的材料来记录它们。

在这种情况下，如果能够同时记录会议状态，则可以相互同时地再现会议状态以及在会议中使用的演示材料，以便在记录完成之后可以重新组织所记录的信息以用作会议文集(会议内容)。

如果转换成例如HTML格式，则会议内容可以通过网络由特定第三方来查看或复制，这对于共享会议内容而言是非常方便的。

在会议内容中，当正在再现作为会议内容一部分的会议图像时，为了与该图像同步再现在会议中使用的演示材料，可以考虑采用如下方法，即将访问静止画面的静止画面信息、文本数据等所需的地址信息例如URL写入到该会议图像的流数据的一部分例如首标部分或用户区域中。

在再现时，通过在再现该流数据的情况下检索所插入的地址信息，并且当检测到地址信息时再现对应的演示材料，允许与会议图像同步再现该演示材料，从而创建具有最大真实感的会议内容。

然而，在再现会议内容时发生如下情况，即一个人想要通过在中途跳过其它内容来搜寻再现屏幕直到他或她找到希望再现的会议内容。同样在这种情况下，虽然可以在任意搜寻时刻再现会议图像，但是最好与相关会议图像同步来同时再现对应的演示材料。

然而，在采用上述方法来将地址信息插入到图像的流数据中的情况下，如果有地址信息插入到当搜寻完成时正常再现开始的流数据中，则可以与相关会议图像同步来再现和显示对应的演示材料。

然而，如果没有地址信息插入到搜寻完成时的图像流数据中，则不能检索对应的演示材料，从而不更新显示在再现屏幕上的演示材料，因此显示的是与正在再现的会议图像不直接相关的较旧演示材料。

因此不可能实现与会议图像同步再现和显示演示材料的期望目的。

此外，上述演示材料需要存储在会议文集中。为此，例如，可以采用这样一种方法，即检查发言者何时将材料传输到投影仪以便每次传输材料(文件)时可以逐文件地记录(存储)它们。

然而，如果所要显示的每个材料的大小(数据量)较大，则会出现不能将材料的所有部分都显示在投影仪上的情况。在这种情况下，虽然全部文件数据都被传输到投影仪侧，但在大多数情况下投影仪经常显示材料的一部分，因此导致会议在解说该显示的材料的同时向下进行。在多数情况下，根据解说的进行方式通过滚动屏幕来显示所传输的材料的其余部分，以便可以在观看材料时再次解说显示材料的详细信息。

在这种进行会议的情况下，为了与实际会议更同步地创建会议内容，除了传输到视频投影仪的所有材料之外，在实际解说中所使用的材料在创建会议内容中也是重要的。

然而，通过上述仅当演示材料传输到投影仪时才记录这些材料的方法，不可能提供足够的材料来创建会议内容。

这同样适用于演示材料包括若干页从而通过指定特定页来进展会议的情况。在这种情况下，有必要掌握实际显示在视频投影仪上的材料作为用于发言的材料。

该会议系统不仅在一间会议室中举行会议的情况下，而且在通过以电子方式在网络上相互连接多间会议室或者在网络上相互连接远程会议室(例如，多个地点，如总部、分支机构、工厂和实验室)来开展会议的情况下，产生几乎相同的问题。

这些问题不仅发生在网络电子会议系统中，而且发生在用于利用网络在预科学校、姐妹学校等之间授课的网络教育系统以及用于在相互处于远程的多个人之间玩游戏的网络游戏系统等中。

为了解决这些问题，提出了本发明，并且本发明的第一目的是即使在使用多台显示器的情况下也允许记录全部显示在这些显示器上的静止画面信息，另外在再现时，在同一屏幕上显示所有静止画面信息，并且在实际使用的静止画面信息的某一些中放大。

本发明的第二目的是允许与活动图像/音频信息同步地再现与该活动图像/音频信息相关的静止画面信息，并且即使当搜寻活动图像/音频信息时，也在搜寻出其时再现与活动图像/音频信息相关的静止画面信息。

本发明的第三目的是不仅允许与活动图像/音频信息同步地记录显示在显示器上的静止画面信息，而且允许与该活动图像/音频信息同步记录向其发出捕获指令的静止画面信息，以便可以创建与实际会议相一致的内容。

发明内容

本发明所涉及的信息创建方法，包括以下步骤：记录从连接到网络的活动图像/音频输入设备获得的活动图像/音频信息；记录在连接到网络的多台显示器上显示的静止画面信息；以及当记录静止画面信息时，创建与活动图像/音频信息相对应的静止画面信息的再现管理列表。

本发明所涉及的一种信息创建方法，包括：信息记录装置，用于记录通过网络提供的信息；再现列表创建装置，用于根据通过网络提供的信息在再现信息时创建再现管理列表；内容创建装置，用于使用再现管理列表将信息重新组织为通过网络再现该信息的内容；以及控制装置，用于控制信息记录装置、再现列表创建装置和内容创建装置中的每一个。

本发明所涉及的一种网络信息处理系统，包括：至少一台信息处理机，具有输入操作功能，并且处理任意信息；显示器，用于至少根据从信息处理机传输的信息来显示图像；信息处理辅助设备，用于根据信息处理机的输入操作指令，辅助网络信息处理包括显示器；通信装置，用于相互连接信息处理辅助设备和信息处理机；活动图像/音频输入设备，用于输入与从信息处理机传输的信息不同的图像和音频；以及信息创建设备，用于根据来自信息处理机的指令记录从信息处理机和活动图像/音频输入设备传输的信息，并且将该信息重新组织成通过网络传送的内容，其中，信息创建设备包括：信息记录装置，用于记录通过网络提供的信息；再现列表创建装置，用于根据通过网络提供的信息在信息再现的时候创建再现管理列表；内容创建装置，用于使用再现管理列表将信息重新组织为通过网络再现信息的内容；以及控制装置，用于控制信息记录装置、再现列表创建装置和内容创建装置中的每一个。

本发明所涉及的另一种信息创建方法，包括以下步骤：当与来自活动图像/音频输入设备的活动图像/音频信息同步地记录在多台显示器上显示的多条静止画面信息和编辑用于其再现的所记录多条信息时，根据显示器的数目来选择再现屏幕的显示模式以同时在同一屏幕上再现和显示多条静止画面信息；以及通过指示在显示模式中显示的图标来放大和再现在显示模式中显示的静止画面信息之一。

本发明所涉及的另一种信息创建设备，包括：信息记录装置，用于记录来自活动图像/音频输入设备的活动图像/音频信息和来自多台显示器的静止画面信息中的每一个；再现管理列表创建装置，用于列出关于多条输入静止画面信息的属性信息；组织装置，用于根据来自再现管理列表创建装置的属性信息，通过选择在显示屏幕上同时显示多条静止画面信息的显示模式，重新组织活动图像/音频信息和静止画面信息；以及控制装置，用于控制多个装置。

本发明所涉及的另一种网络信息处理系统，包括：至少一台信息处理机，具有输入操作功能，并且处理任意信息；显示器，用于至少根据从信息处理机传输的信息来显示图像；信息处理辅助设备，用于根据信息处理机的输入操作指令，辅助网络信息处理包括显示器；通信装置，用于相互连接信息处理辅助设备和信息处理机；活动图像/音频输入设备，用于输入与从信息处理机传输的信息不同的图像和音频；以及信息创建设备，用于根据信息处理机的指令记录从信息处理机和活动图像/音频输入设备传输的信息，并且将该信息重新组织成通过网络传送的内容，其中，信息创建设备包括：信息记录装置，用于记录来自活动图像/音频输入设备的活动图像/音频信息和来自多台显示器的静止画面信息中的每一个；再现管理列表创建装置，用于列出关于多条输入静止画面信息的属性信息；组织装置，用于根据来自再现管理列表创建装置的属性信息，通过选择在显示屏幕上同时显示多条静止画面信息的显示模式，重新组织活动图像/音频信息和静止画面信息；以及控制装置，用于控制多个装置。

本发明所涉及的另一种信息创建方法，包括以下步骤：当与来自活动图像/音频输入设备的活动图像/音频信息同步与再现管理列表一起记录显示在多台显示器上的多条静止画面信息并且再现这些所记录的信息时，根据显示器的数目来选择再现屏幕的显示模式以同时在同一屏幕上再现和显示多条静止画面信息；按照记录活动图像/音频信息和静止画面信息的时间次序来再现这些信息；当在搜寻模式下再现活动图像/音频信息时，相互对比附于该活动图像/音频信息的再现时间信息与包括在再现管理列表中的时间管理信息，以当搜寻操作完成时检索与活动图像/音频信息的再现时间相匹配的静止画面信息；以及再现所检索的静止画面信息。

本发明所涉及的另一种网络信息处理系统，包括：至少一台信息处理机，具有输入操作功能，并且处理任意信息；显示器，用于至少根据从信息处理机传输的信息来显示图像；信息处理辅助设备，用于根据来自信息处理机的输入操作指令，辅助网络信息处理包括显示器；通信装置，用于相互连接信息处理辅助设备和信息处理机；活动图像/音频输入设备，用于输入与从信息处理机传输的信息不同的图像和音频；以及信息创建设备，用于根据信息处理机的指令记录从信息处理机和活动图像/音频输入设备传输的信息，并且将该信息重新组织成通过网络传送的内容，其中，信息创建设备包括：信息记录装置，用于记录来自活动图像/音频输入设备的活动图像/音频信息和来自多台显示器的静止画面信息中的每一个；再现管理列表创建装置，用于列出关于多条输入静止画面信息的属性信息；组织装置，用于根据来自再现管理列表创建装置的属性信息，通过选择在显示屏幕上同时显示多条静止画面信息的显示模式，重新组织活动图像/音频信息和静止画面信息；以及控制装置，用于控制多个装置，并且其中，当输入关于活动图像/音频信息的搜寻指令时，控制装置允许根据附于由信息记录装置再现活动图像/音频信息的再现时间信息，检索再现管理列表中的时间管理信息，以当完成搜寻操作时再现与活动图像/音频信息的再现时间相匹配的静止画面信息。

本发明所涉及的另一种信息创建方法，包括以下步骤：与来自活动图像/音频输入设备的活动图像/音频信息同步，在将静止画面信息传输到多台显示器的时刻记录传输到这些显示器的该静止画面信息；以及根据捕获指令，记录这些所传输的静止画面信息中显示在显示器上的静止画面信息。

本发明所涉及的另一种信息创建设备，包括：信息记录装置，用于记录来自活动图像/音频输入设备的活动图像/音频信息和来自多台显示器的静止画面信息中的每一个；再现管理列表创建装置，用于列出关于多条输入静止画面信息的属性信息；组织装置，用于根据来自再现管理列表创建装置的属性信息，通过选择在显示屏幕上同时显示多条静止画面信息的显示模式，重新组织活动图像/音频信息和静止画面信息；以及控制装置，用于控制多个装置，其中，在信息记录装置中所要记录的静止画面信息包括在将静止画面信息传输到多台显示器的时刻传输到这些显示器的该静止画面信息，以及这些所传输的静止画面信息中当给出捕获指令时显示在显示器上的静止画面信息。

本发明所涉及的另一种网络信息处理系统，包括：至少一台信息处理机，具有输入操作功能，并且处理任意信息；显示器，用于至少根据从信息处理机传输的信息来显示图像；信息处理辅助设备，用于根据来自信息处理机的输入操作指令，辅助网络信息处理包括显示器；通信装置，用于相互连接信息处理辅助设备和信息处理机；活动图像/音频输入设备，用于输入与从信息处理机传输的信息不同的图像和音频；以及信息创建设备，用于根据来自信息处理机的指令记录从信息处理机和活动图像/音频输入设备传输的信息，并且将该信息重新组织成通过网络传送的内容，其中，信息创建设备包括：信息记录装置，用于记录来自活动图像/音频输入设备的活动图像/音频信息和来自多台显示器的静止画面信息中的每一个；再现管理列表创建装置，用于列出关于多条输入静止画面信息的属性信息；组织装置，用于根据来自所述再现管理列表创建装置的属性信息，通过选择在显示屏幕上同时显示多条静止画面信息的显示模式，重新组织活动图像/音频信息和静止画面信息；以及控制装置，用于控制所述多个装置，并且其中，在所述信息记录装置中所要记录的静止画面信息包括在将静止画面信息传输到多台显示器的时刻传输到这些显示器的该静止画面信息，以及这些所传输的静止画面信息中当给出捕获指令时显示在显示器上的静止画面信息。

根据本发明，记录活动图像/音频信息和静止画面信息。静止画面信息是指当在所有多台显示器上显示时显示在它们上的信息。与记录这些信息同时，创建与活动图像/音频信息相对应的静止画面信息的再现管理列表。

再现管理列表包括静止画面信息文件名、时间管理信息如在显示器上显示的开始时间、显示器的标识信息等，并且允许按照时间顺序掌握在什么时候以及在哪些文件中将信息显示在各显示器上。

当信息记录完成时，将信息重新组织成可以通过网络再现的内容(HTML格式)。而且，根据所使用的显示器的数目来确定要显示在一个屏幕上的显示模式(屏幕分割模式)。

在再现模式下，静止画面信息根据再现管理列表通过插入在与所确定的显示模式相对应的分割屏幕中来全部显示。在与之不同的固定显示区域中，显示活动图像/音频信息。因此有可能消除仅再现特定一条静止画面信息的问题。

当传输对实际上正在显示的静止画面信息的放大指令时，放大该静止画面信息。例如，通过选择当仅使用一台显示器时所显示的显示模式(最大显示模式)来在实际上放大它。因此有可能容易地查看静止画面信息的内容，并且改善可见性。如果以新的静止画面信息替代静止画面信息，则也放大该更新的新静止画面信息。

当在搜寻模式下再现活动图像/音频信息时，相互对比附于该活动图像/音频信息的再现时间信息与包含在再现管理列表中的时间管理信息，以当搜寻完成时检索与活动图像/音频信息的再现时间相匹配的静止画面信息。在搜寻的时候，再现作为检索结果检测到在时间信息上相匹配的静止画面信息，作为与活动图像/音频信息相关的静止画面信息。

通过这种方式，检索静止画面信息所需的信息包含在与活动图像/音频信息没有任何关系的再现管理列表中，从而即使在任意时间点搜寻活动图像/音频信息，也可以立即检索和再现与该活动图像/音频信息相关的静止画面信息。

按照捕获静止画面信息的时间顺序显示所捕获的静止画面信息，从而允许再现与实际会议一致的信息。

在网络会议的情况下，可以分割在所有视频投影仪上正在使用的演示材料，并且将其同时显示在同一屏幕上，从而在不缺少演示材料的情况下创建和显示会议内容。

附图说明

图1示出了将网络信息处理系统应用于网络电子会议系统的结构；

图2示出了用作信息处理辅助设备的通信器的结构；

图3示出了用作信息创建器的创建器的结构；

图4示出了用作信息处理机的客户端PC的显示屏幕；

图5示出了显示的创建器菜单的状态；

图6示出了内容管理器屏幕；

图7示出了网络电子会议系统的另一个例子；

图8示出了网络电子会议系统的另一个例子；

图9示出了系统操作的流程图；

图10示出了用于确认内容已被保存的屏幕；

图11示出了内容再现屏幕；

图12A和12B是创建器记录操作的流程图；

图13示出了文件传输和实际显示屏幕的例子；

图14示出了再现管理列表的例子；

图15A和15B是创建器内容创建操作的流程图；

图16示出了在使用一台投影仪的情况下采用模板的显示模式；

图17示出了在使用两台投影仪的情况下采用模板的显示模式；

图18示出了在使用三台投影仪的情况下仅对音频采用模板的显示模式；

图19A和19B是创建器的内容再现操作的流程图；

图20是放大操作流程图的一部分；以及

图21是搜寻处理例子的流程图的一部分。

具体实施方式

下面将参照附图详细描述作为本发明一个实施例的信息创建方法、信息创建设备和网络信息处理系统。为便于描述起见，本实施例是参照将它们应用于网络电子会议系统中的情况来描述的。

网络电子会议系统是指将以电子方式创建的演示材料传输到担当显示设备的投影仪并且在放大这些材料的情况下开展会议的系统。因此，整个系统由担当管理演示材料的信息处理机的计算机(个人计算机)以及用来将演示材料传输到显示设备的信息处理辅助设备(具有个人计算机结构)组成。

图1示出该网络电子会议系统100的结构例子。该系统100包括：信息处理机(以下称作客户端PC)2，用于保存和管理如上所述的演示材料(文件数据)；显示设备(以下称作投影仪)4，由投影仪等组成，用于投影和显示演示材料或者通过摄像机拍摄的书法作品和绘画；以及信息处理机(以下称作通信器)3，由个人计算机组成，用于辅助客户端PC 2与投影仪4之间的数据传输、数据处理等。

通信器3由客户端PC 2控制，以便通过该通信器3，控制显示在视频投影仪4上的图像。因此，通信器2和投影仪4通过RGB电缆等相互连接。

客户端PC 2和通信器3通过通信装置(网络适配卡)2a相互耦合。虽然通信装置2a可以是无线或有线的，但是在本实施例中其为无线通信装置。

因此，客户端PC 2和通信器3均装备有无线LAN卡(网络接口卡)2a作为相互连接它们的通信装置。在无线通信的情况下，在结构上还可以使用通过其它们相互通信的接入点(未示出)来代替无线LAN卡。

信息创建设备(以下称作创建器)1也通过LAN耦合到该网络电子会议系统100，用于作为图像和音频记录会议室的情况，并记录会议中使用的演示材料，以创建会议文集(会议内容)。作为活动图像输入设备的视频摄像机5a以及作为音频输入设备的麦克风5b连接到创建器1。在本例中，该活动图像/音频输入设备5直接连接到创建器1，并且配置成可以根据客户端PC 2的指令控制其操作模式。

通信器3和创建器1各拥有同一段的全球IP地址，从而这些创建器1和通信器3可以通过相互间的交互通信或者诸如因特网的网络开展远程会议室之间的会议。即使全球IP地址处于不同段，也可以无问题地进行交互通信。

此外，用作信息保存设备的服务器6也通过LAN连接到电子会议系统，以便服务器6可以集中保存和管理会议内容等。

客户端PC 2具有安装在其中的电子会议应用软件。在一个会议系统中可以使用最多达16台客户端PC 2。当使用多台客户端PC时，它们各具有为其设置的唯一私有IP地址。

在使用多台客户端PC 2的情况下，设置公共密码以通过创建封闭于相关会议室的环境来构建保密会议系统，以便使外部未指定的第三方不能参加会议或者查看会议内容。

该密码可由第一会议参加者任意设置，从而其余会议参加者可以输入该密码以参加该会议系统。

任一会议参加者都可以通过无线LAN卡2a将演示材料从客户端PC 2传输到通信器3以在投影仪4上显示它们，从而获得发言权。只有通过操作客户端PC上的功能键，他或她才能放弃发言权以将其移交给任何其他会议参加者，从而会议所有参加者都保留作为发言者的资格。

在结构上，其余会议参加者之一可以使用客户端PC 2来控制在创建器1上进行记录、再现等的操作模式。也就是，其余参加者之一获得创建会议文集材料的权利。

下面将描述网络电子会议系统100的各组件。

每间会议室内都安装了一台投影仪4，从而，电子会议系统最简单的基本结构由一台通信器3组成。然而，在某些情况下，需要使用多台投影仪4来开展会议，以便可以更高效地举行会议。这是因为可能经常发生这样的情况，即同时在多台投影仪上显示不同演示材料，并且在解说中使用它们。

在这种情况下，基本上，根据所安装的投影仪4的数目来安排通信器3。图1给出使用三台投影仪4情况下的结构的例子。在使用多台通信器3的情况下，它们之一用作主通信器3a，而其余两台用作副通信器3b和3c。

在这种情况下，控制系统是使从客户端PC 2发送的演示材料等可以由主通信器3a管理，并且分别通过副通信器3b和3c显示在投影仪4b和4c上。因此，副通信器3b和3c各拥有一个私有IP地址。还有可能相互独立地控制多台通信器3a、3b和3c。

主通信器3a还具有以下功能，即通过LAN将从客户端PC 2传输的演示材料本身以及关于当将这些演示材料翻页时的状态的信息(翻页的时间、页信息等)作为再现管理信息发送到创建器1，或者根据客户端PC 2的指令接收记录在创建器1中的信息，并将它分发到客户端PC 2。

图2示出通信器3的结构。如图2所示，通信器3由向客户端PC 2发送和从其接收演示材料的网络适配器30a、存储处理程序的存储器30b、工作存储器(工作RAM)30c、CPU 30d以及用于使用RGB信号输出演示材料的显示适配器30e组成。

在本例中，使用上述无线LAN卡2a作为网络适配器30a。存储器30b存储用于激活通信器3的基本软件(电子会议应用软件)以及用于处理演示材料的处理程序。

工作RAM 30c用来临时累积所接收的演示材料并处理它们。演示材料在CPU 30d的控制下被转换成R、G和B信号，并提供给显示适配器30e。投影仪4通过RGB电缆连接到通信器3。

图3示出创建器1的结构。该创建器1包括：CPU 1a，用于处理程序；工作存储器(在本例中为硬盘HDD)1b，用于处理所发送/接收的信息(诸如活动图像和静止画面信息)；存储器1c，用于存储包括演示材料的信息如活动图像/音频等，和用于处理它们的控制程序；以及网络适配器1d，用于连接通信器3。创建器1还包括图像/音频输入端子(I/O接口)1e，用于接收或控制来自活动图像/音频输入设备5的活动图像/音频信息。

创建器1记录关于如上所述在通信器3上显示的演示材料的信息，还记录从通信器3传输的信息，诸如参加电子会议的参加者的信息(IP地址、面部照片等)，以及活动图像/音频信息。它还具有当记录完成时自动创建可以称作会议文集的会议内容的功能。如何自动创建会议内容将在后面进行描述。

如果存在如上所述的多台客户端PC，则这些客户端PC 2之一对创建器1和活动图像/音频输入设备5进行控制。也就是，它们由担当行政工作者(clerical worker)的客户端PC 2(行政工作者的客户端PC)控制。

对于任何客户端PC 2要成为行政工作者客户端PC，它只需打开用作创建器1的操作屏幕的控制(CONTROL)屏幕。如果任何客户端PC打开了控制屏幕，则在通信器3上设置禁止标志，以使其余客户端PC不能成为行政客户端PC。图4示出了在行政客户端PC的显示屏幕上显示的GUI屏幕的一个例子。

该显示屏幕的结构大致由三个垂直分割的显示屏幕组成，即在该显示屏幕的中部显示客户端PC侧的基本屏幕，在其右侧，显示一参加者屏幕，其显示关于会议参加者的信息，而在基本屏幕的左侧，显示控制创建器1的控制屏幕。此外，在该屏幕的底部，显示了在水平方向上较长的备注屏幕。

在基本屏幕的上部，显示了连接到电子会议系统的设备的图标。在本图中，显示了创建器1的图标①、通信器3的图标②等。虽然在图中没有给出附图标记，但还显示了活动图像/音频输入设备5的图标。

基本屏幕的下侧用作其中显示了在客户端PC中累积的文件名③的文件列表区域。

在参加者屏幕中，显示了参加者的面部照片、参加者所拥有的客户端PC的私有IP地址等。

在控制屏幕中，其上部用作图像显示部分，其中，作为活动图像显示由视频摄像机5a拾取的图像。其中部用作带状显示区域，在其中操作包括功能键在内的多个软键，其底部用作用于输入标题等的输入部分。在该软键操作部分中，显示了记录键④、停止键⑤和暂停键⑥以及用于标记记录期间的重要图像位置的标记键⑦、用于打开备注屏幕的备注键⑧、以及用于保存在投影仪4上显示的静止画面信息(演示材料)的捕获键⑨等。

当客户端PC 2登录通信器3时，在其显示屏幕上只显示基本屏幕。通过将文件列表③中的文件拖放至通信器3的图标，将该文件(演示材料)的数据传输给通信器3，并且在投影仪4上显示它，从而可以呈现它。然而，这也适用于由获得了发言者资格的客户端PC 2执行这些操作的情况。

当按基本屏幕上的参加者键时，如图4所示，在其右侧显示参加者屏幕。

当用右鼠标键点击创建器图标①时，显示如图5所示的菜单屏幕，并且当在该菜单屏幕上选择“控制”时，显示图4所示的控制屏幕。当在控制屏幕上操作备注键⑧时，在图4所示的屏幕位置上显示备注屏幕，以便可以在其中输入句子等。备注屏幕占据四至六行的空间。

当在图5所示的菜单屏幕上选择“内容管理器”时，显示保存在创建器1中的会议内容的列表菜单(创建器内容管理器屏幕)。

图6举例示出了创建器内容管理器屏幕的显示。在该屏幕上显示了保存在创建器1中的内容列表①以及用于选择所选内容列表的操作模式的软键。在本实施例中，显示了用于再现所选内容的审查(Review)键②、用于将所选内容传输到客户端PC 2的“传输至客户端”键(“下载至我的计算机”键)③、用于将所选内容传输到服务器的“传输至服务器”键(“上载至服务器”键)④、用于查看所选内容的详细信息的详细信息键(“显示内容信息”键)⑤、以及用于删除所选内容的删除键⑥等。

虽然上述网络电子会议系统100尤其是包括如图1所示的系统方面为电子会议系统，其中仅在一间会议室内构建了网络，但是也可以构建另一网络电子会议系统。

图7所示的网络电子会议系统200应用于采用多间例如两间会议室进行发言来开展会议的情况。

虽然在这种情况下会议室A和B都具有相同的系统构建，但是在某些情况下它们也可以具有不同的系统构建。图7示出该情况的一方面。会议室A的系统装备有创建器1、客户端PC 2、通信器3和连接到通信器3的投影仪4以及活动图像/音频输入设备5。提供了三台投影仪。因此，所提供的通信器3的数目为三。使用无线LAN卡2a作为通信装置。

会议室B也具有相同的配置，但在本实施例中，仅装备有一台投影仪4，从而安装了一台通信器3。此外，会议室B配置成使客户端PC 2与通信器3等可以通过接入点2b相互通信。

两间会议室A和B通过LAN相互连接。可以使用会议室B一侧的客户端PC 2通过接入点2b参与会议室A中的发言。

在这种情况下，如果例如会议室A中的发言者将演示材料传输到会议室A中的通信器3以在主通信器的投影仪4上显示材料，则相同的演示材料也被传输到会议室B中的通信器3，并且显示在其中的投影仪4上。

然后，如果使用鼠标等移动显示屏幕上的指针，则通过交互显示控制会议室B中的指针也被显示在相同位置上。即，会议室A和B具有镜象显示配置。

这也适用于将材料从会议室B传输到会议室A的情况。但在这种情况下，由于会议室B只有一台投影仪，所以未使用会议室A中的副通信器3b和3c。

图8示出本实施例应用于在位于两个远程位置的会议室之间进行发言的网络电子会议系统300的情况。

该系统300具有会议室A和B通过LAN相互耦合并且会议室A和B的通信线路与远程会议室C的通信线路通过网络相互连接的结构。假定在会议室A、B和C中均构建如参照图1或7所述的系统。因此，将省略对每个系统组件的详细描述。公共安装一台创建器1和一台服务器6是足够的。

在这种情况下，同样，通过会议室A、B和C的通信器3之间的通信，实现用每间会议室中提供的投影仪来镜象显示演示材料，从而使会议参加者可以参与会议，同时观看相同显示的材料。此外，即使在远程位置之间，也有可能根据鼠标的移动在相同的显示屏幕上相互同步地显示指针。

下面将参照图9描述该网络电子会议系统100的操作。

首先，在步骤S1，使用会议参加者的客户端PC 2激活电子会议应用软件以登录通信器(或主通信器)3。

在这种情况下，如前所述，第一会议参加者设置密码，以使随后的参加者可以通过输入该密码来参加会议。该密码不是预先为电子会议系统确定的唯一值，以便能够避免诸如由于忘记或弄错密码而不能驱动电子会议系统的不合理问题。

当在步骤S2会议参加者打开作为创建器1操作屏幕的控制(CONTROL)屏幕时，只有该客户机成为行政客户端PC(参见图4)。

当在客户端PC 2的GUI屏幕上采用右鼠标键单击图标①(参见图4)以从显示菜单选择“控制”时，显示控制屏幕(参见图4)。

当在步骤S3在控制屏幕上按记录键④(参见图4)时，驱动活动图像/音频输入设备5以开始记录会议图像。

另一方面，如果在控制屏幕上按备注键⑧(参见图4)，则打开如图4所示的备注屏幕以允许输入文本。当按发送键时，将输入文本取入到创建器1中。

当将演示材料从客户端PC 2的文件列表③拖放至希望在其上显示材料的投影仪4的图标②时，将演示材料传输到创建器3，从而在投影仪4的屏幕上显示从文件列表选择的演示材料。同时，将演示材料和翻页信息等保存在创建器1的硬盘上。

在步骤S5，在控制屏幕上按停止键⑤以结束记录操作。当按该键时，在行政工作者侧的客户端PC 2上显示如图10所示的保存确认屏幕。删除除保存处理之外的内容。当以这种方式保存信息时，在步骤S6自动创建会议内容。也就是，在该步骤S6，根据来自通信器3的静止画面信息和来自活动图像/音频输入设备5的活动图像/音频信息创建会议内容。会议内容的文件数据转换成HTML格式的文件数据，从而可以通过诸如因特网的网络访问会议内容。

在步骤S7，当完全创建了会议内容时，显示创建器内容管理器屏幕，以允许确认保存在创建器1中的会议内容(参见图6)。

在步骤S8，可以在该创建器内容管理器屏幕上选择希望查看的会议内容，以再现其细节。其细节得到确认的内容可以传输到服务器6，以进行保存(步骤S9)。

此外，如果在步骤S8希望再现会议内容并且编辑其细节，则他或她可以在步骤S10操作创建器内容管理器屏幕以将会议内容传输到客户端PC侧，从而使用公知编辑软件对它们进行编辑。编辑之后的服务器内容传输到服务器6并且进行保存(步骤S9)。

在作为行政工作者的客户端PC 2上，可以再现服务器6上的会议内容(步骤S11)。图11示出内容再现屏幕的一个例子。

内容再现屏幕具有如下屏幕结构，即如图所示，该屏幕分成以下几个部分：左上部分，显示对会议状态进行视频记录的活动图像再现部分；以及右半部分，显示再现作为在会议中使用的静止画面信息的演示材料的静止画面再现部分，以使这些部分可以同时显示在相同的显示屏幕上。

因此，用于再现演示材料的静止画面再现部分根据安装在一间会议室内的投影仪的最大数目而改变显示模式。在本实施例中，在结构中最多可连接三台投影仪，因此在某些情况下可以显示最大可达三张的演示材料，从而在再现屏幕的显示模式结构上，静止画面再现部分最多可分成四个部分。

该显示模式用模板给出，从而根据要使用的投影仪数选择显示模式的模板(模板1-3)。图11示出当使用三台投影仪时采用显示模式的模板3的情况。静止画面P1表示使用投影仪4a显示的材料⑤，并且类似地，静止画面P2和P3分别表示使用投影仪4b和4c显示的材料⑤。在内容再现中，随着时间的流逝，自动切换在该静止画面再现部分中显示的材料⑤。显示模式的模板1和2的详细信息将在后面进行描述。

在活动图像再现部分中，显示了仅表示上述会议的图像或音频的符号标记，以及在其图像显示部分的正下方，显示了具有其水平轴(水平方向)作为表示图像再现流逝时间的再现时间轴的标记SM。

通过用鼠标点击该标记SM，可以把该标记SM偏移(搜寻)至该再现时间轴上的任意位置。用于活动图像的再现时间轴偏移到该搜寻位置，并且从再现时间轴，重新开始活动图像的正常再现，从而该标记SM也用作搜寻标记。

与所搜寻的再现时间轴同步，还再现作为静止画面信息的演示材料。因此，在相应的显示区域中显示与该再现时间轴相匹配的演示材料。

标记SM的显示区域之下的显示部分被分成两个部分，其中，以缩略图显示由投影仪显示的最多可达六张演示材料。如果使用多台投影仪，则以缩略图显示在所选一台投影仪上显示的材料。

当选择任意一个缩略图时，上面显示的活动图像与它进行同步，并且缩略图偏移至所显示的时间轴，从而从该时间轴开始其正常再现。

该缩略图显示②可以切换至上述标记显示④。在视图切换部分(Viewswitch-over portion)①选择缩略图显示和标记显示之间的切换。

按照在会议期间按控制屏幕上的标记键⑦的次序显示在编辑处理中所附的标题(如果没有给出标题，则为“无标题”)和时间。当采用鼠标点击标记显示区域④中的标题时，上面显示的活动图像也与之同步，以偏移至其时间轴，并且开始其正常再现。这样，可以总是相互同步地显示活动图像和静止画面(演示材料)。在再现时，随着时间的流逝，各自切换它们的显示。

在上述静止画面再现部分中的每一个显示屏幕之下，均设置了显示放大键⑥，因此当它们被选择时，可将正在显示的静止画面切换到最大显示模式(原始尺寸显示)(参见图16)。

下面将参照图12A和12B的流程图描述创建器1的记录操作。

创建器1根据客户端PC 2的记录指令记录活动图像，并且记录和保存从通信器3发送的演讲信息。这些演示材料假定包括各种数据项如静止画面本身、使用材料创建软件(演讲软件)例如power point创建的材料、以可移植文档格式(PDF)创建的语句(sentence)显示文件、以图形交换格式(GIF)创建的图像数据，以及使用表格软件创建的文件数据。

首先，参照图12A。首先，当利用客户端PC 2上的控制屏幕按记录键④时，创建器开始记录活动图像(步骤S21)。

下一步，在步骤S22，创建器监视来自通信器3的信息。该信息假定包括捕获键操作信息如对所传输的演示材料进行翻页时的信息以及在未翻页的情况下通过滚动等切换显示屏幕时的信息。

例如，图13示出这样的情况，其中，如果作为演示材料传输的文件数据太大而不能全部显示在投影仪4上时，首先在投影仪4上显示材料的上半部分即材料A(时刻ta)，并且在下一个适当时刻(时刻tb)，在投影仪4上滚动屏幕至其下半部分即材料B。

在该发言中，最初单独传输的文件信息不足以确定发言者在解说中实际上使用的是材料的哪个部分，因此材料的解说和内容可能不一致。因此，在这种情况下，最好是将显示在投影仪4上的实际材料作为会议材料进行记录。

在这种情况下，最好是行政工作者按控制屏幕上的“捕获”键以记录显示在投影仪4上的演示材料，从而使从通信器3传输的该捕获信息也是所要监视的信息。

下一步，在步骤S23，创建器检查从通信器3传输的静止画面信息的属性信息，并且如果该属性信息是静止画面文件，则它在管理列表(再现管理列表)中描述其是静止画面文件的属性信息(步骤S20)。

类似地，如果在步骤S24创建器确认它是关于备注的属性信息(文本文件)，则它在再现管理列表中描述该信息(步骤S20)，而如果它是关于用PowerPoint创建的文件的属性信息，则创建器描述该信息(步骤S25、S20)。

如果输入信息不是上述这些，则创建器判定属性信息是否表示显示结束，并且如果它是显示结束信息，则创建器类似地在再现管理列表中描述该信息(步骤S26、S20)。

当在图12A的步骤S20-S26完成判定属性信息时，该过程随后进入用于判定静止画面信息本身的类型的步骤。对其将参照图12B进行描述。

首先，如果在步骤S27所传输的静止画面信息是静止画面文件，则创建器将它保存在对应文件夹中(步骤S28)。

如果在电子会议系统中使用三台投影仪4，则创建器将在投影仪4a上使用的材料(静止画面文件)复制到P1文件夹中，将在投影仪4b上使用的材料(静止画面文件)复制到P2文件夹中，并且将在投影仪4c上使用的材料(静止画面文件)复制到P3文件夹中。

通过根据在发言中使用的投影仪如此指定要将材料保存到其中的文件夹，可以在再现会议内容时使用目标显示模板在内容再现屏幕上同时再现和显示多个演示材料。

下一步，如果在步骤S29判定它是备注文件，则创建器将该备注文件保存在备注文件夹中(步骤S30)。如果所传输的静止画面信息是Power Point文件，则创建器在步骤S32对该Power Point文件执行视频压缩。可以例如利用经常用于网络如因特网中的JPEG格式作为压缩格式。创建器向如此转换成JPEG文件的新文件提供唯一的名称，并且将它保存在图像文件夹中(步骤S33)。如果它在步骤S32的压缩处理中必须等待，则创建器将该文件临时存储在队列中。

创建器重复监视属性信息并且在从通信器3输入信息的时刻通过确定静止画面信息的类型将它保存到特定文件夹中的上述处理(步骤S22)。

在此注意，参照图12A所述的从通信器3发送的属性信息可以包括以下项：

A)Power Point的显示页(显示开始时间、翻页时的页信息、投影仪号等)；

B)JPEG文件的文件名(包括显示开始时间、投影仪号等)；

C)GIF文件的文件名(包括显示开始时间、投影仪号)；以及

D)所有-显示端。

根据这些信息项，创建再现管理列表(数据库)。

图14示出再现管理列表的一个例子。在其中，显示开始时间是指开始显示静止画面或备注的时间点或者从活动图像的开头测算的相对时间点。

功能代码表示以下项：

11：在静止画面显示位置上显示静止画面(分别对应于投影仪4a-4c的位置P1-P3)；

12：在备注屏幕上显示备注；

13：删除静止画面显示部分(P1-P3)中的静止画面显示；以及

14：删除备注显示。

文件名是指所要显示的文件的名称。如果Power Point文件被转换成JPEG文件，则为它分配例如下面格式的名称：

转换时间_页号.jpg(转换时间＝YYYYMMDDhhmmss)。

随后，当记录完成时，自动地将以这种方式记录的活动图像/音频信息和静止画面信息重新组织成用作会议文集的会议内容。会议内容被创建为可以由Web查看器检索和查看的内容。下面参照图15A和15B对此进行描述。

图15A是内容创建操作的流程图。为了完成创建器1一侧的记录，在控制屏幕上按停止键⑤。当完成记录时，同时开始内容创建处理，从而如果存在Power Point文件，则该过程首先确认此文件已转换成JPEG文件(步骤S40)。

当完成到JPEG文件的转换时，在步骤S41，该过程仅将必要的JPEG数据从图像文件夹复制到文件夹P1-P3中的一个对应的文件夹。这样做是为了在使用相同的投影仪时也将转换为JPEG的文件复制到相同文件夹中。

在步骤S42，该过程将再现管理列表的文件名改写成JPEG文件名，并为它提供一扩展名。在下一步骤S43，该过程检查它是否要被保存为会议内容(参见图10)。

如果在步骤S50接收到不保存指令，则该过程检查是否应完全删除文件数据，如果是，则在步骤S51删除所有记录的数据，并停止内容创建处理。

另一方面，如果选择了保存文件的处理，则该过程检查在步骤S44保存的数据中从活动图像/音频输入设备5发送的信息是仅包括音频还是包括活动图像和音频两者(步骤S44)。执行该检查，是因为在仅包括音频的情况和包括活动图像和音频两者的情况之间所要执行的处理不同。

首先如下描述具有活动图像和音频两者的情况：在这种情况下，该过程在步骤S45检查在发言中使用的投影仪的数目。如果未使用多台投影仪，即仅使用了一台投影仪，则该过程选择内容显示模板即模板1作为显示模式(步骤S45a)。

如果使用两台投影仪，则该过程选择显示模板2(步骤S46、S46a)，而当使用三台投影仪时，选择显示模板3(步骤S46、S46c)。

通过根据所用投影仪4的数目如此选择显示模板，并将其再现和显示为内容屏幕，可以总是再现和显示对应于与活动图像同时使用的投影仪数的演示材料，而不管使用了它们中的多少个。作为其结果，可以确定地摆脱诸如当同时使用多台投影仪发言时不能再现在这些投影仪中的一些上使用的演示材料的不合理问题。

在此注意，在选择模板1作为显示模板的情况下，用于静止画面再现部分中的显示尺寸为最大显示尺寸，其例子如图16所示。另一方面，如果选择模板2，则在屏幕上要同时显示来自两台投影仪的静止画面信息，如图17所示，以一个在上一个在下的方式显示它们。因此，显示尺寸变得较小。如果使用三台投影仪，则采用如图11所示的显示模式。图11给出屏幕纵横比为4∶3的情况下的显示例子。附带地，在本实施例中，最小显示尺寸包括320×240像素。

下一步，如图15B的步骤S47所示，在根据所选模板创建HTML文件之前，还执行数据仅包括音频的情况下的处理。在数据仅由音频组成的情况下，在活动图像再现部分中仅显示表示仅音频的符号标记来代替会议图像，并且根据所要使用的投影仪的数目选择模板之一。因此，在步骤S55、S55a、S56、S56a和S56b选择模板的各方面与数据包括活动图像和音频两者的情况相同，因此省略对其的详细描述。在此注意模板4对应于模板1，并且模板5和6分别对应于模板2和3。附带地，使用三台投影仪的情况下的内容再现屏幕的一个例子如图18A所示。

在步骤S47，为其确定了显示模板的包括活动图像和音频两者或者仅包括音频的数据在匹配该模板的情况下被转换成HTML文件。

在下一步骤S48，将所有数据项、即再现管理列表中的活动图像/音频数据以及JPEG数据、静止画面文件数据(JPEG数据)、power point文件中的JPEG数据以及文本数据全都复制到内容保存位置。然后，该过程删除作为创建器1的工作存储器的在硬盘1b上保留的工作区域，并且完成自动会议内容创建处理(步骤S49)。

下面将参照图18B和19的流程图描述会议内容的再现操作。

选择菜单，并且打开图6所示的创建器内容管理器屏幕。然后，当指示希望查看的会议内容并且按审查键②时，激活Web浏览器(例如，InternetExplorer)，从而根据HTML文件以多个框架单元显示文件的详细信息(步骤S60)。

如果在步骤S61数据仅包括音频，则该过程在步骤S62在活动图像显示位置上显示表示仅音频的符号标记(参见图18A)。然后，该过程再现音频(步骤S64)。如果数据包括活动图像，则该过程在步骤S63在活动图像显示位置上再现活动图像(会议图像)。

然后，该过程在步骤S63监视再现时间，并且如果活动图像或音频的再现尚未结束(步骤S66)，则如图19所示检查是否存在匹配该再现时间的静止画面信息(HTML格式文件数据)(步骤S68)。

在存在匹配活动图像等的再现时间的文件数据的情况下，并且如果它是静止画面文件，则该过程在显示区域P1-P3的指定一个区域中显示相关时间的静止画面文件(步骤S69、S70)。如果文件数据是文本文件(备注信息)，则该过程在相关时间将它显示在备注显示区域中(步骤S72)。

此外，该过程不仅监视屏幕的显示，还监视其删除。如果再现管理列表包括用于删除静止画面或备注的信息，则该过程监视该删除到达的时间，并且当该时间到达时，如果它是静止画面，则在其显示位置上删除显示(步骤S73、S74)。如果它是备注，则该过程执行在其显示位置上删除显示的处理(步骤S75、S76)。

该过程执行该显示检查处理和删除检查处理，直到活动图像或音频的再现完成(步骤S66)，并且当它完成时，结束会议内容再现处理模式。

在图19所示的流程图中，如果当正在屏幕上再现和显示静止画面信息时按放大键，则该过程放大在其上按了放大键的图像。如果如图11所示显示它，则可以查看显示在所有投影仪上的演示材料，但这些演示材料不是以可以确认其细节的尺寸来显示的。在这种情况下，采用该放大功能来放大实际上正在呈现的材料(它可能是过去的材料)。

在这种情况下，在图19所示的流程图中增加下面的处理。因此，从图19的步骤S75的判定完成时刻到图18B所示的步骤S66执行图20的处理。

如果如图20所示接收到对正在再现和显示的静止画面的放大指令，则打开另一个窗口以采用原始尺寸显示静止画面(步骤S82)。当然，静止画面也可以通过将用于确定显示模式的显示模板改为模板1来显示。

然后，该过程检查是否接收到关闭放大窗口(原始大小窗口)的指令(步骤S83)，如果是，则执行关闭窗口的处理(步骤S84)。由此恢复原始显示。

另一方面，如果未接收到关闭窗口的指令，则该过程继续放大显示。因此，如果在该状态下切换要显示在相同位置上的静止画面，则类似地放大更新的静止画面。

如果接收到正常指令，则过程恢复原始模板并显示静止画面(步骤S84)。因此可以选择希望检查其细节并且对它进行放大的任意静止画面。

此外，如果如上所述点击和搜寻显示在图11所示的内容再现屏幕上的标记SM，则从搜寻完成的时间点开始正常再现活动图像，与之同步，还在相应显示位置上显示演示材料。

下面将参照图21的流程图描述该同步再现处理的一个例子。用于该处理的过程可以插入在例如用于监视备注删除处理的图19的步骤S75和图18B的处理步骤S66之间。如果存在图20的处理过程，则在完成该处理过程之后，可以插入图21的处理过程。

首先，该过程在步骤S91监视标记SM，并且如果点击标记SM，则通过检查再现时间轴来监视搜寻完成时刻(步骤S92、S93)。从搜寻完成的再现时间轴开始正常再现活动图像(步骤S94)。

在搜寻期间，该过程总是相互对比所搜寻的再现时间信息和关于记录在再现管理列表中的演示材料的时间管理信息，并且检索与搜寻完成时的管理信息相匹配的演示材料，如果找到这样的演示材料，则选择该演示材料作为搜寻完成之后的再现信息(步骤S95)。

如果搜寻完成时间介于开始显示某一演示材料的时间和开始显示下一演示材料的时间之间，则选择前一显示开始时间的演示材料作为所要再现的演示材料。

如果例如搜寻完成再现时间为00:05:00并且找到对应时间管理信息的显示开始时间点分别为00:04:00和00:07:00的两个演示材料，则该过程选择显示开始时间为00:04:00的前一演示材料作为再现对象演示材料，并且再现和显示它。

以这种方式，即使标记SM偏移到再现时间轴上的任何位置，也可以确定地再现和显示与相关活动图像同步的演示材料。也就是，可以摆脱诸如演示材料不能根据搜寻位置与活动图像同步地更新的问题。

虽然本发明在上述实施例中应用于网络电子会议系统，但是本发明不限于此。例如，本发明也可以类似地应用于如本文开始所述的网络教育系统、网络游戏系统等。

如上所述，根据本发明，在记录活动图像/音频信息和静止画面信息时，如果静止画面信息显示在多台显示器上，则记录显示在所有显示器上的信息，并且创建与活动图像/音频信息相对应的静止画面信息的再现管理列表，以便可以利用该再现管理列表来重新组织内容或者管理用于再现处理的显示模式。

通过这种方式，除了可以相同的尺度(dimension)管理活动图像/音频信息和在发言中所使用的静止画面信息的特征之外，还可从再现管理列表中按照时间顺序掌握在什么时候以及采用哪个文件名将信息显示在各自的显示器上。因此，即使在再现以HTML格式等表示的内容的情况下，也可以选择在同一屏幕上容易地再现多条信息的显示模式，因此通过将多条静止画面信息插入到分割屏幕中来全部显示这些静止画面信息。

因此，可以消除诸如仅再现特定静止画面信息的问题，并且再现与实际举行的会议接近的状态。因此，本发明的特征在于在网络会议等的情况下可以分割在所有视频投影仪上使用的演示材料，并且同时将它们显示在同一屏幕上，从而在不缺失任何演示材料的情况下创建和显示会议内容。

通过本发明，由于可以放大显示在显示屏幕上的一条静止画面信息，因此有可能容易地查看其内容，并且改善可见性。

此外，通过本发明，当在搜寻模式下再现活动图像/音频信息时，可以通过相互对比附于该活动图像/音频信息的再现时间信息与包括在再现管理列表中的时间管理信息来检索和再现与正在搜寻的活动图像/音频信息相关的静止画面信息，从而即使搜寻活动图像/音频信息至任意时间点，也可以检索与搜索完成时的活动图像/音频信息相关的静止画面信息，从而当搜寻完成时，立即再现和显示对应静止画面信息。因此，本发明的特征在于在活动图像/音频信息与静止画面信息之间总是建立有对应关系。

而且，通过本发明，与活动图像/音频信息同步地自动记录静止画面信息，并且根据捕获指令，记录实际显示在相关显示器上的静止画面信息，从而按照捕获它们的时间次序显示所拍摄的多条静止画面信息，因此允许再现与实际会议一致的信息。因此，本发明的特征在于可以创建具有最大真实感的再现内容。

工业适用性

本发明极好地适用于利用网络来举行会议、授课或讲演、玩游戏等的网络会议系统、网络教育系统、网络游戏系统等。