MXPA02005288A - Procesador de imagen, metodo de procesamiento de imagen, medio de registro, programa de computadora y dispositivo esmi conductor. - Google Patents

Abstract

La presente invencion proporciona un procesador de imagen 5 para utilizar imagenes que han sido tomadas por un aparato recolector de imagen u otros como una interfaz de entrada para registrar comandos. La presente invencion proporciona un procesador de imagen que incluye medios de captura de imagen para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento, medios generadores de imagen para generar una imagen objeto que representa un objeto predeterminado, de acuerdo con un movimiento del objetivo que esta incluido en la imagen en movimiento reflejada capturada por los medios de captura de imagen, y medios de control para combinar la imagen objeto generada por los medios generadores de imagen con la imagen en movimiento capturada y reflejada y exhibir la imagen combinada sobre un dispositivo de pantalla previamente determinado.

Description

PROCESADOR DE IMAGEN. MÉTODO DE PROCESAMIENTO DE IMAGEN, MEDIO DE REGISTRO, PROGRAMA DE COMPUTADORA Y DISPOSITIVO SEMI CONDUCTOR.

Campo Técnico.

La presente invención se refiere a una tecnología de procesamiento de imagen para hacer uso de imágenes que han sido tomadas por un aparato recolector de imágenes como una cámara de video como interfaz de entrada para. comandos y otros.

Técnica Anterior.

Los teclados, ratones y controladores frecuentemente son utilizados como dispositivos de entrada para computadoras, máquinas de juego de video y otros. Un operador registra un comando o comandos deseados a través de la manipulación de un dispositivo de entrada lo que ocasiona que una computadora ejecute el procesamiento de acuerdo con el o los comandos registrados. Después, el operador ve las imágenes y / o escucha los sonidos obtenidos como resultados de procesamiento a través de un dispositivo de pantalla y / o altavoz. El operador registra los comandos operando varios botones o teclas provistas sobre el dispositivo de entrada en tanto que observa un cursor mostrado sobre un dispositivo de pantalla.

Dichas operaciones dependen en gran medida de las experiencias de operación del operador. Por ejemplo, para aquellos que nunca han tocado antes un teclado, el registrar un comando deseado utilizando un teclado es muy problemático y consumidor de tiempo, y están propensos a introducir errores debido a tecleos erróneos. Por esta razón, existe la demanda de una interfaz máquina-hombre ue permite la fácil operación por parte del operador. Por otra parte, con el avance de las tecnologías de multimedia, la gente en los hogares puede ahora disfrutar fácilmente la transferencia de imágenes tomadas con una cámara de video a una computadora u otros, editarlas y exhibirlas sobre un dispositivo de pantalla. Dichas tecnologías también son utilizadas para la autenticación personal mediante el análisis de imágenes recolectadas de un cuerpo físico tal como una cara, extrayendo características claves de la misma para identificar al individuo. De manera convencional, dichas imágenes tomadas se utilizan como información que va a ser procesada por una computadora para edición o análisis. Sin embargo, las imágenes tomadas no han sido utilizadas hasta ahora para un propósito de registrar comandos a una computadora. Es un objeto de la presente invención proporcionar una tecnología de procesamiento de imágenes para utilizar las imágenes que han sido tomadas por un aparato recolector de imagen u otros como una interfaz de entrada que permita que un usuario registre comandos.

Breve Descripción de la Invención.

Un procesador de imagen de acuerdo con la presente invención comprende medios de captura de imagen para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento, medios generadores de imagen para generar una imagen objeto que representa un objeto predeterminado, de acuerdo con un movimiento de objetivo que está incluido es la imagen en movimiento reflejada capturada por los medios de captura de imagen, y medios de control para combinar la imagen objeto generada por los medios generadores de imagen con la imagen en movimiento reflejada capturada y exhibir la imagen combinada sobre un dispositivo de pantalla predeterminado. El "objetivo" se refiere a una parte resaltada de un objeto (por ejemplo, personas u objetos) cuya imagen es tomada por un aparato recolector de imagen que suministra la imagen hacia un procesador de imagen. Otro procesador de imagen de acuerdo con la presente invención comprende medios de captura de imagen para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento, medios detectores para detectar el objetivo y un componente en movimiento del mismo a través de las características de imagen de detección entre una imagen en movimiento reflejada actual y una imagen en movimiento reflejada precedente inmediatamente, medios generadores de imagen para generar una imagen objeto que representa un objeto predeterminado de manera que la imagen objeto varía de acuerdo con el componente de movimiento del objetivo detectado por los medios detectores, y medios de control para combinar la imagen objeto generada por los medios generadores de imagen con la imagen en movimiento reflejada y capturada y exhibir la imagen combinada sobre un dispositivo de pantalla predeterminado. Esos procesadores de imagen generan imágenes objeto de acuerdo con los movimientos de los objetivos que están incluidos en la imagen en movimiento reflejada. De manera más especifica, el movimiento, el color y la forma de la imagen objeto que se van a exhibir sobre el dispositivo de pantalla se determinan, y si existe una pluralidad de imágenes objeto, se determina también que imagen objeto debe ser exhibida, de acuerdo con el movimiento del objetivo. Por ejemplo, si el objetivo es el operador, el objeto es determinado de acuerdo con el movimiento del operador. Por tanto, la imagen en movimiento reflejada está disponible como un tipo de interfaz de entrada. En esos procesadores de imagen, los medios generadores de imagen pueden generar la imagen objeto de manera que la imagen objeto sigue un movimiento del objetivo detectado. Los procesadores de imagen pueden comprender además medios para hacer preparaciones para ejecutar el procesamiento requerido en base a la imagen objeto generada de acuerdo con el componente de movimiento del objetivo. Los procesadores de imagen pueden comprender además medios para comparar una imagen combinada obtenida mediante la combinación de la imagen objeto generada por los medios generadores de imagen y la imagen en movimiento reflejada actual, con una imagen de plantilla que es la imagen del objetivo incluida en la imagen en movimiento reflejada precedente inmediatamente, que detecta la parte de la imagen combinada cuya característica de imagen es más similar a la imagen de plantilla, y hacer preparaciones para ejecutar el procesamiento requerido en base a la imagen objeto cuando la imagen de la parte de la imagen combinada detectada incluye la imagen objeto. Mediante la asociación de la imagen objeto con el proceso predeterminado y que comprende además medios para ejecutar el procesamiento que está asociado con la imagen objeto cuando el componente de movimiento del objetivo detectado por los medios detectores satisface una condición predeterminada, es posible ejecutar el procesamiento de acuerdo con el movimiento del objetivo. La imagen en movimiento reflejada puede incluir una pluralidad de objetivos. Los medios detectores pueden estar configurados para detectar el componente de movimiento de cada uno de la pluralidad de objetivos, y detectar un objetivo en base a los componentes en movimiento detectados de la pluralidad de objetivos. Los medios generadores de imagen pueden estar configurados para cambiar la imagen objeto de acuerdo con el componente de movimiento de un objetivo detectado por los medios detectores. La presente invención proporciona además el siguiente método de procesamiento de imagen. Este método de procesamiento de imagen comprende las etapas de capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento dentro del procesador de imagen; el procesador de imagen que genera una imagen objeto que representa un objeto predeterminado de acuerdo con un movimiento del objetivo incluido en la imagen en movimiento reflejada y capturada,, y combinar la imagen objeto generada con la imagen en movimiento reflejada capturada para exhibir la imagen combinada sobre un dispositivo de pantalla predeterminado. La presente invención proporciona también el siguiente programa de computadora. Este programa de computadora ocasiona que una computadora conectada a un dispositivo de pantalla ejecute el procesamiento de capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento, generar una imagen objeto que representa un objeto predeterminado de acuerdo con un movimiento del objetivo incluido en la imagen en movimiento reflejada y capturada y combinar la imagen objeto generada con la imagen en movimiento reflejada y capturada para exhibir la imagen combinada sobre el dispositivo de pantalla. La presente invención proporciona también el siguiente dispositivo semi conductor. Este dispositivo semi conductor está incorporado en un aparato montado en una computadora conectada a un dispositivo de pantalla, el dispositivo semi conductor que ocasiona que la computadora forme las funciones de los medios para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento, medios para generar una imagen objeto que representa un objeto predeterminado de acuerdo con un movimiento del objetivo incluido en la imagen en movimiento reflejada y capturada, y medios para combinar la imagen objeto generada con la imagen en movimiento reflejada y capturada para exhibir la imagen combinada sobre el dispositivo de pantalla.

Breve Descripción de ios Dibujos.

La figura 1 es un diagrama de configuración general de un sistema de procesamiento de imagen al cual se aplica la presente invención; La figura 2 es un diagrama de configuración de un procesador de imagen de acuerdo con una modalidad de la presente invención; La figura 3 es un diagrama de bloque funcional del procesador de imagen de acuerdo con la modalidad de la presente invención; La figura 4 es un diagrama de flujo que muestra un procedimiento de procesamiento de la modalidad 1; La figura 5 es un diagrama de flujo que muestra un procedimiento del procesamiento de la modalidad 1; La figura 6 ilustra una imagen combinada de acuerdo con la modalidad 1 ; La figura 7 ilustra una imagen de menú; La figura 8 es un diagrama de flujo que muestra un procedimiento de procesamiento de la modalidad 2; La figura 9 ilustra una imagen combinada de conformidad con la modalidad 2; La figura 10 es una vista para uso en la descripción de cómo se hace el trazo utilizando la textura recursiva; La figura 11 es un diagrama de flujo que muestra un procedimiento de procesamiento de conformidad con la modalidad 3; La figura 12 es un diagrama de flujo que muestra un procedimiento de procesamiento de la modalidad 3; y La figura 13 ilustra una imagen combinada de acuerdo con la modalidad 3.

Mejor Forma para Llevar a Cabo la Invención.

Se describe específicamente una modalidad de la presente invención con referencia a los dibujos que le acompañan. La figura 1 es una vista que muestra un ejemplo de configuración de un sistema de procesamiento de imagen al cual se aplica la presente invención. Ese sistema de procesamiento de imagen toma imágenes de un operador que está sentado enfrente de un dispositivo de pantalla 3 utilizando una cámara de video analógica o digital 1, captura las imágenes en movimiento así obtenidas dentro de un procesador de imagen 2 consecutivamente en series de tiempo para generar imágenes en movimiento reflejadas, y combina una imagen objeto que representa un objeto tal como un menú y un cursor con una porción de la imagen en movimiento reflejada donde un objeto resaltado tal como un ojo o una mano del operador (en lo sucesivo el objeto remarcado será referido como un "objetivo") está colocado, para generar una imagen combinada (esto, también, se convierte en una imagen en movimiento) y exhibe la imagen combinada sobre el dispositivo de pantalla 3 en tiempo real. Una imagen en movimiento reflejada puede ser generada reflejando (inversión de imagen derecha / izquierda) mediante el procesador de imagen 2 la imagen en movimiento capturada por la cámara de video 1. Alternativamente, puede colocarse un espejo enfrente de la cámara de video 1, y una fotografía de una imagen en movimiento sobre la superficie del espejo que refleja el operador puede tomarse mediante la cámara de video 1 para formar una imagen de movimiento reflejada. En cualquier caso, una imagen combinada de la cual el modo de exhibición varía en tiempo real de acuerdo con el movimiento del objetivo, se exhibe sobre el dispositivo de pantalla 3. El procesador de imagen 2 es implementado mediante una computadora que proporciona las funciones requeridas utilizando un programa de cómputo. Como una configuración de hardware se muestra a manera de ejemplo en la figura 12, la computadora de esta modalidad tiene dos buses, un bus principal B1 y un sub bus B2 al cual están conectadas una pluralidad de dispositivos semi conductores que tienen cada uno funciones especificas. Esos buses B1 y B2 están conectados a y desconectados uno de otro a través de una interfaz de bus INT. El bus principal B1 está conectado a un CPU principal 10 el cual es un dispositivo semi conductor principal, una memoria principal 11 que está constituida de una RAM, un DMAC (controlador de acceso de memoria directo) 12, y un descodificador MPEG (grupos de expertos de imagen en movimiento) (MDEC) 13 y una unidad de procesamiento gráfico (en lo sucesivo, referido como "GPU") 14, que incluye una memoria de estructura 15 que sirve como una memoria de extracción. La GPU 14 está conectada al CRTC (controlador CRTC) 16 para generar una señal de video que permite que los datos en la memoria de estructura 15 sean exhibidos en el dispositivo de pantalla 3. A la activación de una computadora, el CPU 10 principal lee un programa de inicialización desde una ROM 23 sobre el sub bus B2 a través de la interfaz de bus INT y corre el programa de inicialización para arrancar un sistema operativo. También controla una unidad de medios 27, lee un programa de aplicación y datos desde un medio 28 cargado en esta unidad de medios 27 y los almacena en la memoria principal 11. El CPU principal 10 ejecuta además el procesamiento de geometría (procesamiento de cálculo del valor de coordenadas), el cual es un tema de establecimiento de formas y movimiento de los objetos asociados, para varios datos leídos desde el medio 28, por ejemplo, datos de objeto tridimensional (valores coordinados de los vértices (punto representativo) de un polígono, etc) conformado de una pluralidad de gráficos básicos (polígonos) y genera una lista de exhibición que contiene la información de definición de polígono procesado de geometría (especificaciones de la forma de un polígono utilizado, su posición de trazo, tipo, color o textura, etc de los componentes del polígono). El GPU 14 es un dispositivo semi conductor que retiene el contexto de trazo (datos de trazo, que incluyen componentes de polígonos). Tiene las funciones de leer un contexto de trazo necesario de acuerdo con la lista de exhibición enviada desde el CPU principal 10 para ejecutar el procesamiento de abastecimiento (procesamiento de trazo) y el trazo de polígono sobre la memoria de estructura 15. Ya que la memoria de estructura 15 puede también ser utilizada como una memoria de textura, cualquier imagen de píxel almacenada sobre la memoria de estructura puede ser pegada como una textura sobre el polígono que se va a trazar. El DMAC principal 12 es un dispositivo semi conductor que controla no solamente la transferencia DMA hacia cada circuito conectado al bus principal B1, sino también la transferencia DMA hacia cada circuito conectado al sub bus B2 de acuerdo con la condición de la interfaz de bus INT. El NBS 13 es u dispositivo semi conductor que opera en paralelo con el CPU principal 10 para descomprimir los datos comprimidos, por ejemplo, en el formato MEPG (Grupos de Expertos de Imagen en Movimiento) o JPEG (Grupo de Expertos Fotográficos Unidos). El sub bus B2 está conectado a un sub CPU 20 que incluye un microprocesador, una sub memoria 21 formada de una RAM, una sub DMAC 22, la ROM 23 sobre la cual los programas de control tales como el sistema operativo están almacenados, un dispositivo semi conductor de procesamiento de sonido (SPU: Unidad de Procesamiento de Sonido) 24 que lee los datos de sonido almacenados en una memoria de sonido 25 y produce los mismos como una salida de audio, una unidad de control de comunicación (ATM) 26 que transmite / recibe la información hacia / desde un dispositivo externo por medio de una red (no mostrada), la unidad de medios 27 dentro de la cual el medio 28 tal como un CD-ROM y un DVD-ROM están cargados, y un dispositivo de entrada 31. El sub CPU 20 controla varias operaciones de acuerdo con el programa de control almacenado en la ROM 23. El sub DMCA 22 es un dispositivo semi conductor que controla las operaciones tales como la transferencia DMA hacia cada circuito conectado al sub bus B2 solamente cuando la interfaz de bus INT desconecta el bus principal B1 del sub bus B2. La unidad de entrada 31 comprende una terminal de conexión 32 a través de la cual una señal de entrada desde un dispositivo de operación 35 es recibida, una terminal de conexión 33 a través de la cual una señal de imagen desde una cámara de video 1 es recibida, y una terminal de conexión 34 a través de la cual se recibe una señal de sonido desde la cámara de video . Debe observarse que la descripción en esta especificación está hecha solamente acerca de las imágenes, y no acerca del sonido, por conveniencia. En la computadora que tiene la configuración antes mencionada, el CPU principal 10, el sub CPU 20 y la GPU 14 leen y ejecutan un programa de computadora predeterminada almacenado en el medio de registro tal como la ROM 23 y el medio 28 para formar bloques funcionales que son requeridos para operar como el procesador de imagen: un dispositivo de entrada de imagen 101, un inversor de imagen 102, un dispositivo de almacenamiento de datos objeto 103, un dispositivo de entrada de datos de objeto 104, un controlador de objeto 105, un generador de imagen de sobre posición 106, un detector de valor de diferencia 107 y un controlador de pantalla 108. En la relación con el hardware mostrado en la figura 1, el dispositivo de entrada de imagen 101 está formado del dispositivo de entrada 31 y el sub CPU 20 que controla la operación del mismo. El inversor de imagen 102, el dispositivo de entrada de datos de objeto 104, el controlador de objeto 105 y el detector de valor de diferencia 107 están formados del CPU principal 10. El generador de imagen de sobre posición 106 está formado de la GPU 14. El controlador de pantalla 108 está formado de la GPU 14 y el CRTC 16 que están cooperando entre sí. El dispositivo de almacenamiento de datos objeto 103 se forma en un área de memoria, tal como la memoria principal 11, que es accesible al CPU principal 10.

El dispositivo de entrada de imagen 101 recibe imágenes tomadas por la cámara de video 1 a través de la terminal de conexión 33 del dispositivo de entrada 31. En el caso donde la imagen entrante es una imagen digital, el dispositivo de entrada de imagen 101 recibe la imagen como está. En el caso donde la imagen entrante es una imagen analógica, el dispositivo de entrada de imagen 101 recibe la imagen después de la conversión A / D de la misma. El inversor de imagen 102 ejecuta el procesamiento de reflejo, es decir, la inversión derecha / izquierda sobre la imagen recibida por el dispositivo de entrada de imagen 101, para formar una imagen en movimiento reflejada. El dispositivo de almacenamiento de datos objeto 103 retiene los datos objeto junto con los datos de identificación de los mismos, los datos objeto que son para crear un objeto tal como un menú (incluyendo un sub menú), un "matchstick", o un cursor. El dispositivo de entrada de datos objeto 104 recibe los datos objeto necesarios desde el dispositivo de almacenamiento de datos objeto 103 y los envía hacia el controlador objeto 105. Los datos objeto que van a ser recibidos son instruidos por el controlador objeto 105. El controlador objeto 105 genera una imagen objeto en base a los datos objeto incorporados desde el dispositivo de entrada de datos objeto 104 de acuerdo con la instrucción. En particular, el controlador objeto 105 determina las condiciones de exhibición para un objeto determinado en base al valor de diferencia enviado desde e! detector de valor de diferencia 107 y genera una imagen objeto para realizar las condiciones de exhibición. El valor de diferencia se describirá posteriormente. El generador de imagen de sobre posición 106 traza una imagen combinada en la memoria de estructura 15, la imagen combinada que se obtiene mediante la sobre posición de la imagen en movimiento reflejada suministrada desde el inversor de imagen 102 sobre la imagen de objeto generada por el controlador de objeto 105. Debe observarse que una imagen objeto puede exhibirse sobre una imagen en movimiento reflejada por medio del procesamiento de imposición en vez del procesamiento de sobre posición de la imagen objeto para crear una imagen combinada. El detector de valor de diferencia 107 compara, en una base de cuadro por cuadro, una característica de imagen de la imagen en movimiento reflejada de la imagen combinada generada por el generador de imagen de sobre posición 106 y deriva un valor de diferencia de las características de imagen entre las imágenes en movimiento reflejadas de los cuadros precedentes y siguientes. Además, el detector de valor de diferencia 107 genera una imagen de diferencia entre las imágenes en movimiento reflejadas de los cuadros precedentes y siguientes según se requiera. El valor de diferencia de las características de imagen es un valor que representa cuantitativamente una variación por cuadro del componente de movimiento del objetivo incluido en la imagen en movimiento reflejada. Por ejemplo, el valor de diferencia indica una distancia que el objetivo tiene que moverse en la imagen en movimiento reflejada o un área entre el área después del movimiento y el área antes del movimiento. Cuando una pluralidad de objetivos están incluidos dentro de una imagen en movimiento reflejada, los valores de diferencia de las características de imagen representan variaciones en movimiento de los objetivos individuales. Por lo tanto, es posible calcular cuantitativamente una variación en movimiento de cada objetivo por medio del cálculo de este valor de diferencia. La imagen de diferencia es una imagen que representa una variación en movimiento por cuadro de cada objetivo incluido en la imagen en movimiento reflejada en un punto de tiempo determinado. Por ejemplo, cuando una posición de un objetivo se mueve entre dos imágenes en movimiento reflejadas, la imagen de diferencia es una imagen conformada de la imagen del objetivo antes del movimiento y la imagen del objetivo después del movimiento. A fin de obtener el valor de diferencia y la imagen de diferencia, el detector de valor de diferencia 107 almacena en la memoria principal una cierta imagen en movimiento reflejada como una "imagen de referencia" con relación a las imágenes en movimiento reflejadas de los otros cuadros. La imagen en movimiento reflejada que se va a almacenar puede ser una imagen en movimiento reflejada completa para un cuadro. Alternativamente, puede ser una imagen en movimiento reflejada que es solamente una parte del objetivo debido a que todo lo que se requiere es hacer posible la obtención de un valor de diferencia en las características de imagen. En la siguiente descripción, siempre que deba hacerse una distinción entre un área del objetivo y el resto del área de la imagen, dicha área del objetivo se llamará "imagen de plantilla". El valor de diferencia detectado por el detector de valor de diferencia 107 es enviado al controlador de objeto 105 y utilizado para controlar los movimientos de las imágenes objeto. El controlador de pantalla 108 convierte la imagen combinada generada por el generador de imagen de sobre posición 106 a una señal de video y la suministra hacia el dispositivo de pantalla 3. El dispositivo de pantalla 3 exhibe la imagen combinada (imagen en movimiento) sobre una pantalla utilizando esta señal de video. <Método de procesamiento de imagen> A continuación, se describe una modalidad del método de procesamiento de imagen llevado a cabo utilizando el sistema de procesamiento de imagen antes mencionado. [Modalidad 1] Se asume que el procesador de imagen 2 produce sobre el dispositivo de pantalla 3 una imagen combinada que consta de una imagen en movimiento reflejada de un operador que fue tomada por la cámara de video 1 y que se sometió a reflejo, con una imagen de menú como ejemplo de una imagen objeto sobre puesta, como se muestra en la figura 6. Como un objetivo, es posible seleccionar cualquiera de los diferentes objetos tales como los ojos, boca, y manos del operador. Aquí, se hace la descripción en conjunción con un caso, en la imagen combinada, donde la mano del operador corresponde al objetivo y las instrucciones están designadas con la imagen de menú mediante la detección de la cantidad de movimiento de la mano en el área en la cual se exhibe la imagen de menú. La imagen de menú tiene una estructura jerárquica como se muestra en la figura 7. Cuando el operador selecciona "menú" en la capa superior, una imagen descendente resalta uno de "selectl", "select2" o "select3" en la capa inferior que se exhibe. Cuando un artículo es seleccionado desde el menú descendente, el proceso que determina la imagen (por ejemplo, "process 21", "process 22", "process 23, "process 24") del menú en la capa inferior de la imagen descendente seleccionada es exhibido. El proceso que determina la imagen es almacenado en el dispositivo de almacenamiento de datos objeto 103 de manera que está asociado con un programa para hacer que el CPU principal 10 ejecute un proceso determinado (evento). Cuando un cierto proceso que determina la imagen es seleccionado, el programa asociado con el mismo se corre para ejecutar el proceso correspondiente (evento).

Las figuras 4 y 5 muestran el procesamiento de procedimiento que se lleva a cabo mediante el procesador de imagen 2 para habilitar dichas operaciones. Primero, con referencia a la figura 4, cuando la imagen en movimiento reflejada es actualizada para aquella del cuadro subsecuente y cuando la imagen combinada generada por el generador de imagen de sobre posición 106 es actualizada en consecuencia (etapa S101), el detector de valor de diferencia 107 compara las características de imagen de la imagen en movimiento reflejada incluida en las imágenes combinadas antes y después de la actualización y calcula un valor de diferencia entre ellas (etapa S102). El valor de diferencia que es calculado aquí es un valor que representa un movimiento -de la mano del operador en el área en la cual se exhibe la imagen de menú. Los valores de diferencia calculados son registrados en la memoria principal 11 y adicionados de manera acumulativa durante un cierto periodo (etapa S103). La razón por la que los valores de diferencia son adicionados acumulativamente es que el intento del operador sobre la instrucción de operación es detectada por el procesador de imagen 2 en base a la pluralidad de movimientos de la mano del operador. Si el intento del operador sobre la instrucción de operación puede determinarse de acuerdo con la cantidad de un movimiento individual de la mano, no siempre será necesario ejecutar la adición acumulativa. El detector de valor de diferencia 107 envía el valor de diferencia (suma acumulativa) al controlador de objeto 105.

El controlador de objeto 105 determina el color de la imagen de menú de acuerdo con el valor de diferencia (suma acumulativa) recibido desde el detector de valor de diferencia 107 (etapa S104).

Por ejemplo, dos o más colores se proporcionan para la imagen de menú y el color se cambia cada vez que se detecta un movimiento de la mano. También es posible cambiar el color de transparente a semi transparente, opaco y otros. Un valor de diferencia real (suma acumulativa) es comparado con un umbral predeterminado (etapa S105). Cuando la suma acumulativa es menor que el umbral (etapa S105: N), la rutina regresa a la etapa S101, asumiendo que no es suficiente para determinar que el "menú" de la pantalla de menú ha sido seleccionado. Cuando la suma acumulativa es igual a o mayor que el umbral (etapa S105: Y), el controlador de objeto 105 determina que el "menú" de la pantalla de menú ha sido seleccionado, exhibe una imagen descendente y los reporta al detector de valor de diferencia 107 (etapa S106). Como será evidente a partir de lo anterior, cuando la suma acumulativa del movimiento de la mano del operador detectado en el área en la cual se exhibe la imagen de menú se vuelve igual a mayor que el umbral, la selección del "menú" de la imagen de menú es detectada y se exhibe la imagen descendente. El color de la imagen de menú varía de acuerdo con la suma acumulativa de la cantidad de movimiento de la mano, y por lo tanto el operador puede conocer una cantidad aproximada de un movimiento adicional de la mano requerido para seleccionar el "menú". Además, ya que el dispositivo de exhibición 3 muestra una imagen en movimiento reflejada, el operador puede ejecutar la operación antes descrita por mucho de la misma manera en la que el operador observa en un espejo, proporcionando una interfaz hombre-máquina que es fácil de operar para el operador. Volviendo a la figura 5, cuando se determina que el "menú" sobre la pantalla de menú ha sido seleccionado, es decir, el valor de diferencia (suma acumulativa) se .vuelve igual a o mayor que el umbral, el detector de valor de diferencia 107 almacena la imagen de la mano del operador (objetivo) en ese momento como una imagen de plantilla (etapa S107). Cuando se actualiza el cuadro y la imagen de menú es reemplazada en consecuencia por la imagen descendente en su capa subordinada para exhibir una imagen combinada (etapa S108), se inicia una búsqueda para una ubicación de la imagen de la mano del operador en una nueva imagen combinada. Es decir, el detector de valor de diferencia 107 busca una imagen que iguala a la imagen de plantilla a partir de la imagen combinada (etapa S109). De manera más especifica, divide la imagen combinada en áreas del mismo tamaño que la imagen de plantilla, y busca la imagen que se asemeja a la imagen de plantilla a partir de las imágenes en las áreas divididas. La imagen que más se asemeja a la imagen de plantilla en el área es, por ejemplo, cuando una suma total de valores absolutos (o cuadrado) de diferencia entre los píxeles de las imágenes comparadas se pueden expresar como una distancia, una imagen cuya distancia desde la imagen de plantilla es la mínima. Cuando se encuentra una imagen comparada (etapa S110: Y), se determina si la imagen comparada es una imagen descendente (etapa S 111 ) . Si la imagen comparada es una imagen descendente (etapa S 11 : Y), se detecta para cual área de "selectl", "select2" o "select3" pertenece la imagen descendente (etapa S112). La imagen descendente detectada es la imagen indicada y seleccionada por el operador. La información sobre la imagen descendente seleccionada es reportada a partir del detector de valor de diferencia 107 al controlador de objeto 105. · El controlador de objeto 105 lee un proceso que determina la imagen que acompaña a la imagen descendente seleccionada desde el dispositivo de almacenamiento de datos objeto 103 y genera una imagen objeto para la cual este proceso determina la imagen que está unida (etapa S113). De esta manera, el dispositivo de pantalla 3 muestra como se seleccionan los menús uno después de otro por parte del operador. En el ejemplo en la figura 7, la imagen descendente de "select2" es seleccionada a partir de la imagen de menú en la capa superior y el proceso que determina las imágenes ("process 21", "process 22", "process 23" y "process 24") que acompaña a la imagen descendente de "select2" son exhibidos.

La imagen de plantilla es renovada para cada cuadro. De manera más especifica, el detector de valor de diferencia 107 desecha la imagen de plantilla utilizada para el cuadro precedente y almacena la imagen comparada antes descrita (imagen de la mano del operador utilizada para seleccionar la imagen descendente) como una nueva imagen de plantilla (etapa S114). Después, la rutina regresa a la etapa S108 para especificar uno del proceso que determina las imágenes ("process 21", "process 22", "process 23" y "process 24") en la forma antes descrita. En la etapa S 111 , cuando la imagen comparada está fuera del área de la imagen descendente aunque es cualquiera del proceso que determina imágenes dentro del proceso que determina el área de imagen (etapa S 111 : N, S115: Y), el proceso que determina la imagen se asume que ha sido seleccionado y el contenido del proceso asociado con el mismo determinado, es decir, el programa es habilitado y el proceso que utiliza la imagen de menú es terminada (etapa S118). Cuando la imagen comparada está fuera de las áreas de la imagen descendente y el proceso que determina la imagen aunque está dentro del área de imagen de menú (etapa S111: N, S115: N, S116: Y), esto significa que el operador intenta seleccionar otra imagen descendente, y por lo tanto la rutina descarta la imagen de plantilla, almacena la imagen comparada como una nueva imagen de plantilla y regresa a la etapa S108 (etapa S117). En la etapa S110, cuando no se encuentra imagen comparada para compararse (etapa S110: N) o cuando una imagen comparada es encontrada aunque es una imagen fuera del área de la imagen de menú, el proceso con la imagen de menú se terminará en ese momento (etapa S111: N, S115: N, S116: N). Al llevar a cabo el procesamiento utilizando la imagen de menú en el procedimiento anterior, el operador puede seleccionar fácilmente el proceso con un contenido deseado en tanto que observa la imagen en movimiento reflejada de sí mismo mostrada sobre la pantalla del dispositivo de pantalla 3. Además, el operador puede registrar instrucciones mientras verifica su propio comportamiento sobre la pantalla en cualquier momento, lo cual evita que el operador se aparte de la pantalla del dispositivo de pantalla 3 como en el caso de utilizar un dispositivo de entrada tal como un teclado.

[Modalidad 2].

Es posible, utilizando el sistema de procesamiento de imagen de acuerdo con esta modalidad, establecer una asociación entre una imagen de objeto y un programa que es utilizado por el CPU principal 10 para llevar a cabo un evento que va a ser sometido al procesamiento de imagen, de manera que el procesamiento del evento relevante se ejecuta de acuerdo con una acción de operador dentro de la imagen en movimiento reflejada sobre la imagen objeto. Como un ejemplo" de una imagen objeto que va a ser sobre puesta sobre la imagen en movimiento reflejada, esta modalidad muestra un caso de uso de una imagen de una comparación y una imagen de una flama que representa que el cerillo se enciende y se quema en la flama. Como una premisa, la imagen de cerillo que es la imagen objeto está asociado por anticipado con un programa utilizado para exhibir una animación de encendido sobre el dispositivo de pantalla 3, indicando que se ha iniciado el encendido. Después, cuando el operador en la imagen en movimiento reflejada se comporta como si impactara la imagen de la comparación dentro de la imagen combinada, la animación de encendido está diseñada para aparecer en una parte de la imagen de la comparación que corresponde a un extremo de la misma que produce una flama. La imagen de la flama es exhibida cuando el operador activa el cerillo. La imagen de la flama puede ser generada utilizando una técnica de, por ejemplo, trazado de textura recursivo. El "trazado de textura recursivo" se refiere a una técnica de trazado de reconstrucción de la textura de una imagen determinada a partir de una imagen de un objeto proporcionado mediante el mapeo de textura y ejecutando el mapeo de textura de manera recursiva. "Mapeo de textura" es una técnica para proporcionar una imagen de un objeto a fin de mejorar la textura de la imagen pegando los datos del mapa de bitios de la textura sobre la superficie del objeto y puede implementarse también utilizando la memoria de estructura 15 como una memoria de textura. Cuando se ejecuta dicho trazado de textura recursivo, se aplica el sombreado "gouraud" a un polígono sobre el cual se traza la textura. En otras palabras, el sombreado "gouraud" calcula el brillo de cada vértice del polígono e interpola entre los vértices para obtener el brillo dentro del polígono (está técnica se llama "mapeo de textura "gouraud"). A fin de proporcionar la imagen de flama, las posiciones de los vértices dentro de la malla que forma la imagen de flama se mueve utilizando números aleatorios como se muestra en la figura 10 y las posiciones de los nuevos vértices son determinadas. El brillo de los vértices se determina también en ba.se a los números aleatorios. Las posiciones de los vértices y el brillo de los vértices se determina cada vez que se actualiza el cuadro. Cada unidad de la malla que forma la imagen de flama es un polígono. Sobre cada polígono, la imagen que se convierta en la base de la flama trazada en la memoria de estructura 15 se forma a través del trazado de textura recursivo y el sombreado "gouraud" antes descrito se aplica en base al brillo de cada vértice del polígono. Esto hace posible producir un aire en elevación sobre la flama, brillo tenue y oscurecimiento de la flama en una forma más realista. Se asume que el procesador de imagen 2 produce una imagen combinada como se muestra en la figura 9, con la imagen de un acoplamiento sobre puesto sobre la imagen en movimiento reflejada del operador sobre el dispositivo de pantalla 3. aquí, se asume que el objetivo es la mano del operador. Al detectar la cantidad de movimiento de la mano en el área en la cual la imagen del acoplamiento es exhibida, el programa asociado con la imagen del acoplamiento es ejecutada y la animación de encendido es exhibida sobre el dispositivo de pantalla 3. La figura 8 muestra el procedimiento de procesamiento llevado a cabo por el procesador de imagen 2 para realizar dicha operación.

Cuando la imagen en movimiento reflejada es actualizada para aquella del cuadro subsecuente y cuando la imagen combinada generada por el generador de imagen de sobre posición 106 es actualizada en consecuencia (etapa S301), el detector de valor de diferencia 107 compara las características de imagen de las imágenes en movimiento reflejadas incluidas en las imágenes combinadas antes y después de la actualización, calcula un valor de diferencia entre las imágenes en la sección de encendido de la imagen del acoplamiento y genera una imagen de diferencia de la sección de encendido de la imagen del acoplamiento (etapa S202). El valor de diferencia que se calcula aquí es un valor que representa cuantitativamente el movimiento de la mano alrededor de la sección de encendido de la imagen del acoplamiento. La imagen de diferencia generada es una imagen conformada de las imágenes de la mano antes y después del movimiento de la mano alrededor de la sección de encendido de la imagen del acoplamiento. Los valores de diferencia calculados son registrados en la memoria principal 11 y adicionados de manera acumulativa durante un cierto periodo (etapa S203). El detector de valor de diferencia 107 envía la suma acumulativa, la cual es la suma acumulativa de las imágenes de diferencia y los valores de diferencia, hacia el controlador de objeto 105. El controlador de objeto 105 determina el color de la imagen de diferencia de acuerdo con la suma acumulativa recibida a partir del detector de valor de diferencia 107 y genera una imagen de flama basada en esta imagen de diferencia (etapa S204). La imagen de flama es generada, por ejemplo, dividiendo la imagen de diferencia en mallas y utilizando la textura recursiva antes mencionada en base a esas mallas. El color de la imagen de flama se determina de acuerdo con el color de la imagen de diferencia. La imagen de flama generada es sobre puesta sobre la sección de encendido de la imagen del acoplamiento. De esta manera, la imagen de flama con el color de acuerdo con la cantidad de movimiento de la mano adicionada es exhibida en el área que muestra el movimiento de la mano alrededor déla sección de encendido de la imagen del acoplamiento. La determinación del color de la imagen de flama de acuerdo con la suma acumulativa de los valores de diferencia hace posible, por ejemplo, expresar como el color de la imagen de flama exhibida en la sección de encendido del acoplamiento cambia gradualmente de acuerdo con la cantidad de movimiento de la mano. Después, el controlador de objeto 105 compara el valor que indica el color de la imagen de flama con un umbral predeterminado (etapa S205). Por ejemplo, si el color déla imagen de flama está representado por los valores de color R, G y B, puede utilizarse la suma de los valores. Cuando el valor que indica el color desigual a o mayor que el umbral (etapa S205: Y), el controlador de objeto 105 determina correr el programa que exhibe la animación de encendido que indica que el acoplamiento ha iniciado (etapa S206). Es decir, se inicia o no la animación de encendido esto se determina de acuerdo con el color de la imagen de flama. Por ejemplo, cuando el color de la imagen de flama cambia de rojo a amarillo de acuerdo con la cantidad de movimiento de la mano, la animación de encendido empieza cuando las imágenes de flama cambian a amarillo. El operador puede conocer una cantidad aproximada de movimiento adicional de la mano requerido para iniciar la animación de encendido. El generador de imagen de sobre posición 106 genera una imagen combinada mediante la sobre posición de una sobre posición de imagen de la animación de encendido sobre la imagen objeto incluyendo la imagen de acoplamiento y la imagen de flama, sobre la imagen en movimiento reflejada obtenida mediante la cámara de video 1 (etapa S207). La animación de encendido es exhibida en la sección de encendido de la imagen de acoplamiento. Cuando el valor que indica el color es menor que el umbral (etapa S205: N), el controlador de objeto 105 envía la imagen de objeto que se sobre pone a la imagen de flama sobre la imagen de acoplamiento, al generador de imagen de sobre posición 106. El generador de imagen de sobre posición 106 genera una imagen combinada mediante la sobre posición de esta imagen objeto sobre la imagen en movimiento reflejada obtenida por la cámara de video 1 (etapa S208). Después, si, por ejemplo, una instrucción para terminar el procesamiento es recibida desde el dispositivo de operación 35, se termina el procesamiento (etapa S209: Y). En caso de no haber instrucción para la terminación del procesamiento (etapa S209: N), la rutina regresa a la etapa S201 y el controlador de exhibición 108 exhibe la imagen combinada generada en la etapa S207 o la etapa S208 sobre el dispositivo de pantalla 3. Como es evidente a partir de lo anterior, el sistema ejecuta el proceso de determinar si se ejecuta o no el programa para exhibir la animación de encendido que está asociada con la imagen de acoplamiento, de acuerdo a que tanto el operador mueva su mano alrededor de la sección de encendido de la imagen de acoplamiento.

Ya que el operador puede ejecutar operaciones para realizar varios eventos en tanto que se observa la imagen en movimiento reflejada del mismo, es posible ejecutar operaciones de entrada para ejecutar el proceso más fácilmente que las operaciones convencionales que usan dispositivos de entrada tales como un teclado y ratón.

[Modalidad 3].

Se describe otra modalidad. Como una premisa, se asume que el procesador de imagen 2 produce sobre el dispositivo de pantalla 3 una imagen combinada con una imagen de cursor (apuntador), la cual es un ejemplo de una imagen objeto, sobre puesta sobre la imagen en movimiento reflejada del operador, como se muestra en la figura 13(a). Se asume también que una pluralidad de objetivos tales como manos, ojos y boca de un operador, están incluidos en la imagen en movimiento reflejada. Aquí, se hace la descripción en conjunción con un caso donde el movimiento de la mano del operador está enfatizado entre la pluralidad de objetivos, y la imagen de cursor es seguida por este movimiento de la mano. Como se muestra en la figura 13(a), la imagen de cursor es una imagen similar a una cara con un énfasis sobre los ojos, lo cual permite que los ojos sean orientados hacia el objetivo. Además, la imagen de cursor se mueve siguiendo el movimiento del objetivo. De manera más especifica, cuando la imagen de cursor es distante del objetivo, la imagen de cursor se mueve hacia el objetivo. Cuando la imagen de cursor atrapa el objetivo, la imagen de cursor sigue el movimiento del objetivo. Las figuras 11 y 12, muestran el procedimiento de procesamiento que se ejecuta mediante el procesador de imagen 2 para habilitar dichas operaciones. De acuerdo con la figura 11, cuando la imagen en movimiento reflejada es actualizada a aquella del cuadro subsecuente y cuando la imagen combinada generada por el generador de imagen de sobre posición 106 es actualizada en consecuencia (etapa S301), el detector de valor de diferencia 107 compara las características de imagen de la imagen en movimiento reflejada incluida en las imágenes combinadas antes y después de la actualización y calcula un valor de diferencia entre ellas (etapa S302). El valor de diferencia que es calculado aquí es un valor que cuantifica los movimientos de las manos, ojos, boca, etc del operador, lo cual lo convierte en un candidato del objetivo en la imagen en movimiento reflejada. El detector de valor de diferencia 107 envía el valor de diferencia de cada objetivo al controlador de objeto 105. El controlador de objeto 105 detecta un objetivo en base al valor de diferencia de cada objetivo enviado desde el detector de valor de diferencia 107 (etapa S303). Por ejemplo, detecta un objetivo cuyo valor de diferencia alcanza el máximo. En este ejemplo, se asume que la mano del operador es detectada como el objetivo. A la detección del objetivo, el controlador de objeto 105 determina como se exhibe la imagen de cursor de acuerdo con el objetivo. Primero, el controlador de objeto 105 determina si el objetivo en la imagen combinada actualizada en la etapa S310 está fuera de la imagen de cursor (etapa S304). Si el objetivo está dentro de la imagen de cursor (etapa S304: N), el controlador de objeto 105 determina que la imagen de cursor ha atrapado el objetivo (etapa S308). Si el objetivo está fuera de la imagen de cursor (etapa S304: Y), el controlador de objeto 105 determina que la imagen de cursor no ha atrapado el objetivo, y ejecuta el procesamiento para determinar como se exhibe la imagen de cursor. Es decir, el controlador de objeto 105 genera una imagen de cursor de manera que los ojos en la imagen de cursor están orientados hacia el objetivo. Además, determina la velocidad a la cual la imagen de cursor se mueve hacia el objetivo de acuerdo con la distancia entre la imagen de cursor y el objetivo (etapa S306). Esta velocidad puede ser mayor que la imagen de cursor que se mueve más lejos del objetivo. Esto hace posible obtener una imagen en la cual el cursor se mueve hacia el objetivo más rápido que la imagen de cursor que permanece más lejos desde el objetivo. El generador de imagen de sobre posición 106 se sobre pone a dicha imagen de cursor sobre la imagen en movimiento reflejada del cuadro subsecuente para generar una imagen combinada como se muestra en la figura 13(a) (etapa S307). Después, la rutina regresa a la etapa S301 y ejecuta la misma operación para la imagen combinada generada. La rutina ejecuta las operaciones de la etapa S301 a S307 hasta que la imagen de cursor atrapa el objetivo, es decir, hasta que se determine la etapa S304 que el objetivo está dentro de la imagen de cursor. Dichas operaciones pueden proporcionar una imagen como se muestra en la figura 13(a) en la cual los ojos en la imagen de cursor están orientados hacia el objetivo (mano) y la imagen de cursor sigue el objetivo. Después, regresando a la figura 12, cuando la imagen de cursor atrapa el objetivo, el detector de valor de diferencia 107 sostiene la imagen del objetivo en ese momento como una imagen de plantilla (etapa S309). Por ejemplo, retiene la sección de la imagen en movimiento reflejada que traslapa con la imagen de cursor como la imagen de plantilla. Después, el detector de valor de diferencia 107 adquiere la imagen en movimiento relejada del cuadro subsecuente a partir del inversor de imagen 102 (etapa S310). El detector de valor de diferencia 107 busca la posición de una imagen que acopla la imagen de plantilla almacenada de entre la imagen de movimiento reflejada adquirida (etapa S311). De manera más especifica, divide la imagen en movimiento reflejada adquirida dentro de las áreas del mismo tamaño que aquella de la imagen de plantilla, y busca la imagen en el área que se asemeja más a la imagen de plantilla entre las imágenes en las áreas divididas. A la detección de la imagen acoplada como un resultado de la búsqueda, reporta la posición de la imagen detectada para el controlador de objeto 105. El controlador de objeto 105 determina la posición reportada desde el detector de valor de diferencia 107 como la posición de la imagen de cursor para la imagen combinada subsecuente (etapa S312). El generador de imagen de sobre posición 106 sobre pone la imagen de cursor en la posición determinada en la etapa S312 mediante el controlador de objeto 105 sobre la misma imagen en movimiento reflejada que la imagen en movimiento reflejada adquirida en la etapa S310 mediante el detector de valor de diferencia 107, y genera una imagen combinada como se muestra en la figura 13(b) (etapa S313). Después, el cuadro es actualizado y el controlador de exhibición 108 exhibe la imagen combinada generada sobre el dispositivo de pantalla 3 (etapa S314). Repitiendo las operaciones antes descritas después de que se atrapa el objetivo (etapa S309 a etapa S314) se proporciona una imagen en la cual la imagen de cursor sigue al objetivo. De manera más especifica, cuando la imagen de cursor atrapa el objetivo (mano) como se muestra en la figura 13(b), la imagen de cursor es exhibida posteriormente en el destino del objetivo siempre que se mueve el objetivo. Incluso cuando el operador extiende la mano como se muestra en la figura 13(b) a la figura 13(c), la imagen de cursor es exhibida en la punta de la mano extendida del operador junto con el movimiento de la mano reconocido como el objetivo. Utilizando la imagen de cursor se permite al operador encontrar en un vistazo que parte de su cuerpo está funcionando como el cursor cuando se selecciona un proceso a partir de la imagen de menú como se muestra en la modalidad 1, por ejemplo. Además, si, por ejemplo, el trazo del movimiento de la imagen de cursor se fija para mantenerse y exhibirse, es posible mostrar el trazo del movimiento del objetivo sobre el dispositivo de pantalla 3. Esto hace posible mostrar, por ejemplo, imágenes y caracteres, etc trazados en el espacio sobre el dispositivo de pantalla 3. Como será evidente a partir de la descripción anterior, cuando el operador necesita registrar dato.s u otros, la presente invención permite al operador registrar o seleccionar los datos fácilmente utilizando la imagen en movimiento reflejada en tanto que observa la imagen combinada exhibida sobre el dispositivo de pantalla, y por lo tanto proporciona una interfaz de entrada amigable con el usuario sin la necesidad de acostumbrarse a la misma. Pueden hacerse varias modalidades, cambios y modificaciones sin apartarse del amplio espíritu y alcance de la presente invención. Las modalidades antes descritas están destinadas a ser ilustrativas y no a limitar el alcance de la presente invención. El alcance de la presente invención está definido por las reivindicaciones anexas en lugar de por las modalidades de las mismas. Varias modalidades que quedan dentro del alcance de las reivindicaciones anexas y equivalentes de las mismas están contempladas dentro del alcance de la presente invención.

Claims (11)

REIVINDICACIONES

1. Un procesador de imagen que comprende: medios de captura de imagen para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento; medios generadores de imagen para generar una imagen objeto que representa un objeto predeterminado, de acuerdo con un movimiento del objetivo que está incluido en la imagen en movimiento reflejada capturada por los medios de captura de imagen; y medios de control para combinar la imagen de objeto generada por los medios generadores de imagen con la imagen en movimiento reflejada y capturada y exhibir la imagen combinada sobre un dispositivo de pantalla predeterminado.

2. Un procesador de imagen que comprende: medios de captura de imagen para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento sobre la serie de tiempo; medios detectores para detectar el objetivo y un componente de movimiento del mismo a través de la detección de características de imagen entre una imagen en movimiento reflejada actual y una imagen en movimiento reflejada inmediatamente precedente; medios generadores de imagen para generar una imagen objeto que representa un objeto predeterminado de manera que la imagen objeto varía de acuerdo con el componente de movimiento del objetivo detectado por los medios detectores; y medios de control para combinar la imagen objeto generada por los medios generadores de imagen con dicha imagen en movimiento reflejada y capturada y exhibir la imagen combinada sobre un dispositivo de pantalla predeterminado.

3. El procesador de imagen de conformidad con la reivindicación 2, caracterizado porque dichos medios generadores de imagen están configurados para generar la imagen objeto de manera que la imagen objeto sigue un movimiento del objetivo detectado.

4. El procesador de imagen de conformidad con la reivindicación 2, que comprende además medios para hacer preparaciones para ejecutar el procesamiento requerido en base a la imagen objeto generada de acuerdo con el componente de movimiento de dicho objetivo.

5. El procesador de imagen de conformidad con la reivindicación 2, que comprende además medios para comparar una imagen combinada obtenida mediante la combinación de la imagen objeto generada por dichos medios generadores de imagen y la imagen en movimiento reflejada actual, con una imagen de plantilla que es la imagen del objetivo incluida en la imagen en movimiento reflejada inmediatamente precedente, detectar la parte de la imagen combinada cuya característica de imagen es más semejante a la imagen de plantilla, y hacer preparaciones para ejecutar el procesamiento requerido en base a la imagen de objeto cuando la imagen de dicha parte de la imagen combinada detectada incluye la imagen de objeto.

6. El procesador de imagen de conformidad con la reivindicación 2, caracterizado porque la imagen objeto es asociada con el procesamiento predeterminado, el procesador de imagen que comprende además medios para ejecutar el procesamiento que está asociado con la imagen objeto cuando el componente de movimiento de dicho objetivo detectado por los medios detectores satisface una condición predeterminada.

7. El procesador de imagen de conformidad con la reivindicación 2, en donde la imagen en movimiento reflejada incluye una pluralidad de dichos objetivos, los medios detectores están configurados para detectar el componente de movimiento en cada una de la pluralidad de objetivos, y detectar un objetivo en base a los componentes de movimientos detectados de dicha pluralidad de objetivos; y los medios generadores de imagen están configurados para cambiar la imagen de objeto de acuerdo con el componente de movimiento de dicho objetivo detectado por los medios detectores.

8. Un método de procesamiento de imagen, que comprende las-etapas de: capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento dentro de un procesador de imagen; el procesador de imagen que genera una imagen objeto que representa un objeto predeterminado de acuerdo con un movimiento del objetivo incluido en la imagen en movimiento reflejada y capturada, y capturar la imagen de objeto generada con la imagen en movimiento reflejada y capturada para exhibir la imagen combinada sobre un dispositivo de pantalla previamente determinado.

9. un programa de computadora para ocasionar que una computadora conectada a un dispositivo de pantalla ejecute el procesamiento de: capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento; generar una imagen objeto que representa un objeto predeterminado de acuerdo con un movimiento del objetivo incluido en la imagen en movimiento reflejada y capturada; y combinar la imagen objeto generada con la imagen en movimiento reflejada y capturada para exhibir la imagen combinada sobre el dispositivo de pantalla.

10. Un medio de registro que se puede leer en computadora que registra el programa de computadora de conformidad con la reivindicación 9.

11. Un dispositivo semi conductor que está incorporado en un aparato montado en una computadora conectada a un dispositivo de pantalla, el dispositivo semi conductor que ocasiona que la computadora forme las funciones de: medios para capturar una imagen en movimiento reflejada una parte de la cual incluye un objetivo en movimiento; medios para generar una imagen de objeto que representa un objeto predeterminado de acuerdo con un movimiento del objetivo incluido en la imagen en movimiento capturada y reflejada; y medios para combinar la imagen de objeto generada con la imagen en movimiento reflejada y capturada para exhibir la imagen combinada sobre el dispositivo de pantalla.