Se divulga un método de detección de la opción seleccionada en un menú de aplicación multimedia dotado de una interfaz humana,

cuando esa opción seleccionada está delimitada por un área de color plano cuya posición y/o contenido varía a través de un elemento de interfaz humana asociado al dispositivo de visualización, donde la detección se efectúa a través de un análisis del video mostrado en el dispositivo de visualización.

Método de detección de la opción seleccionada en un menú de aplicación multimedia.

Sector de la técnica

La presente invención está relacionada con el tratamiento de la señal de vídeo en dispositivos electrónicos de visualización.

Específicamente, esta invención tiene su aplicación en el campo de los servicios multimedia móviles, domésticos y corporativos, en los que existen menús textuales o icónicos navegables a través de cualquier tipo de interfaz humana.

Estado de la técnica

Los recientes avances tecnológicos han conducido a la creación de un nuevo medio interactivo, el sistema interactivo de visualización de una imagen de vídeo. Estos sistemas permiten la interacción humana en tiempo real con los dispositivos de presentación de vídeo.

La identificación del foco (área seleccionada por el usuario en una aplicación multimedia), surge como un paso necesario para la automatización de acciones que se aplican sobre el dispositivo de visualización. Actualmente no se han encontrado referencias a métodos que identifiquen la situación del foco (área seleccionada en una aplicación multimedia) en una aplicación de usuario, a partir del vídeo mostrado por el dispositivo de visualización de la aplicación.

Sin embargo, el método utilizado en la presente invención implementa algoritmos de tratamiento y análisis de vídeo (HSV color segmentation (Hue, Saturation, Value)) de los que sí existen referencias en las patentes que se citan a continuación, aunque el objetivo de todas ellas difiere sustancialmente del objetivo de la presente invención.

Patentes relacionadas:

Patente Internacional WO 2005 041579 -Method and system for processing captured image information in an interactive video display system.- La imagen capturada por una cámara es comparada con una imagen modelo de fondo, y es comparada también con una segunda imagen modelo de fondo, donde el segundo modelo de fondo es asimilado a una velocidad mayor que la del modelo de fondo normal. La comparación de la imagen capturada de la cámara con el modelo de fondo normal genera una primera imagen de salida, y la comparación de la imagen capturada de la cámara con la segunda imagen modelo de fondo genera una segunda imagen de salida. En un modo de realización, la primera imagen de salida y la segunda imagen de salida generan son imágenes en blanco y negro que identifican una parte del primer plano y una parte del fondo de la imagen capturada por la cámara.

Patente de Estados Unidos núm. 6681043 -Interactive video object processing environment which visually distinguishes segmented video object.- En esta invención, un entorno de proceso para el tratamiento de vídeo incluye un interfaz de usuario y una cubierta de proceso desde la cual se ejecutan diversos programas "plug-in" de proceso. El interfaz de usuario permite a un operador cargar una secuencia de vídeo, definir y visualizar uno o más objetos de vídeo, en uno o más de los cuadros de la secuencia de vídeo, editar segmentaciones de objetos de vídeo existentes, visualizar objetos de vídeo a través de una serie de cuadros de vídeo, y codificar objetos de vídeo entre una secuencia de vídeo en un formato deseado. Se pueden ajustar diversos parámetros que permiten al operado observar la secuencia de vídeo codificada con diversos ajustes de los parámetros. En este entorno de proceso, un operador es capaz de realizar segmentaciones automáticas a través de una secuencia de cuadros de vídeo, en lugar de las largas segmentaciones manuales de cada cuadro de vídeo.

Patente de Estados Unidos núm. 6724933 - Media segmentation system and related methods. Describe un método que recibe un contenido multimedia y analiza uno o más atributos de escenas sucesivas. Basándose en el análisis de estos atributos, genera una puntuación para cada una de las escenas sucesivas, donde la segmentación de escenas se realiza para agruparlas semánticamente. En esta invención se utilizan algoritmos de histogramas de color donde la cuantificación del espacio de color es HSV.

Patente de Estados Unidos núm. 7177470 - Method of and system for detecting uniform color segments. Describe un método de detección de bordes para una serie de cuadros sucesivos en una secuencia de vídeo. El método incluye los pasos para la adquisición de la información de color de cada cuadro, los cálculos el histograma de color y la aplicación de técnicas de detección de bordes.

Patente de Estados Unidos núm. 5933524 - Method for segmentation of digital color images. Método para la segmentación de imágenes con color digitales con un sistema de procesamiento de datos electrónico.

Problema técnico planteado

El problema técnico que se plantea es identificar el lugar de la pantalla donde está situado el foco, en una aplicación de usuario, a partir del vídeo mostrado por el dispositivo de visualización de la aplicación.

A medida que las aplicaciones multimedia van aumentando su complejidad, surge la necesidad de analizar y/o automatizar tareas sin que en muchos casos exista una interfaz programática sobre ellas, pudiendo únicamente interactuar con la aplicación en modo usuario. Por tanto, sólo estaría disponible para análisis el vídeo y el audio que muestra la aplicación en el dispositivo de uso, cuyo sistema de interfaz humana (mando a distancia, teclado, joystick, sensor de movimiento...) es la única vía de interacción con la aplicación.

Uno de los problemas que se encuentran al abordar este tema es la necesidad de determinar, en los menús asociados a la aplicación, el área de texto que el sistema considera seleccionada, y cuyo valor (texto, icono o una combinación de ambos), informa al usuario sobre el destino de la aplicación cuando solicite la ejecución de la selección (Botón OK, clic izquierdo del ratón, o cualquier otro elemento habitual de selección).

Solución propuesta: Objeto de la invención

La solución propuesta soluciona el problema planteado de la siguiente forma:

Se detecta el área seleccionada en una aplicación multimedia, cuando ésta se encuentra delimitada por una zona de color plano, a través del análisis del vídeo mostrado en el dispositivo de visualización utilizando, como medio de interacción con tal dispositivo, la interfaz humana asociada con el mismo.

Es decir, haciendo uso de las facilidades de una interfaz humana. En particular, la invención facilita que un programa de aplicación, "vea" evolucionar los menús como respuesta a los comandos que el propio programa envía de manera equivalente a la visión por parte del usuario de la interfaz humana.

El problema que resuelve la invención, es permitir que un programa de aplicación actúe sobre la navegabilidad del sistema. El programa, haciendo uso de la invención, adquiere la capacidad de "ver" la evolución de los menús, de manera equivalente a como lo vería un usuario.

Breve descripción de los dibujos

Para completar la descripción y con objeto de ayudar a una mejor comprensión de las características del presente método, se acompaña como parte integrante de dicha descripción, un juego de figuras donde con carácter ilustrativo y no limitativo, se ha representado lo siguiente:

La figura 1 representa el algoritmo permite determinar cuál es el área de foco inicial y cual es el área de foco final emparejando la acción solicitada al dispositivo de interfaz humana con las coordenadas de los dos objetos.

La figura 2 representa el análisis de la imagen en el modelo HSV, apagando los píxeles que no se encuentren en un entorno configurable del color HSV₀.

La figura 3 muestra una aplicación multimedia típica, con ventanas de vídeo y de publicidad con imágenes secuenciales.

La figura 4 muestra el área seleccionada cuya localización persigue el método (por encima del identificador 1).

La figura 5 muestra las áreas de movimiento espontáneo (sin intervención del usuario), numeradas del 2 al 4.

La figura 6 muestra un ejemplo típico de la imagen de máscara obtenida para anular los movimientos espontáneos.

La figura 7 muestra la diferencia entre dos imágenes en escala de grises (representada con línea de trazos), con un cambio de selección entre ellas, y tras aplicar la máscara.

La figura 8 muestra el elemento seleccionado...

1. Método de detección de la opción seleccionada en un menú de aplicación multimedia, dotado de una interfaz humana o interfaz de usuario que permite a un operador cargar una secuencia de vídeo y definir y visualizar uno o más objetos de vídeo, en uno o más de los cuadros de la secuencia de vídeo, siendo el método aplicable cuando dicha opción seleccionada está delimitada por un área de color plano cuya posición y/o contenido varía a través de un elemento de interfaz humana asociado a un dispositivo de visualización, caracterizado por detectar un área seleccionada o zona de interés de dicha aplicación multimedia a través del análisis del vídeo mostrado en el dispositivo de visualización, utilizando como medio de interacción con dicho dispositivo de visualización la interfaz humana asociada con el mismo, comprendiendo los pasos siguientes

2. Método según la reivindicación 1, caracterizado porque dichas dos áreas de interés de la etapa b) se separan en zonas siguiendo modelos de conectividad y construyendo un modelo de objetos visibles individualmente basado en la continuidad de la luminancia de los píxeles.

3. Método, según la reivindicación 2, caracterizado porque para realizar dicha etapa d) comprende: