{"id":140102,"date":"2020-05-21T18:53:18","date_gmt":"2020-05-21T16:53:18","guid":{"rendered":"https:\/\/www.cined.com\/?p=140102"},"modified":"2020-05-21T19:16:39","modified_gmt":"2020-05-21T17:16:39","slug":"sony-imx500-worlds-ai-image-sensor-announced","status":"publish","type":"post","link":"https:\/\/staging.cined.dev\/es\/sony-imx500-worlds-ai-image-sensor-announced\/","title":{"rendered":"Sony IMX500 \u2013 Anuncian el primer sensor de imagen con IA del mundo"},"content":{"rendered":"

La nueva serie de sensores de imagen Sony IMX500 Intelligent Vision contiene sistemas de an\u00e1lisis de imagen por IA directamente en el chip, lo que abre capacidades nuevas y m\u00e1s r\u00e1pidas para las c\u00e1maras.<\/strong><\/p>\n

\"Sony<\/a>

Los nuevos chips de la serie Intelligent Vision IMX500 de Sony ofrecen capacidades que solo est\u00e1n limitadas por la imaginaci\u00f3n. Imagen: Sony Electronics<\/p><\/div>\n

El anuncio<\/a> describe dos nuevos modelos de chips CMOS Intelligent Vision, el Sony IMX500 y el IMX501. Por lo que pude notar, estos comparten el mismo chip base, excepto que el 500 es el mero producto de chip, mientras que el 501 es un producto empaquetado.<\/p>\n

Ambos son chips de tipo 1\/2.3″ con 12.3 megap\u00edxeles efectivos. Parece claro que uno de los principales mercados para el nuevo chip son las c\u00e1maras de seguridad y de sistema. Sin embargo, tener procesos de IA en el chip ofrece nuevas e interesantes posibilidades para futuras c\u00e1maras de video, particularmente aquellas montadas en drones o en c\u00e1maras de acci\u00f3n como una GoPro o una Insta 360.<\/p>\n

\"Sony<\/a>

Los nuevos chips de la serie Intelligent Vision IMX500 de Sony. El IMX500 a la izquierda, el IMX501 a la derecha. Imagen: Sony Electronics<\/p><\/div>\n

\u00bfQu\u00e9 puede hacer el sensor Sony IMX500?<\/h2>\n

Una capacidad destacada del nuevo chip reside en funciones como la identificaci\u00f3n de objetos o personas. Esto podr\u00eda ser a trav\u00e9s del seguimiento de dichos objetos, o de hecho identific\u00e1ndolos de verdad. La salida del nuevo chip tampoco tiene que estar en forma de imagen. Los metadatos se pueden generar para que simplemente pueda enviar una descripci\u00f3n de lo que ve sin la imagen visual que lo acompa\u00f1a. Esto puede reducir el requisito de almacenamiento de datos hasta en 10.000 veces.<\/p>\n

Para usos de c\u00e1maras de seguridad o de sistema, una c\u00e1mara equipada con el nuevo chip podr\u00eda contar el n\u00famero de personas que pasan frente a \u00e9l o identificar falta de stock en los estantes de una tienda. Incluso podr\u00eda programarse para identificar el comportamiento del cliente a trav\u00e9s de mapas de calor.<\/p>\n

\"Sony<\/a>

C\u00f3mo est\u00e1 compuesto el nuevo sensor Sony Intelligent Vision. Imagen: Sony Electronics<\/p><\/div>\n

Para las c\u00e1maras tradicionales, podr\u00eda mejorar los sistemas de enfoque autom\u00e1tico al poder identificar y rastrear sujetos con mucha m\u00e1s precisi\u00f3n. Con sistemas de IA como este, podr\u00eda hacer que los sistemas de enfoque autom\u00e1tico sean m\u00e1s inteligentes al identificar \u00e1reas de una imagen en las que es probable que se est\u00e9 enfocando. Por ejemplo, si deseas tomar una fotograf\u00eda de una flor, el sistema de AF sabr\u00eda enfocarse en eso en lugar de, por ejemplo, la rama de un \u00e1rbol detr\u00e1s de ella. El reconocimiento facial tambi\u00e9n se volver\u00eda mucho m\u00e1s r\u00e1pido y m\u00e1s confiable.<\/p>\n

Los sistemas de enfoque autom\u00e1tico de hoy en d\u00eda ya se est\u00e1n volviendo incre\u00edblemente buenos, pero si estuvieran respaldados por una identificaci\u00f3n ultrarr\u00e1pida de objetos en el chip, podr\u00edan ser a\u00fan mejores. Tambi\u00e9n para las c\u00e1maras 360, la capacidad de tener metadatos de seguimiento de objetos m\u00e1s confiables ayudar\u00eda con el reencuadre en post-producci\u00f3n.<\/p>\n

\"Sony<\/a>

El nuevo chip no tiene que generar im\u00e1genes. Simplemente podr\u00eda generar una descripci\u00f3n de lo que ve. Imagen: Sony Electronics.<\/p><\/div>\n

\u00bfPor qu\u00e9 necesitamos IA en el chip?<\/h2>\n

Hay dos motivaciones principales para querer colocar capacidades de IA directamente en el chip. La primera es que hace que el procesamiento sea mucho, mucho m\u00e1s r\u00e1pido. El Sony IMX500 puede realizar sus capacidades a la velocidad de un cuadro de video, en lugar de tener que enviar esos datos a lo largo de una tuber\u00eda para ser procesados \u200b\u200ben otro lugar. La otra ventaja es una mayor seguridad. Muy a menudo los datos se env\u00edan a trav\u00e9s de la nube para el an\u00e1lisis de im\u00e1genes por IA. Tener estos sistemas en el chip elimina esa posible laguna de seguridad.<\/p>\n

La IA en la nube tampoco se puede usar estando desconectado, y adem\u00e1s restringe la capacidad de realizar an\u00e1lisis en tiempo real de manera confiable. La energ\u00eda y el costo de los procesos computacionales en la nube tambi\u00e9n est\u00e1n aumentando, y eso no es bueno para el medio ambiente.<\/p>\n

En t\u00e9rminos de c\u00e1maras peque\u00f1as como las GoPros, significa que este tipo de procesamiento no necesita ser realizado por otro chip en otra parte de la c\u00e1mara. Esto ahorra energ\u00eda, pero tambi\u00e9n significa que el chip de procesamiento principal de la c\u00e1mara y la memoria pueden liberarse para hacer otras cosas, como una mejor estabilizaci\u00f3n electr\u00f3nica o procesamiento de color.<\/p>\n

\"Sony<\/a>

Un ejemplo de seguimiento en tiempo real en el mostrador de una tienda. Observa c\u00f3mo tambi\u00e9n rastrea el movimiento de los brazos del empleado de la tienda. Imagen: Sony Electronics<\/p><\/div>\n

Solo est\u00e1 limitado por tu imaginaci\u00f3n<\/h2>\n

Pero las capacidades del nuevo chip, que los desarrolladores pueden programar a pedido para que hagan exactamente lo que necesitas, solo est\u00e1n limitadas por la imaginaci\u00f3n. Sony usa un autom\u00f3vil como un ejemplo de c\u00f3mo podr\u00eda usarse, identificando al conductor y ajustando autom\u00e1ticamente la posici\u00f3n del asiento del autom\u00f3vil. Otro ejemplo es poder reconocer si el conductor se esta quedando dormido.<\/p>\n

Para las c\u00e1maras deportivas, el dispositivo podr\u00eda ser capaz de identificar tu forma durante el movimiento. Si deseas mejorar tu yoga o artes marciales, por ejemplo, podr\u00eda ayudarte a identificar \u00e1reas de mejor\u00eda al compararlo con un ejemplo “perfecto”. El reconocimiento de voz por el movimiento de los labios tambi\u00e9n podr\u00eda volverse potencialmente mucho m\u00e1s r\u00e1pido, e incluirse en todas las c\u00e1maras. Para las personas que filman drama, esto tendr\u00eda un gran potencial cuando se trata de registrar tomas o identificarlas a partir de un gui\u00f3n si la c\u00e1mara est\u00e1 emitiendo actuaciones de actores en forma de texto al mismo tiempo que est\u00e1 grabando la imagen.<\/span><\/p>\n

El IMX500 tambi\u00e9n parece un chip altamente capaz desde una perspectiva de video puro. Es capaz de 4K a hasta 60 fps y 1080p a hasta 240 fps. Aunque actualmente el chip est\u00e1 restringido a 30 fps para el procesamiento completo de video y IA juntos.<\/p>\n

Con todo, si bien esta es solo la primera generaci\u00f3n de chips, es de esperar que este tipo de capacidad se implemente en otros chips m\u00e1s convencionales con el tiempo y, por lo tanto, es un desarrollo significativo que vale la pena informar.<\/p>\n