La conclusión es que la mayoría de los microcontroladores (especialmente los MCU de juguete como Arduinos) simplemente no son capaces de manejar el video de una manera útil, especialmente si están tratando de hacer otra cosa al mismo tiempo. El gran volumen de datos los derrota.
Hay un sistema en dispositivos de chip como la línea ASC88xx de NXP que son codificadores / decodificadores de video especialmente diseñados, pero además de poder manejar el video de una manera significativa, es poco probable que satisfagan sus necesidades (una poderosa CPU ARM con periféricos de video, en un paquete BGA, no es para aficionados que trabajan en el nivel de Arduino).
Le sugiero que reitere su pregunta y explique exactamente qué es lo que está tratando de lograr. ¿Qué quiere decir con "tomará entrada de video", por ejemplo; ¿Qué vas a hacer con el video una vez que lo hayas digitalizado?