NVIDIA Broadcast está un poco subestimado

, Forma parte de la Historia

¿Qué pasaría si le dijera que una tarjeta gráfica podría ser la forma más rápida de mejorar su transmisión en vivo o el audio de un podcast? Suena contradictorio, pero piénselo: una GPU a menudo tiene una cantidad extrema de potencia de procesamiento inactiva, así que ¿por qué no usar ese hardware redundante para otras cosas?

Afortunadamente, NVIDIA está muy por delante de nosotros y ya ha aprovechado el potencial de sus propias GPU para hacer cosas más allá de los gráficos. Por ejemplo, puede recordar RTX Voice, que como su nombre lo indica, es una herramienta para mejorar su juego de micrófonos. Luego, lanzó silenciosamente Broadcast, una herramienta más completa dirigida directamente a los streamers y creadores de contenido. Ambos ofrecen excelentes funciones de mejora de audio, pero nos centraremos en Broadcast aquí, ya que ha reemplazado de manera efectiva (aunque no por completo) a RTX Voice.

En la cima, debería establecer algunas expectativas. Si bien Broadcast ofrece algunas herramientas útiles para todos los transmisores, el beneficio real es para aquellos con más equipo de nivel de entrada. Por ejemplo, si tiene algo como un Blue Yeti y una cámara web más antigua, sacará más provecho de esta herramienta que alguien con un Shure SM7B y un Sony A7.

Broadcast específicamente «utiliza Tensor Cores en las GPU NVIDIA RTX para acelerar los cálculos de IA para que pueda jugar, transmitir en vivo y ejecutar redes de IA al mismo tiempo». Es compatible con cualquier GPU RTX, «GeForce RTX 2060, Quadro RTX 3000 o superior», según un portavoz de la empresa.

Te puede interesar  Final Fantasy VII: The First Soldier es el juego de rol clásico al que se le ha dado el tratamiento Fortnite

Si aún no posee una GPU compatible, ahora no es exactamente el mejor momento para buscar una, gracias a la escasez de chips en curso, pero las cosas parecen estar mejorando lentamente. Si tu hacer tiene una tarjeta compatible, entonces simplemente puede descargar la aplicación Broadcast y comenzar a crackear. La mejor noticia es que, si tiene un auricular Logitech o un micrófono azul, a partir de hoy, Broadcast es compatible de forma nativa, por lo que ni siquiera tendrá que sumergirse en la aplicación.

Los modelos admitidos en el lanzamiento son los auriculares inalámbricos G733, Pro X y Pro X de Logitech, y los micrófonos Yeti X, Yeti Classic y Yeti Nano de Blue. Si bien eso es solo una fracción de las ofertas de las empresas, todavía representa una gran cantidad de auriculares y micrófonos que hoy tienen un potencial nuevo y sin explotar.

NVIDIA / James Trew

La asociación de Logitech, hasta la fecha, solo funciona con algunos productos y solo con algunas de las funciones que se ofrecen en NVIDIA Broadcast. Aquellos que busquen el conjunto completo de funciones audiovisuales deberán descargar la aplicación independiente. Una vez que esté en Transmisión, verá tres pestañas principales: Micrófono, Altavoz y Cámara. Nos centraremos principalmente en la sección del micrófono, pero los otros dos son igualmente útiles y todo se combina en un solo concentrador para ajustar su transmisión, ya sea de video, audio o ambos.

Debajo de la pestaña Micrófono, encontrará un menú desplegable a la izquierda para seleccionar su fuente de entrada y un espacio debajo para agregar efectos. El área de la derecha está dedicada a una herramienta para probar estos efectos antes de comprometerse con ellos.

En este momento, solo hay dos efectos para elegir. Pero ambos son útiles y no hay chácharas novedosas (¡consigue tus voces de robot en otra parte!). La transmisión se centra en dar forma a su transmisión, no en convertirla en otra cosa. Y lo que es más importante, todo en tiempo real, a diferencia de algo como iZotope RX, que es increíblemente bueno para reparar el sonido, pero está destinado a la postproducción.

El primer efecto es la eliminación del eco de la habitación. Para cualquiera que tenga un espacio con una acústica menos que favorable, esto le ayudará a reducir ese temido sonido de “cueva” con el que probablemente ha estado luchando. La reducción de reverberación es en realidad toda una ciencia, dado que estás tratando de eliminar elementos de un sonido que son … bueno, muy, muy similares a la fuente. Por lo tanto, no puede simplemente eliminar las frecuencias errantes y terminar con eso, debe dejar la señal original intacta.

NVIDIA mantuvo las cosas agradables y simples. Otras herramientas profesionales (como el RX de iZotope) le brindan una gran variedad de configuraciones y controles. ¿Transmisión? Solo dos: encendido / apagado y «fuerza» (cantidad de reverberación que se debe eliminar). Para probar esto, utilicé un micrófono de condensador, ya que son los más propensos a captar reverberación. En la grabación a continuación, comienzo sin aplicar ningún efecto antes de marcar en aproximadamente el 50 por ciento y luego finalmente con la fuerza configurada al máximo.

Como puede escuchar, el efecto es, bueno, efectivo. La acústica en la habitación en la que grabé las muestras no es terrible, pero definitivamente no es óptima. Pero la diferencia entre la grabación en bruto y luego con la reverberación eliminada es marcada. El efecto es más evidente en la primera grabación con el micrófono de condensador. La señal sin procesar está … bien, pero las cosas han mejorado mucho con la herramienta de eliminación de eco configurada aproximadamente a la mitad. La grabación se siente mucho más presente y no hay eco en la habitación que distraiga. Más, no siempre es mejor. Una vez que marque el efecto hasta el 100 por ciento, la reverberación podría eliminarse, pero a expensas de la señal original. En resumen, juegue con la configuración para encontrar el mejor equilibrio para sus gustos y espacio de grabación.

Notarás en la segunda grabación que realmente no hay tanta reverberación para eliminar. Esto es gracias al micrófono dinámico que hace un buen trabajo en sí mismo. Puede escuchar una diferencia una vez que empiezo a agregar el efecto, pero puede que no valga la pena correr el riesgo de degradar el audio de origen por un beneficio tan pequeño.

Quizás más impresionante que la eliminación de eco es el segundo efecto que se ofrece: reducción de ruido. Si bien la reverberación tiende a ser constante, los ruidos externos son impredecibles. Las cosas pueden estar tranquilas cuando te sientas a grabar, solo para que una motocicleta ruidosa o un perro ladrando invadan tu flujo momentos después. Sin embargo, no con la eliminación de ruido aplicada.

Este efecto es increíblemente hábil para eliminar cualquier cosa que no sea tu voz de tu transmisión. Ya sea un martillo neumático, un bebé llorando al lado o incluso una canción que suena en un altavoz junto a su micrófono. Honestamente, escuche lo siguiente.

¿Observa cómo no puede escuchar la canción cuando se aplica el efecto? Eso proviene de un altavoz apenas a un pie detrás del micrófono. Cuando lo grabé, es completamente audible para mis oídos, pero casi completamente inaudible en la grabación. yo digo casi ya que aquellos con oídos agudos pueden notar el fragmento extraño que aparece, pero realmente tienes que escuchar con atención. De hecho, le pregunté a NVIDIA sobre esto y me dieron esta respuesta:

“Las redes de IA están capacitadas para reconocer algunos patrones y, como tal, habrá áreas grises donde la IA puede tener dudas. […] Como tal, queríamos darles a nuestros usuarios flexibilidad para ejecutar los efectos en un rango cómodo, o ajustar las cosas en caso de que necesitaran ayuda en situaciones extremas. Por ejemplo, para los efectos de audio, recomendamos ejecutarlos al 75-90 por ciento, dependiendo de la cantidad de ruido de fondo o eco de la sala «.

Como se mencionó, Broadcast reemplazó en gran medida a RTX Voice, pero NVIDIA decidió parchearlo con soporte para las GPU NVIDIA GeForce GTX, lo que significa que aún puede obtener las herramientas de reducción de ruido incluso si su GPU no es compatible con Broadcast. Sin embargo, dice la compañía, las experiencias variarán en las tarjetas más antiguas.

Al igual que con la eliminación de la reverberación, el ajuste de fuerza afectará en última instancia a la calidad de la salida, por lo que se necesita prueba y error para encontrar el punto óptimo. También es posible que desee considerar la hora del día. Si, por ejemplo, vive cerca de una carretera ruidosa, puede marcar un segundo par de configuraciones para cuando tenga que grabar alrededor de la hora pico.

El filtro de eliminación de ruido es impresionante, pero no está exento de limitaciones. Por un lado, el control deslizante de «fuerza» no parece atenuar los sonidos como la música, sino que se cae solo una vez que aplica la cantidad máxima. Al menos en mis pruebas. Dudo que esté transmitiendo intencionalmente con música que solo usted quiere escuchar, así que eso es algo menor a tener en cuenta, pero si hacer Necesita mantener la fuerza al máximo, tenga en cuenta esa degradación en la señal que empeorará cuanto más ruido elimine la transmisión.

Como complemento de los efectos vocales, la pestaña del medio en Transmisión es «Altavoces». Podemos resumir esta sección en una sola toma: es lo mismo que el micrófono, solo para el audio entrante. Es decir, puede continuar y eliminar el eco de la habitación o el ruido de fondo de las personas con las que está hablando. con. Si alguna vez ha estado en una llamada de Zoom durante estos tiempos de pandemia y el bebé de alguien comienza a llorar o tiene una carretera muy ruidosa cerca, entonces puede perdonar sus oídos egoístamente aquí.

Conceptualmente, los efectos de su cámara funcionan de manera similar a los de su micrófono. Los núcleos de inteligencia artificial de NVIDIA están “atentos” al ruido o, dependiendo de todo su entorno. Sí, con Broadcast puedes lograr un efecto de pantalla verde sin la pantalla real. Puede que estés pensando «bueno, Zoom / Meet / TikTok hace eso» y estarías en lo cierto, pero esos no lo hacen tan bien. A continuación se muestra un ejemplo de cómo se ve la eliminación / reemplazo de fondo en Broadcast

, Forma parte de la Historia

James Trew / Engadget

Definitivamente puedes ver dónde el efecto no es perfecto alrededor de mi cabello, pero en general funciona muy bien. Me di cuenta de que luchaba con el reposacabezas de mi silla, con la imagen parpadea alrededor de esa área mientras me movía, pero nuevamente, está muy por encima de lo que podría esperar de una aplicación de chat gratuita.

En total, hay cinco efectos para cámaras. Tres para tu fondo: difuminar, eliminar y reemplazar (¡las imágenes o los videos funcionan!). Luego está Auto Frame, que se recorta y luego mantiene tu cara en el centro. Por último, pero no menos importante, está la eliminación de ruido de video: esto es apto para grabar con poca luz y su cámara comienza a tener un aspecto granulado. Puedes ver algunos ejemplos en la imagen de abajo. Dos fueron tomadas con una GoPro y el otro par son de una vieja cámara réflex digital reutilizada como cámara web.

Si tiene buena iluminación, probablemente no necesite la herramienta de eliminación de ruido. Pero si su cámara tiene problemas con cualquier otra cosa que no sea la abundancia de fotones, este filtro puede ayudar. Nuevamente, al igual que con las herramientas de audio, tenga en cuenta que más no siempre es mejor. Descubrí que con el efecto aplicado al 100 por ciento obtienes el «suavizado» revelador que les dirá a tus espectadores que estás empapelando las grietas.

, Forma parte de la Historia

James Trew / Engadget

Las herramientas de fondo, por otro lado, son un poco más indulgentes. La herramienta de desenfoque hace un buen trabajo al oscurecer los elementos detrás de usted, pero hay un contraste muy poco natural entre usted, enfocado y literalmente cualquier otra cosa en la toma. Esto es similar a cómo suelen aparecer las fotos en modo «retrato» del iPhone. El fondo está borroso, pero el sujeto parece poco natural ya que casi no hay transición entre el primer plano y el fondo.

Esto es, por supuesto, un beneficio cuando desea eliminar el fondo por completo. Con este filtro, NVIDIA hace un trabajo sorprendentemente bueno aislándote y eliminando todo lo demás. Si desea transmitir a través de OBS (o similar) con un juego o video en la pantalla mientras juega en la esquina, este es el efecto que desea y no se requiere pantalla verde.

, Forma parte de la Historia

James Trew / Engadget

Como se vio anteriormente, NVIDIA hace un trabajo mucho mejor al eliminar el fondo que, por ejemplo, Zoom o Google Meet. Casi no hay sangrado alrededor del cabello o las manos, lo que significa que su fondo rara vez se asoma y arruina la ilusión de la pantalla verde. El reemplazo de fondo es esencialmente una extensión de este efecto con la opción de elegir su propia imagen o video para reemplazar lo que sea que esté detrás de usted.

El último de los efectos de video es Auto-Frame que, como su nombre indica, lo mantiene bloqueado en el centro de su toma. Para hacer esto, el video se recorta un poco y usa el espacio adicional para cambiar suavemente el video de izquierda a derecha o viceversa a medida que se mueve. El movimiento no es discordante, se ve bastante suave y es una buena manera de asegurarse de que no se desvíe accidentalmente hacia un lado si es inquieto (como yo) y no se queda quieto.

También puede combinar estos efectos si lo desea. Auto-Frame se puede apilar con eliminación de ruido o uno de los efectos de fondo, por ejemplo, o puede usar eliminar fondo con eliminación de ruido aplicada. Sin embargo, en este momento solo puede apilar dos, pero eso probablemente sea algo bueno, ya que los tres al mismo tiempo pueden ser un poco demasiado.

El conjunto de efectos de la cámara se encuentra actualmente en fase beta, y NVIDIA ha estado agregando nuevas funciones y mejorando el rendimiento a un ritmo rápido. La versión 1.2 en mayo integró Broadcast en aplicaciones de transmisión populares como OBS, mientras que la última versión 1.3 lanzada en septiembre agregó soporte para muchas aplicaciones de cámara virtual e hizo que la combinación de efectos de video sea mucho más viable al reducir su uso de VRAM en un 40 por ciento.

Si bien el rendimiento y el uso de la memoria nunca serán un problema para quienes usan Broadcast para sus chats, los transmisores de una PC que usan la aplicación mientras juegan agradecerán los marcos adicionales. Quizás, algún día, podamos atrevernos a soñar con muchas otras características, como la compatibilidad con múltiples micrófonos (con diferentes efectos), la transcripción en vivo para subtítulos e incluso la detección inteligente de música con licencia para que sus transmisiones no marquen una violación de la DMCA.

Todos los productos recomendados por Engadget son seleccionados por nuestro equipo editorial, independiente de nuestra casa matriz. Algunas de nuestras historias incluyen enlaces de afiliados. Si compra algo a través de uno de estos enlaces, es posible que ganemos una comisión de afiliado.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *