Visión y audio

47

Cómo reconoce la IA objetos en fotos, sigue la postura del cuerpo y convierte la voz en texto. CNN, detección de objetos, segmentación, estimación de pose, TTS, STT: muchos se prueban con una simple webcam y un micrófono.

Nivel
Asistente de vozVoice Assistant

Una IA que se llama y responde con la voz

Herramientas Inicial
Captura de movimientoMotion Capture

Guardar el movimiento del cuerpo como un registro de posiciones

Inicial
Clasificación de imágenesImage Classification

Poner una sola etiqueta a una foto completa

Inicial
Clasificación de sonidosSound Classification

Ponerle una etiqueta a un trozo corto de sonido

Inicial
Clonación vocalVoice Cloning

Imitar la voz de una persona a partir de una grabación breve

Fundamentos
CNNConvolutional Neural Network

La red que encuentra patrones en fotos, capa por capa

Fundamentos
ColoreadoColorization

Poner un color adecuado a una imagen en blanco y negro

Generativa Inicial
ConvoluciónConvolution

El cálculo que recorre fotos y otros datos moviendo un panel pequeño

Fundamentos
Cuadro delimitadorBounding Box

El recuadro que envuelve un objeto y su posición exacta

Inicial
Descripción de imágenesImage Captioning

Mirar una foto y escribir su contenido en una frase

Generativa Fundamentos
Detección de objetosObject Detection

Encontrar cada objeto de una foto y marcarlo con un recuadro

Inicial
Detección de rostrosFace Detection

Encontrar con un cuadro dónde hay una cara en la foto

Inicial
Detección de tonoPitch Detection

Averiguar qué tan aguda o grave es una nota

Inicial
Eliminación de fondoBackground Removal

Borrar el fondo de una foto y dejar solo el objeto

Inicial
Eliminación de ruidoDenoising

Retirar solo la mancha mezclada, dejando el original intacto

Generativa Fundamentos
EscaladoUpscaling

Agrandar una imagen con IA inventando el detalle que no tenía

Generativa Inicial
EspectrogramaSpectrogram

El dibujo que deja ver el sonido con los ojos

Fundamentos
Estimación de posePose Estimation

Marcar con puntos las articulaciones para descubrir la postura

Inicial
Estimación de profundidadDepth Estimation

Averiguar qué está cerca y qué lejos en una sola foto

Fundamentos
FiltroFilter / Kernel

El panel pequeño de números que dice qué buscar

Fundamentos
Gaussian Splatting

Una escena 3D guardada en millones de manchas de color

Generativa Avanzado
Generación de músicaMusic Generation

Crear una canción con IA a partir de una petición o de un comienzo

Generativa Inicial
Inferencia en tiempo realReal-Time Inference

Terminar el juicio sobre cada entrada dentro de un tiempo corto y fijo

Fundamentos
Landmark

Punto de referencia numerado que siempre marca el mismo lugar

Fundamentos
Mapa de característicasFeature Map

La imagen que deja el resultado del recorrido en su lugar

Avanzado
NeRFNeural Radiance Field

Una escena en 3D que responde con luz a un lugar y una dirección

Generativa Avanzado
OCR

Leer las letras de una imagen y convertirlas en texto

Inicial
Pooling

El paso que reduce la imagen dejando solo un valor por zona

Fundamentos
Punto claveKeypoint

Punto que marca con precisión una posición en la imagen

Fundamentos
Puntuación de confianzaConfidence Score

El número de seguridad que el modelo se pone a su propia respuesta

Inicial
Reconocimiento de accionesAction Recognition

Ver una secuencia de cuadros para descubrir qué acción es

Fundamentos
Reconocimiento de gestosGesture Recognition

Leer un movimiento de mano o cuerpo como un significado fijo

Inicial
Reconocimiento de locutorSpeaker Recognition

Distinguir, por la voz, quién es la persona que habla

Fundamentos
Reconocimiento de patronesPattern Recognition

Reconocer las regularidades que se repiten

Básicos Inicial
Reconocimiento de vozSpeech Recognition

La tecnología que transcribe la voz humana en texto

Básicos Inicial
Reconocimiento facialFace Recognition

Comparar rostros para averiguar quién es esa persona

Inicial
ResoluciónResolution

La cantidad de puntos que forman una imagen

Generativa Inicial
SegmentaciónSegmentation

Poner una etiqueta a cada punto de la foto

Fundamentos
Seguimiento de manosHand Tracking

Seguir de un cuadro a otro el lugar de los nudillos de la mano

Inicial
Seguimiento de objetosObject Tracking

Mantener el mismo número sobre el mismo objeto siempre

Fundamentos
Separación de fuentesSource Separation

Separar un sonido mezclado en sus distintas partes

Fundamentos
Sincronización labialLip Sync

Ajustar la forma de la boca al ritmo del sonido

Fundamentos
STTSpeech-to-Text

La conversión que recibe sonido y devuelve letras

Inicial
TTSText-to-Speech

La tecnología que lee un texto en voz alta

Inicial
Visión por computadoraComputer Vision

La tecnología que hace que la computadora entienda fotos y videos

Básicos Inicial
Vision Transformer

La estructura que corta la foto en trozos y los trata como texto

Avanzado
Vocoder

La parte que convierte el plano del sonido en forma de onda real

Avanzado