Dataflow
An�lisis de transmisiones para IA generativa y inteligencia en tiempo real
Maximiza el potencial de tus datos en tiempo real. Dataflow es una plataforma de transmisi�n completamente administrada, f�cil de usar y escalable para acelerar la IA y el AA en tiempo real.
Los clientes nuevos obtienen $300 en cr�ditos gratuitos que pueden usar en Dataflow.
Funciones
Usa IA y AA de transmisi�n para potenciar los modelos de IA generativa en tiempo real
Los datos en tiempo real potencian los modelos de IA y AA con la informaci�n m�s reciente, lo que mejora la exactitud de las predicciones. Dataflow ML simplifica la implementaci�n y la administraci�n de canalizaciones de AA completas. Ofrecemos patrones listos para usar con recomendaciones personalizadas, detecci�n de fraudes, prevenci�n de amenazas y mucho m�s. Compila IA de transmisi�n con Vertex AI, modelos de Gemini y modelos de Gemma, ejecuta inferencia remota y optimiza el procesamiento de datos con MLTransform. Mejora la eficiencia de los trabajos de MLOps y AA con la GPU de Dataflow y las capacidades de ajuste adecuado.
Habilita casos de uso avanzados de transmisi�n a escala empresarial
Dataflow es un servicio completamente administrado que usa el SDK de Apache Beam de c�digo abierto para habilitar casos de uso avanzados de transmisi�n a escala empresarial. Ofrece numerosas capacidades para estado y hora, transformaciones y conectores de E/S. Dataflow escala a 4,000 trabajadores por trabajo y procesa petabytes de datos de manera rutinaria. Presenta el ajuste de escala autom�tico para un uso �ptimo de los recursos en las canalizaciones por lotes y de transmisi�n.
Implementa el procesamiento de datos multimodal para la IA generativa
Dataflow permite la transferencia y transformaci�n paralelas de datos multimodales, como im�genes, texto y audio. Aplica la extracci�n de atributos especializados para cada modalidad y, luego, los fusiona en una representaci�n unificada. Estos feed de datos fusionados se incorporan a los modelos de IA generativa, lo que les permite crear contenido nuevo a partir de diversas entradas. Los equipos internos de Google aprovechan Dataflow y FlumeJava para organizar y calcular predicciones de modelos para un gran grupo de datos de entrada disponibles sin requisitos de latencia.
Acelera el tiempo de generaci�n de valor con plantillas y notebooks
Dataflow tiene herramientas que facilitan los primeros pasos. Las plantillas de Dataflow son planos predise�ados para el procesamiento de transmisi�n y por lotes, y est�n optimizadas para una integraci�n eficiente de datos de CDC y BigQuery. Crea canalizaciones de forma iterativa con los frameworks de ciencia de datos más recientes desde cero con notebooks de Vertex AI y realiza implementaciones con el ejecutor de Dataflow.El compilador de trabajos de Dataflow es una IU visual para compilar y ejecutar canalizaciones de Dataflow en la consola de Google Cloud, sin escribir ningún código.
Ahorra tiempo con herramientas de supervisión y diagnóstico inteligentes
Dataflow ofrece herramientas de diagnóstico y supervisión integrales. La detección de retrasos identifica automáticamente los cuellos de botella de rendimiento, mientras que el muestreo de datos permite observar los datos en cada paso de la canalización. Dataflow Insights ofrece recomendaciones para mejorar los trabajos. La IU de Dataflow proporciona herramientas de supervisión enriquecidas, incluidos gráficos de trabajos, detalles de ejecución, métricas, paneles de ajuste de escala automático y registros. Dataflow también cuenta con una IU de supervisión de costos de trabajos para estimar el costo de forma sencilla.
Administración y seguridad integradas
Dataflow te ayuda a proteger tus datos de varias maneras: mediante la encriptación de los datos en uso con la asistencia de Confidential VM; claves de encriptación administradas por el cliente (CMEK); integración de los Controles del servicio de VPC desactivando las IP públicas. El registro de auditoría de Dataflow le brinda a tu organización la visibilidad del uso de Dataflow y ayuda a responder la pregunta “¿Quién hizo qué, dónde y cuándo?”. para una mejor administración.
C�mo funciona
Dataflow es una plataforma completamente administrada para el procesamiento de datos por lotes y de transmisi�n. Habilita canalizaciones de ETL escalables, an�lisis de transmisiones en tiempo real, AA en tiempo real y transformaciones de datos complejas con el modelo unificado de Apache Beam, todo en una infraestructura sin servidores de Google Cloud.
Dataflow es una plataforma completamente administrada para el procesamiento de datos por lotes y de transmisi�n. Habilita canalizaciones de ETL escalables, an�lisis de transmisiones en tiempo real, AA en tiempo real y transformaciones de datos complejas con el modelo unificado de Apache Beam, todo en una infraestructura sin servidores de Google Cloud.
Usos comunes
IA generativa y AA en tiempo real
Toma medidas en tiempo real con la transmisi�n de AA/IA
Toma medidas en tiempo real con la transmisi�n de AA/IA
Divide en segundas decisiones genera valor empresarial. Dataflow Streaming AI y AA permiten que los clientes implementen inferencias y predicciones de baja latencia, personalizaci�n en tiempo real, detecci�n de amenazas, prevenci�n de fraudes y muchos m�s casos de uso en los que la inteligencia en tiempo real es importante. Preprocesa datos con MLTransform, que te permite enfocarte en transformar tus datos y dejar de escribir c�digo complejo o administrar bibliotecas subyacentes. Haz predicciones a tu modelo de IA generativa con RunInference.
Instructivos, gu�as de inicio r�pido y labs
Toma medidas en tiempo real con la transmisi�n de AA/IA
Toma medidas en tiempo real con la transmisi�n de AA/IA
Divide en segundas decisiones genera valor empresarial. Dataflow Streaming AI y AA permiten que los clientes implementen inferencias y predicciones de baja latencia, personalizaci�n en tiempo real, detecci�n de amenazas, prevenci�n de fraudes y muchos m�s casos de uso en los que la inteligencia en tiempo real es importante. Preprocesa datos con MLTransform, que te permite enfocarte en transformar tus datos y dejar de escribir c�digo complejo o administrar bibliotecas subyacentes. Haz predicciones a tu modelo de IA generativa con RunInference.
An�lisis de transmisiones
Incorpora los datos de transmisi�n para obtener estad�sticas en tiempo real y canalizaciones operativas
Incorpora los datos de transmisi�n para obtener estad�sticas en tiempo real y canalizaciones operativas
Comienza tu recorrido por la transmisi�n de datos integrando tus fuentes de datos de transmisi�n (PubSub, Kafka, eventos de CDC, flujo de clics de usuarios, registros y datos de sensores) en BigQuery, data lakes de GCS, Spanner, Bigtable, almacenes de SQL, Splunk, Datadog y mucho m�s. Explora las plantillas de Dataflow optimizadas para configurar tus canalizaciones con unos pocos clics y sin c�digo. Agrega l�gica personalizada a tus trabajos de plantilla con un compilador de UDF integrado o crea canalizaciones de ETL personalizadas desde cero con toda la potencia de las transformaciones de Beam y el ecosistema de conectores de E/S. Dataflow tambi�n se usa frecuentemente para revertir los datos procesados ETL de BigQuery a almacenes OLTP para b�squedas r�pidas y entregar a los usuarios finales. Es un patr�n com�n para que Dataflow escriba datos de transmisi�n en varias ubicaciones de almacenamiento.
Inicia tu primer trabajo de Dataflow y realiza nuestro curso autoguiado sobre las bases de Dataflow.
Instructivos, gu�as de inicio r�pido y labs
Incorpora los datos de transmisi�n para obtener estad�sticas en tiempo real y canalizaciones operativas
Incorpora los datos de transmisi�n para obtener estad�sticas en tiempo real y canalizaciones operativas
Comienza tu recorrido por la transmisi�n de datos integrando tus fuentes de datos de transmisi�n (PubSub, Kafka, eventos de CDC, flujo de clics de usuarios, registros y datos de sensores) en BigQuery, data lakes de GCS, Spanner, Bigtable, almacenes de SQL, Splunk, Datadog y mucho m�s. Explora las plantillas de Dataflow optimizadas para configurar tus canalizaciones con unos pocos clics y sin c�digo. Agrega l�gica personalizada a tus trabajos de plantilla con un compilador de UDF integrado o crea canalizaciones de ETL personalizadas desde cero con toda la potencia de las transformaciones de Beam y el ecosistema de conectores de E/S. Dataflow tambi�n se usa frecuentemente para revertir los datos procesados ETL de BigQuery a almacenes OLTP para b�squedas r�pidas y entregar a los usuarios finales. Es un patr�n com�n para que Dataflow escriba datos de transmisi�n en varias ubicaciones de almacenamiento.
Inicia tu primer trabajo de Dataflow y realiza nuestro curso autoguiado sobre las bases de Dataflow.
Integraci�n de datos y ETL en tiempo real
Moderniza tu plataforma de datos con datos en tiempo real
Moderniza tu plataforma de datos con datos en tiempo real
ETL en tiempo real y proceso de integraci�n, y escritura de datos de inmediato, lo que permite un an�lisis y una toma de decisiones r�pidos. La arquitectura sin servidores y las capacidades de transmisi�n de Dataflow lo hacen ideal para compilar canalizaciones de ETL en tiempo real. La capacidad de ajuste de escala autom�tico de Dataflow garantiza la eficiencia y el escalamiento, mientras que su compatibilidad con varias fuentes de datos y destinos simplifica la integraci�n.
Crea tus aspectos b�sicos con el procesamiento por lotes en Dataflow con este curso de Google Cloud Skills Boost.
Instructivos, gu�as de inicio r�pido y labs
Moderniza tu plataforma de datos con datos en tiempo real
Moderniza tu plataforma de datos con datos en tiempo real
ETL en tiempo real y proceso de integraci�n, y escritura de datos de inmediato, lo que permite un an�lisis y una toma de decisiones r�pidos. La arquitectura sin servidores y las capacidades de transmisi�n de Dataflow lo hacen ideal para compilar canalizaciones de ETL en tiempo real. La capacidad de ajuste de escala autom�tico de Dataflow garantiza la eficiencia y el escalamiento, mientras que su compatibilidad con varias fuentes de datos y destinos simplifica la integraci�n.
Crea tus aspectos b�sicos con el procesamiento por lotes en Dataflow con este curso de Google Cloud Skills Boost.
Marketing Intelligence
Transforma tu estrategia de marketing con estad�sticas en tiempo real
Transforma tu estrategia de marketing con estad�sticas en tiempo real
La inteligencia de marketing en tiempo real analiza los datos actuales del mercado, los clientes y los competidores para tomar decisiones r�pidas e informadas. Permite respuestas �giles a tendencias, comportamientos y acciones competitivas, lo que transforma el marketing. Estos son algunos de los beneficios:
- Marketing en varios canales en tiempo real con ofertas personalizadas
- Mejor administraci�n de las relaciones con los clientes a trav�s de interacciones personalizadas
- Optimizaci�n �gil de la combinaci�n de marketing
- Segmentaci�n din�mica de usuarios
- Inteligencia competitiva para mantenerse a la vanguardia
- Gesti�n proactiva de crisis en las redes sociales
Instructivos, gu�as de inicio r�pido y labs
Transforma tu estrategia de marketing con estad�sticas en tiempo real
Transforma tu estrategia de marketing con estad�sticas en tiempo real
La inteligencia de marketing en tiempo real analiza los datos actuales del mercado, los clientes y los competidores para tomar decisiones r�pidas e informadas. Permite respuestas �giles a tendencias, comportamientos y acciones competitivas, lo que transforma el marketing. Estos son algunos de los beneficios:
- Marketing en varios canales en tiempo real con ofertas personalizadas
- Mejor administraci�n de las relaciones con los clientes a trav�s de interacciones personalizadas
- Optimizaci�n �gil de la combinaci�n de marketing
- Segmentaci�n din�mica de usuarios
- Inteligencia competitiva para mantenerse a la vanguardia
- Gesti�n proactiva de crisis en las redes sociales
Estad�sticas de flujo de clics
Optimiza y personaliza las experiencias web y de apps
Optimiza y personaliza las experiencias web y de apps
El an�lisis de flujo de clics en tiempo real permite a las empresas analizar al instante las interacciones de los usuarios en sitios web y aplicaciones. Esto permite la personalizaci�n en tiempo real, las pruebas A/B y la optimizaci�n del embudo, lo que genera una mayor participaci�n, un desarrollo m�s r�pido de los productos, una reducci�n de la deserci�n y una mejor asistencia para los productos. En �ltima instancia, permite una experiencia del usuario superior e impulsa el crecimiento de la empresa a trav�s de precios din�micos y recomendaciones personalizadas.
Instructivos, gu�as de inicio r�pido y labs
Optimiza y personaliza las experiencias web y de apps
Optimiza y personaliza las experiencias web y de apps
El an�lisis de flujo de clics en tiempo real permite a las empresas analizar al instante las interacciones de los usuarios en sitios web y aplicaciones. Esto permite la personalizaci�n en tiempo real, las pruebas A/B y la optimizaci�n del embudo, lo que genera una mayor participaci�n, un desarrollo m�s r�pido de los productos, una reducci�n de la deserci�n y una mejor asistencia para los productos. En �ltima instancia, permite una experiencia del usuario superior e impulsa el crecimiento de la empresa a trav�s de precios din�micos y recomendaciones personalizadas.
Precios
| C�mo funcionan los precios de Dataflow | Explorar el modelo de facturaci�n y recursos de Dataflow | |
|---|---|---|
| Servicios y uso | Descripci�n | Precios |
Recursos de procesamiento de Dataflow | La facturaci�n de Dataflow para los recursos de procesamiento incluye lo siguiente: | Obt�n m�s informaci�n en nuestra p�gina de precios detallada. |
Otros recursos de Dataflow | Otros recursos de Dataflow que se facturan por todos los trabajos incluyen Persistent Disk, instant�neas y GPU. | Obt�n m�s informaci�n en nuestra p�gina de precios detallada. |
Descuentos por compromiso de uso (CUDs) de Dataflow | Los CUDs de Dataflow ofrecen dos niveles de descuentos, seg�n el per�odo de compromiso:
| Obt�n m�s informaci�n sobre los CUDs de Dataflow. |
M�s informaci�n sobre los precios de Dataflow. Ver todos los detalles de precios.
C�mo funcionan los precios de Dataflow
Explorar el modelo de facturaci�n y recursos de Dataflow
Recursos de procesamiento de Dataflow
La facturaci�n de Dataflow para los recursos de procesamiento incluye lo siguiente:
Obt�n m�s informaci�n en nuestra p�gina de precios detallada.
Otros recursos de Dataflow
Otros recursos de Dataflow que se facturan por todos los trabajos incluyen Persistent Disk, instant�neas y GPU.
Obt�n m�s informaci�n en nuestra p�gina de precios detallada.
Descuentos por compromiso de uso (CUDs) de Dataflow
Los CUDs de Dataflow ofrecen dos niveles de descuentos, seg�n el per�odo de compromiso:
- Un CUD de un a�o te da un descuento del 20% sobre la tarifa seg�n demanda
- Un CUD de tres a�os te da un descuento del 40% sobre la tarifa seg�n demanda
Obt�n m�s informaci�n sobre los CUDs de Dataflow.
M�s informaci�n sobre los precios de Dataflow. Ver todos los detalles de precios.
Calculadora de precios
Presupuesto personalizado
Comienza tu prueba de concepto
Los clientes nuevos obtienen $300 para probar Dataflow
¿Tienes un proyecto grande?
Cómo usar Dataflow
Plantillas de Dataflow compiladas previamente
Explora las muestras de código de Dataflow
Caso empresarial
Descubre por qué los clientes líderes eligen Dataflow
Namitha Vijaya Kumar, propietaria del producto, SRE de GCP, ANZ Bank
“Dataflow está ayudando tanto a nuestro proceso por lotes como al procesamiento de datos en tiempo real, garantizando así el mantenimiento de la puntualidad de los datos en el lago de datos de la empresa. Esto, a su vez, ayuda al uso posterior de los datos para las estadísticas y la toma de decisiones, y la entrega de notificaciones en tiempo real para nuestros clientes minoristas”.
Leer la historia del clienteContenido relacionado
Entre pares, Google recibió el reconocimiento entre pares como opción elegida por el cliente para el procesamiento de transmisión de eventos
Obtén el informe
Innovaciones de Google Data Cloud para una inteligencia continua en tiempo real
Leer el blog
Yahoo compara Dataflow con Apache Flink autoadministrado para dos casos de uso de transmisi�n
Leer el blog
Beneficios de Dataflow
Transmisi�n de AA simplificada
Capacidades listas para llevar la transmisi�n a la IA y el AA: RunInference para inferencia, MLTransform para el procesamiento previo del entrenamiento de modelos, el enriquecimiento para las b�squedas en tiendas de atributos y la compatibilidad din�mica con GPU reducen el trabajo repetitivo sin desperdicio de recursos de GPU.
Relaci�n precio-rendimiento �ptima con herramientas s�lidas
Dataflow ofrece una transmisi�n rentable con optimizaci�n automatizada para maximizar el rendimiento y el uso de recursos. Escala sin esfuerzo para manejar cualquier carga de trabajo y cuenta con autorreparaci�n potenciada por IA. Las herramientas s�lidas ayudan con las operaciones y la comprensi�n.
Abierto, port�til y extensible
Dataflow se dise�� para Apache Beam de c�digo abierto con compatibilidad unificada por lotes y de transmisi�n, lo que permite que tus cargas de trabajo sean port�tiles entre nubes, de forma local o a dispositivos perimetrales.
Integraci�n y socios
Socios de Dataflow
Los socios de Google Cloud desarrollaron integraciones a Dataflow para permitir la realizaci�n r�pida y sencilla de tareas potentes de procesamiento de datos de cualquier tama�o. Conoce a todos los socios para comenzar tu recorrido de transmisi�n hoy mismo.
