馃殌 Que plataforma de Datos (饾棛饾棶饾棷饾椏饾椂饾棸, 饾棪饾椈饾椉饾槃饾棾饾椆饾棶饾椄饾棽, 饾棗饾棶饾榿饾棶饾棷饾椏饾椂饾棸饾椄饾榾), trabaja mejor con funciones AI (Inteligencia Artificial)?
Este benchmark de Pawel Potasinski es de gran utilidad
馃攷 Lo primero es entender como trabaja cada plataforma para entender los resultados:
饾棗饾棶饾榿饾棶饾棷饾椏饾椂饾棸饾椄饾榾. Las funciones de IA son funciones integradas que se utilizan para aplicar IA, como la traducci贸n de texto o el an谩lisis de sentimientos, sobre los datos almacenados en Databricks. Pueden ejecutarse desde cualquier parte de Databricks, incluyendo Databricks SQL, notebooks, Delta Live Tables y Workflows.
饾棛饾棶饾棷饾椏饾椂饾棸. Las funciones de IA aprovechan la potencia de GenAI para resumir, clasificar, generar texto y mucho m谩s, todo con una sola l铆nea de c贸digo.
饾棪饾椈饾椉饾槃饾棾饾椆饾棶饾椄饾棽. Las funciones SQL de Cortex LLM est谩n optimizadas para el rendimiento y se recomiendan para procesar numerosas entradas, como texto de grandes tablas SQL. El procesamiento por lotes suele ser m谩s adecuado para las funciones LLM.
饾棩饾棙饾棪饾棬饾棤饾棙饾棥:
- Las funciones de IA en Databricks, Fabric y Snowflake ofrecen un buen conjunto de capacidades impulsadas por IA generativa. Los desarrolladores de SQL y los ingenieros de datos deber铆an prestarle atenci贸n, ya que las capacidades parecen muy interesantes.
- Las funciones de IA son perfectas para los escenarios de procesamiento por lotes, por ejemplo, las tareas de enriquecimiento de datos como parte de las canalizaciones de datos.
- Databricks y Snowflake brillan en lo que respecta a la facilidad de uso de las funciones de IA, adem谩s de ofrecer sus 谩reas de juego de IA, que facilitan enormemente las pruebas de diferentes LLM. Fabric a煤n no ha llegado ah铆, pero su hoja de ruta parece s贸lida.
- Snowflake ofrece el mayor n煤mero de LLM alojados en su plataforma (m谩s de 20). Ten en cuenta que estos modelos pueden diferir en coste y disponibilidad regional.
- Cada plataforma viene con algunas capacidades 煤nicas para las funciones de IA. No se han incluido todas estas capacidades 煤nicas en este estudio, as铆 que puedes probar por tu cuenta con las funciones de IA en tu plataforma favorita.
- El rendimiento de las diferentes funciones de IA var铆a para las diferentes plataformas
- la percepci贸n general es que Fabric y Snowflake proporcionaron los tiempos de ejecuci贸n m谩s predecibles.
Ver estudio completo: https://lnkd.in/duk7ps8S
