DATABRICKS SPARK SQL SESION PART2

¿Qué comando SQL se utiliza para listar los archivos en un directorio específico en Databricks?

• %sql ls

• %fs ls

• %dbfs ls

• %list fs

¿Para qué sirve el comando %fs mkdirs en Databricks?

• Eliminar directorios

• Mover archivos

• Crear nuevos directorios

• Listar directorios

¿Qué es el Catalyst Optimizer en Spark SQL?

• Una librería de visualización de datos optimizada

• Garbage collector optimizado

• Un optimizador de consultas sql

• Un gestor de bases de datos sql

Menciona uno de los modos de escritura de datos en Spark. Elige una o mas

• a. merge

• b. overwrite

• c. link

• d. append

¿Qué caracteriza a una tabla Delta?

• Solo lee datos en formato CSV y parquet

• Solo soporta esquemas fijos

• Soporta ACID transactions

• Optimiza el Spark SQL en lectura y escritura

¿Cuál es el propósito de particionar datos al escribirlos en formato Parquet o Delta?

• Incrementar el espacio de almacenamiento

• Mejorar la seguridad de los datos

• Mejorar el rendimiento de las consultas

• Facilitar la eliminación de datos

¿Qué comando se utiliza para copiar archivos de un directorio a otro en Databricks?

• %fs mv

• %fs cp

• %fs transfer

• %py cp

¿Cómo se define un esquema manualmente al leer datos en Spark SQL?

• Using SchemaType

• With StructData

• StructType y StructField

• DefineType y DefineField

¿Qué significa la operación saveAsTable en Spark SQL?

• Guardar los datos en la nube internamente

• Imprimir los resultados en consola externa

• Guardar el DataFrame como una tabla en el catálogo de Spark-autogestionada

• Salvar los datos en un archivo local y del esquema existene del catalogo

¿Qué se debe hacer para eliminar físicamente los datos y el esquema de una tabla gestionada (Managed Table) en Databricks?

• Ejecutar DELETE FROM table

• Usar el comando %fs rm

• Eliminar la tabla con DROP TABLE

• Nada, los datos no se pueden eliminar