Un DataFrame de Spark es la descripción de un cálculo con forma de tabla. Leer spark.table('main.bronze.orders') no copia todos sus registros en una lista de Python. Las transformaciones como select y filter construyen un plan. Las acciones, como show, count y collect, piden a Spark que ejecute ese plan.
Usa display(df) para la cuadrícula de resultados del espacio de trabajo. df.show() imprime una tabla de texto, lo que viene bien para depurar. Llamar a show sobre una columna da error, porque una columna describe una expresión y no puede mostrar una tabla. Empieza seleccionando unas pocas columnas con nombre en lugar de recoger toda la fuente. En este navegador, la API conocida genera SQL para un motor local. Aquí practicas las operaciones y sus resultados; la ejecución distribuida y la capacidad de producción corresponden a un entorno Spark real.
Selecciona amount como segunda columna, no status.