Todos los clústeres de Cloud Dataproc vienen con el conector de BigQuery para Hadoop integrado. Esto significa que puedes leer y escribir datos de BigQuery con facilidad y rapidez desde y hacia Cloud Dataproc.
Usa Spark
Consulta la documentación sobre cómo usar el conector de BigQuery con Spark a fin de obtener un ejemplo sobre el uso de Spark con el conector de BigQuery para Hadoop. Este ejemplo debería funcionar para los clústeres de Cloud Dataproc.
Usa Java MapReduce
Consulta la documentación sobre cómo escribir un trabajo de MapReduce con el conector de BigQuery si deseas obtener un ejemplo sobre el uso de Java MapReduce con el conector de BigQuery para Hadoop. Este ejemplo debería funcionar para los clústeres de Cloud Dataproc.
Información adicional
Consulta la documentación sobre el conector de BigQuery Hadoop para obtener más información.