Dataproc Serverless-Staging-Buckets

Dataproc Serverless erstellt einen Cloud Storage-Staging-Bucket in Ihrem Projekt oder einen vorhandenen Staging-Bucket aus einem vorherigen Batch verwendet Erstellungsanfragen. Dies ist der Standard-Bucket, der von Dataproc in Compute Engine-Clustern (siehe Dataproc-Staging und temporäre Buckets.

  • In Dataproc Serverless werden Arbeitslastabhängigkeiten, Konfigurationsdateien und Job-Treiber-Konsolenausgaben im Staging-Bucket gespeichert.

  • Dataproc Serverless legt regionale Staging-Buckets in Cloud Storage-Speicherorten entsprechend der Compute Engine-Zone fest, in der Ihre Arbeitslast bereitgestellt wird. Anschließend werden diese Buckets auf Projektebene pro Speicherort erstellt und verwaltet. Von Dataproc serverlose Staging-Buckets werden gemeinsam genutzt die in derselben Region liegen, und werden mit einer Cloud Storage Aufbewahrung vorläufiger Löschung Dauer auf 0 Sekunden festgelegt.