Dataproc è un servizio gestito di Apache Spark e Apache Hadoop che ti consente di sfruttare strumenti di dati open source per l'elaborazione batch, l'esecuzione di query, lo streaming e il machine learning. L'automazione di Dataproc consente di creare i cluster rapidamente, gestirli con facilità e risparmiare disattivando i cluster quando non ti servono. Risparmiando tempo e denaro sull'amministrazione, puoi concentrarti sui tuoi progetti e sui tuoi dati. Scopri di più

Guide

Riferimento

Risorse

Formazione e tutorial

Prova i tutorial, i corsi e l'addestramento autogestito di Dataproc in Google Cloud Skills Boost.

Tutorial

Esecuzione di un job Spark su Google Kubernetes Engine

Inviare job Spark a un cluster Google Kubernetes Engine in esecuzione dall'API Dataproc Jobs.

Ulteriori informazioni  
Formazione

Introduzione a Cloud Dataproc: Hadoop e Spark su Google Cloud

Questo corso prevede una combinazione di lezioni, demo e lab pratici per creare un cluster Dataproc, inviare un job Spark e quindi arrestare il cluster.

Ulteriori informazioni  
Formazione

Machine learning con Spark su Dataproc

Questo corso presenta una combinazione di lezioni, demo e lab pratici per implementare la regressione logistica utilizzando una libreria di machine learning per Apache Spark in esecuzione su un cluster Dataproc per sviluppare un modello per i dati da un set di dati multivariabile.

Ulteriori informazioni  

Casi d'uso

Esplora i casi d'uso, le architetture di riferimento, i white paper, le best practice e le soluzioni di settore.

Soluzioni

Soluzioni di pianificazione del flusso di lavoro

Pianifica flussi di lavoro su Google Cloud.

Ulteriori informazioni  
Caso d'uso

Migrazione dei dati HDFS da on-premise a Google Cloud

Come spostare dati dall'HDFS (Hadoop Distributed File System) on-premise a Google Cloud.

Ulteriori informazioni  
Best practice

Gestire le dipendenze Java e Scala per Apache Spark

Approcci consigliati per includere le dipendenze quando invii un job Spark a un cluster Dataproc.

Ulteriori informazioni  
Best practice

Utilizzo di Apache Hive su Dataproc

Usa Apache Hive su Dataproc in modo efficiente e flessibile archiviando i dati Hive in Cloud Storage e ospitando il metastore Hive in un database MySQL su Cloud SQL.

Ulteriori informazioni  

Esempi di codice

Esplora la programmazione con esempi che mostrano come utilizzare e connettere i servizi Google Cloud.

GitHub

Esempi di API Python

Chiama le API Dataproc da Python.

Apri GitHub

GitHub

Esempi di API Java

Chiama le API Dataproc da Java.

Apri GitHub

GitHub

Esempi di API Node.js

Chiama le API Dataproc da Node.js.

Apri GitHub

GitHub

Esempi di API Go

Chiama le API Dataproc da Go.

Apri GitHub

Video