Anda dapat menjelajahi hasil kueri BigQuery menggunakan notebook Colab Enterprise di BigQuery.
Dalam tutorial ini, Anda akan membuat kueri data dari set data publik BigQuery dan menjelajahi hasil kueri di notebook.
Tujuan
- Membuat dan menjalankan kueri di BigQuery.
- Menjelajahi hasil kueri di notebook.
Biaya
Tutorial ini menggunakan set data yang tersedia melalui Google Cloud Program Set Data Publik. Google membayar penyimpanan set data ini dan memberikan akses publik ke data tersebut. Anda dikenai biaya untuk kueri yang Anda lakukan pada data. Untuk informasi selengkapnya, lihat harga BigQuery.
Sebelum memulai
-
In the Google Cloud console, on the project selector page, select or create a Google Cloud project.
-
Make sure that billing is enabled for your Google Cloud project.
-
Enable the BigQuery API.
Untuk project baru, BigQuery diaktifkan secara otomatis.
Mengaktifkan BigQuery Studio
Ikuti petunjuk di artikel Mengaktifkan BigQuery Studio untuk pengelolaan aset untuk menyimpan, membagikan, dan mengelola versi aset kode seperti notebook.
Izin yang diperlukan
Untuk membuat dan menjalankan notebook, Anda memerlukan peran Identity and Access Management (IAM) berikut:
- Pengguna BigQuery (
roles/bigquery.user
) - Pengguna Runtime Notebook (
roles/aiplatform.notebookRuntimeUser
) - Pembuat Kode (
roles/dataform.codeCreator
)
Membuka hasil kueri di notebook
Anda dapat menjalankan kueri SQL, lalu menggunakan notebook untuk menjelajahi data. Pendekatan ini berguna jika Anda ingin mengubah data di BigQuery sebelum menanganinya, atau jika Anda hanya memerlukan subset kolom dalam tabel.
Di Konsol Google Cloud, buka halaman BigQuery.
Di kolom Ketik untuk menelusuri, masukkan
bigquery-public-data
.Jika project tidak ditampilkan, masukkan
bigquery
di kolom penelusuran, lalu klik Telusuri ke semua project untuk mencocokkan string penelusuran dengan project yang ada.Pilih bigquery-public-data > ml_datasets > penguins.
Untuk tabel penguins, klik
View actions, lalu klik Query.Tambahkan tanda bintang (
*
) untuk pemilihan kolom ke kueri yang dihasilkan, sehingga kueri tersebut terbaca seperti contoh berikut:SELECT * FROM `bigquery-public-data.ml_datasets.penguins` LIMIT 1000;
Klik
Run.Di bagian Hasil kueri, klik Jelajahi data, lalu klik Jelajahi dengan Python notebook.
Menyiapkan notebook untuk digunakan
Siapkan notebook untuk digunakan dengan menghubungkan ke runtime dan menetapkan nilai default aplikasi.
- Di header notebook, klik Connect untuk terhubung ke runtime default.
- Di blok kode Setup, klik Run cell.
Menjelajahi data
- Untuk memuat data penguins ke dalam BigQuery DataFrame dan menampilkan hasilnya, klik Run cell di blok kode di bagian Result set loaded from BigQuery job as a DataFrame.
- Untuk mendapatkan metrik deskriptif untuk data, klik Jalankan sel di blok kode di bagian Tampilkan statistik deskriptif menggunakan describe().
- Opsional: Gunakan fungsi atau paket Python lainnya untuk menjelajahi dan menganalisis data.
Contoh kode berikut menunjukkan penggunaan
bigframes.pandas
untuk menganalisis data, dan bigframes.ml
untuk membuat model regresi linear dari data penguins di
DataFrame BigQuery:
Pembersihan
Agar tidak dikenakan biaya pada akun Google Cloud Anda untuk resource yang digunakan dalam tutorial ini, hapus project yang berisi resource tersebut, atau simpan project dan hapus setiap resource-nya.
Cara termudah untuk menghilangkan penagihan adalah dengan menghapus project Google Cloud yang Anda buat untuk tutorial ini.
- In the Google Cloud console, go to the Manage resources page.
- In the project list, select the project that you want to delete, and then click Delete.
- In the dialog, type the project ID, and then click Shut down to delete the project.
Langkah berikutnya
- Pelajari lebih lanjut cara membuat notebook di BigQuery.
- Pelajari lebih lanjut cara menjelajahi data dengan DataFrame BigQuery.