Lab ini memandu Anda melalui proses untuk membuat dan menjalankan alur kerja SQL di Dataform untuk memuat data di BigQuery.
Tujuan pembelajaran
Membuat repositori Dataform.
Membuat dan melakukan inisialisasi ruang kerja pengembangan Dataform.
Membuat dan menjalankan alur kerja SQL.
Melihat log eksekusi di Dataform.
Penyiapan
Untuk setiap lab, Anda akan memperoleh project Google Cloud baru serta serangkaian resource selama jangka waktu tertentu, tanpa biaya.
Login ke Qwiklabs menggunakan jendela samaran.
Perhatikan waktu akses lab (misalnya, 1:15:00), dan pastikan Anda dapat menyelesaikannya dalam waktu tersebut.
Tidak ada fitur jeda. Bila perlu, Anda dapat memulai ulang lab, tetapi Anda harus memulai dari awal.
Jika sudah siap, klik Start lab.
Catat kredensial lab (Nama pengguna dan Sandi) Anda. Anda akan menggunakannya untuk login ke Google Cloud Console.
Klik Open Google Console.
Klik Use another account, lalu salin/tempel kredensial lab ini ke perintah yang muncul.
Jika menggunakan kredensial lain, Anda akan menerima pesan error atau dikenai biaya.
Setujui ketentuan dan lewati halaman resource pemulihan.
Tugas 1. Membuat repositori Dataform
Di Konsol, luaskan Navigation menu, lalu pilih BigQuery > Dataform.
Klik CREATE REPOSITORY.
Di halaman Create repository, lakukan hal berikut:
Di kolom Repository ID, masukkan quickstart-repository.
Di daftar Region, pilih .
Klik CREATE.
Setelah repositori dibuat, Anda akan melihat akun layanan Dataform. Harap salin akun tersebut, sehingga Anda dapat menggunakannya nanti untuk menetapkan izin yang diperlukan.
Klik Go to Repositories.
Catatan: Jika Anda mendapatkan error izin ditolak terkait dengan permintaan API, tunggu beberapa menit dan buat repositori lagi.
Menguji tugas yang sudah selesai
Klik Check my progress untuk memverifikasi tujuan.
Membuat repositori Dataform.
Tugas 2. Membuat dan melakukan inisialisasi ruang kerja pengembangan Dataform
Di halaman Dataform, klik repositori quickstart-repository yang baru saja Anda buat.
Klik CREATE DEVELOPMENT WORKSPACE.
Di jendela Create development workspace, lakukan hal berikut:
Di kolom Workspace ID, masukkan quickstart-workspace.
Klik CREATE.
Setelah dibuat, klik ruang kerja pengembangan quickstart-workspace.
Klik INITIALIZE WORKSPACE.
Menguji tugas yang sudah selesai
Klik Check my progress untuk memverifikasi tujuan.
Membuat ruang kerja Dataform.
Tugas 3. Membuat file SQLX untuk menentukan tabel virtual
Di bagian ini, tentukan tabel virtual yang nantinya akan Anda gunakan sebagai sumber data untuk suatu tabel.
Di panel Files, di samping definitions, klik menu More.
Klik Create file.
Di panel Create new file, lakukan hal berikut:
Di kolom Add a file path, masukkan
definitions/quickstart-source.sqlx.
Klik CREATE FILE.
Menentukan tabel virtual
Di panel Files, luaskan folder definitions.
Klik quickstart-source.sqlx.
Di file tersebut, masukkan cuplikan kode berikut:
config {
type: "view"
}
SELECT
"apples" AS fruit,
2 AS count
UNION ALL
SELECT
"oranges" AS fruit,
5 AS count
UNION ALL
SELECT
"pears" AS fruit,
1 AS count
UNION ALL
SELECT
"bananas" AS fruit,
0 AS count
Tugas 4. Membuat file SQLX untuk definisi tabel
Pada bagian berikut, tentukan jenis tabel dalam file SQLX, lalu
tulis pernyataan SELECT untuk menentukan struktur tabel dalam file yang sama.
Di panel Files, di samping definitions, klik menu More, lalu pilih Create file.
Di kolom Add a file path, masukkan definitions/quickstart-table.sqlx.
Klik CREATE FILE.
Tentukan jenis tabel, struktur, dan dependensinya
Di panel Files, luaskan direktori definitions.
Pilih quickstart-table.sqlx, lalu masukkan jenis tabel berikut dan pernyataan SELECT:
config {
type: "table"
}
SELECT
fruit,
SUM(count) as count
FROM ${ref("quickstart-source")}
GROUP BY 1
Catatan: Anda mungkin melihat catatan error di bagian kueri yang dikompilasi. Abaikan pesan tersebut dan lanjutkan ke langkah berikutnya untuk menjalankan alur kerja.
Tugas 5. Memberikan akses Dataform ke BigQuery
Di Konsol Google Cloud, pada Navigation menu (), pilih IAM & Admin > IAM.
Klik VIEW BY PRINCIPALS. Berikutnya, klik GRANT ACCESS
Di kolom New principals, masukkan ID akun layanan Dataform Anda.
Di menu drop-down Select a role, pilih peran BigQuery Job User.
Klik Add another role, lalu di menu drop-down Select a role,
pilih peran BigQuery Data Editor.
Klik Add another role, lalu di menu drop-down Select a role,
pilih peran BigQuery Data Viewer.
Klik Save.
Menguji tugas yang sudah selesai
Klik Check my progress untuk memverifikasi tujuan.
Memberikan akses Dataform ke BigQuery.
Tugas 6. Menjalankan alur kerja
Di Konsol, buka Navigation Menu > BigQuery > Dataform.
Klik quickstart-repository untuk membuka repositori.
Klik quickstart-workspace untuk membuka ruang kerja pengembangan.
Di halaman quickstart-workspace, klik START EXECUTION.
Klik Execute actions.
Klik tab All actions.
Di panel Execute, klik START EXECUTION.
Dataform menggunakan setelan repositori default untuk membuat konten alur kerja Anda dalam set data BigQuery yang disebut dataform.
Menguji tugas yang sudah selesai
Klik Check my progress untuk memverifikasi tujuan.
Membuat dan menjalankan alur kerja SQL.
Melihat log eksekusi
Di halaman quickstart-workspace, klik EXECUTIONS untuk membuka panel Executions.
Untuk melihat detail eksekusi Anda, klik eksekusi terbaru.
Mengakhiri lab Anda
Setelah Anda menyelesaikan lab, klik Akhiri Lab. Qwiklabs menghapus resource yang telah Anda gunakan dan menghapus akun.
Anda akan diberi kesempatan untuk menilai pengalaman menggunakan lab. Pilih jumlah bintang yang sesuai, ketik komentar, lalu klik Submit.
Makna jumlah bintang:
1 bintang = Sangat tidak puas
2 bintang = Tidak puas
3 bintang = Netral
4 bintang = Puas
5 bintang = Sangat puas
Anda dapat menutup kotak dialog jika tidak ingin memberikan masukan.
Untuk masukan, saran, atau koreksi, gunakan tab Dukungan.
Hak cipta 2020 Google LLC Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.
Lab membuat project dan resource Google Cloud untuk jangka waktu tertentu
Lab memiliki batas waktu dan tidak memiliki fitur jeda. Jika lab diakhiri, Anda harus memulainya lagi dari awal.
Di kiri atas layar, klik Start lab untuk memulai
Gunakan penjelajahan rahasia
Salin Nama Pengguna dan Sandi yang diberikan untuk lab tersebut
Klik Open console dalam mode pribadi
Login ke Konsol
Login menggunakan kredensial lab Anda. Menggunakan kredensial lain mungkin menyebabkan error atau dikenai biaya.
Setujui persyaratan, dan lewati halaman resource pemulihan
Jangan klik End lab kecuali jika Anda sudah menyelesaikan lab atau ingin mengulanginya, karena tindakan ini akan menghapus pekerjaan Anda dan menghapus project
Konten ini tidak tersedia untuk saat ini
Kami akan memberi tahu Anda melalui email saat konten tersedia
Bagus!
Kami akan menghubungi Anda melalui email saat konten tersedia
Satu lab dalam satu waktu
Konfirmasi untuk mengakhiri semua lab yang ada dan memulai lab ini
Gunakan penjelajahan rahasia untuk menjalankan lab
Gunakan jendela Samaran atau browser pribadi untuk menjalankan lab ini. Langkah ini akan mencegah konflik antara akun pribadi Anda dan akun Siswa yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.
Lab ini memandu Anda melalui proses untuk membuat dan menjalankan alur kerja SQL di Dataform untuk memuat data di BigQuery.