GSP514

Ringkasan

Dalam challenge lab, Anda diberi sebuah skenario dan serangkaian tugas. Tidak ada petunjuk langkah demi langkah. Anda akan menggunakan keahlian yang dipelajari dari lab dalam kursus untuk mencari cara menyelesaikan sendiri tugas-tugas tersebut. Sistem pemberian skor otomatis (ditampilkan pada halaman ini) akan memberikan masukan tentang apakah Anda telah menyelesaikan tugas dengan benar atau tidak.

Saat mengikuti challenge lab, Anda tidak akan diajari konsep-konsep baru Google Cloud. Anda diharapkan dapat memperluas keahlian yang dipelajari, seperti mengubah nilai default dan membaca serta mengkaji pesan error untuk memperbaiki kesalahan Anda sendiri.

Untuk meraih skor 100%, Anda harus berhasil menyelesaikan semua tugas dalam jangka waktu tertentu.

Lab ini direkomendasikan bagi siswa yang sudah memperoleh badge keahlian Membangun Mesh Data dengan Dataplex. Apakah Anda siap menghadapi tantangan ini?

Penyiapan dan persyaratan

Sebelum mengklik tombol Start Lab

Baca petunjuk ini. Lab memiliki timer dan Anda tidak dapat menjedanya. Timer yang dimulai saat Anda mengklik Start Lab akan menampilkan durasi ketersediaan resource Google Cloud untuk Anda.

Lab interaktif ini dapat Anda gunakan untuk melakukan aktivitas lab di lingkungan cloud sungguhan, bukan di lingkungan demo atau simulasi. Untuk mengakses lab ini, Anda akan diberi kredensial baru yang bersifat sementara dan dapat digunakan untuk login serta mengakses Google Cloud selama durasi lab.

Untuk menyelesaikan lab ini, Anda memerlukan:

• Akses ke browser internet standar (disarankan browser Chrome).

Catatan: Gunakan jendela Samaran (direkomendasikan) atau browser pribadi untuk menjalankan lab ini. Hal ini akan mencegah konflik antara akun pribadi Anda dan akun siswa yang dapat menyebabkan tagihan ekstra pada akun pribadi Anda.

• Waktu untuk menyelesaikan lab. Ingat, setelah dimulai, lab tidak dapat dijeda.

Catatan: Hanya gunakan akun siswa untuk lab ini. Jika Anda menggunakan akun Google Cloud yang berbeda, Anda mungkin akan dikenai tagihan ke akun tersebut.

Skenario tantangan

Anda baru saja memulai peran sebagai data engineer junior. Sejauh ini Anda telah membantu tim membuat dan mengelola aset Dataplex.

Anda diharapkan memiliki keterampilan dan pengetahuan untuk tugas seperti ini.

Tantangan Anda

Anda diminta membantu tim pengembangan yang baru dibentuk untuk membangun mesh data baru menggunakan Dataplex. Secara khusus, Anda perlu membuat Dataplex lake dengan beberapa zona dan aset. Anda juga perlu membuat jenis aspek dan menambahkan aspek ke aset di data lake baru, serta menilai kualitas data. Anda akan menerima permintaan untuk menyelesaikan tugas-tugas berikut:

• Membuat Dataplex lake dengan dua zona dan dua aset.
• Membuat jenis aspek untuk data yang dilindungi dan menambahkan aspek ke zona.
• Menetapkan peran IAM Dataplex ke pengguna lain.
• Membuat dan mengupload file spesifikasi kualitas data ke Cloud Storage.
• Menetapkan dan menjalankan tugas kualitas data di Dataplex.

Beberapa standar yang harus Anda ikuti:

• Pastikan API yang dibutuhkan (seperti Dataplex, Data Catalog, dan Dataproc) berhasil diaktifkan.
• Buat semua resource di region , kecuali ada petunjuk lain.

Setiap tugas dijelaskan secara mendetail di bawah ini. Semoga berhasil!

Tugas 1. Membuat Dataplex lake dengan dua zona dan dua aset

Catatan: Untuk semua tugas di challenge lab ini, buat resource di region , kecuali jika ada arahan lain.

Bucket Cloud Storage dan set data BigQuery untuk langkah 2 telah dibuat sebelumnya dalam lab ini.

1. Buat Dataplex lake bernama Sales Lake dengan dua zona regional:

• Zona mentah bernama Raw Customer Zone
• Zona kurasi bernama Curated Customer Zone

2. Lampirkan satu aset yang telah dibuat sebelumnya ke tiap zona:

• Untuk zona mentah, lampirkan bucket Cloud Storage bernama -customer-online-sessions sebagai aset baru bernama Customer Engagements.
• Untuk zona kurasi, lampirkan set data BigQuery bernama .customer_orders sebagai aset baru bernama Customer Orders.

Petunjuk berguna untuk membuat Dataplex lake.

Klik Periksa progres saya untuk memverifikasi tujuan. Membuat Dataplex lake dengan dua zona dan dua aset

Tugas 2. Membuat jenis aspek dan menambahkan aspek ke zona

1. Buat jenis aspek bernama Protected Customer Data Aspect dengan dua kolom yang dienumerasi:

• Kolom pertama bernama Raw Data Flag dengan dua nilai: Yes dan No.
• Kolom kedua bernama Protected Contact Information Flag dengan dua nilai: Yes dan No.

2. Tambahkan aspek ini ke Raw Customer Zone menggunakan nilai Yes untuk kedua flag.

Petunjuk berguna untuk membuat dan menerapkan jenis aspek.

Klik Periksa progres saya untuk memverifikasi tujuan. Membuat jenis aspek dan menambahkan aspek ke zona

Tugas 3. Menetapkan peran IAM Dataplex ke pengguna lain

• Dengan menggunakan prinsip hak istimewa terendah, tetapkan peran IAM Dataplex yang sesuai untuk Pengguna 2 () yang memungkinkannya untuk mengupload file Cloud Storage baru ke aset Dataplex bernama Customer Engagements.

Petunjuk berguna untuk menetapkan peran IAM Dataplex.

Klik Periksa progres saya untuk memverifikasi tujuan. Menetapkan peran IAM Dataplex ke pengguna lain

Tugas 4. Membuat dan mengupload file spesifikasi kualitas data ke Cloud Storage

Bucket Cloud Storage untuk langkah 2 telah dibuat sebelumnya dalam lab ini.

1. Buat file spesifikasi kualitas data bernama dq-customer-orders.yaml dengan spesifikasi berikut:

• Aturan NOT NULL diterapkan (dengan batas 100%) ke kolom user_id pada tabel customer_orders.ordered_items
• Aturan NOT NULL diterapkan (dengan batas 100%) ke kolom order_id pada tabel customer_orders.ordered_items
• BigQuery destination table for the results: .orders_dq_dataset.results

2. Upload file ke bucket Cloud Storage bernama -dq-config.

Petunjuk berguna untuk membuat file spesifikasi kualitas data.

Klik Periksa progres saya untuk memverifikasi tujuan. Membuat dan mengupload file spesifikasi kualitas data

Tugas 5. Menetapkan dan menjalankan tugas kualitas data otomatis di Dataplex

Set data BigQuery untuk langkah 1 telah dibuat sebelumnya dalam lab ini.

1. Tentukan tugas kualitas data otomatis menggunakan file dq-customer-orders.yaml dengan spesifikasi berikut:

Properti	Nilai
Data Quality Job Name	customer-orders-data-quality-job
Data Sumber	.customer_orders.ordered_items
User service account	Compute Engine default service account

2. Segera jalankan tugas kualitas data otomatis.

Perlu waktu beberapa menit sebelum tugas dapat dijalankan. Anda mungkin perlu memuat ulang halaman untuk melihat tugas yang telah berhasil dijalankan.

Petunjuk berguna untuk menetapkan dan menjalankan tugas kualitas data.

Klik Periksa progres saya untuk memverifikasi tujuan. Menetapkan dan menjalankan tugas kualitas data di Dataplex

Selamat!

Anda berhasil membangun Mesh Data dengan membuat Dataplex lake menggunakan beberapa zona dan aset, membuat jenis aspek dan menambahkan aspek ke aset, serta menilai kualitas data.

Mendapatkan badge keahlian Anda berikutnya

Lab mandiri ini merupakan bagian dari badge keahlian Membangun Mesh Data dengan Dataplex. Dengan menyelesaikan kursus badge keahlian ini, Anda akan mendapatkan badge di atas sebagai pengakuan atas pencapaian Anda. Tampilkan badge di resume atau platform media sosial Anda, dan umumkan pencapaian Anda menggunakan hashtag #GoogleCloudBadge.

Kursus badge keahlian ini merupakan bagian dari jalur pembelajaran Data Engineer Google Cloud. Jika Anda telah menyelesaikan kursus badge keahlian lainnya di jalur pembelajaran ini, telusuri katalog untuk menemukan quest badge keahlian lain yang dapat Anda ikuti.

Sertifikasi dan pelatihan Google Cloud

...membantu Anda mengoptimalkan teknologi Google Cloud. Kelas kami mencakup keterampilan teknis dan praktik terbaik untuk membantu Anda memahami dengan cepat dan melanjutkan proses pembelajaran. Kami menawarkan pelatihan tingkat dasar hingga lanjutan dengan opsi on demand, live, dan virtual untuk menyesuaikan dengan jadwal Anda yang sibuk. Sertifikasi membantu Anda memvalidasi dan membuktikan keterampilan serta keahlian Anda dalam teknologi Google Cloud.

Manual Terakhir Diperbarui pada 4 September 2024

Lab Terakhir Diuji pada 4 September 2024

Hak cipta 2025 Google LLC. Semua hak dilindungi undang-undang. Google dan logo Google adalah merek dagang dari Google LLC. Semua nama perusahaan dan produk lain mungkin adalah merek dagang masing-masing perusahaan yang bersangkutan.