Workload HPC Dataflow yang sangat paralel

Saat Anda bekerja dengan komputasi petak bervolume tinggi, gunakan Dataflow untuk menjalankan beban kerja HPC yang sangat paralel dalam sistem yang terkelola sepenuhnya. Dengan Dataflow, Anda dapat menjalankan beban kerja yang sangat paralel dalam satu pipeline, sehingga meningkatkan efisiensi dan membuat alur kerja Anda lebih mudah dikelola. Data tersebut tetap berada dalam satu sistem, baik untuk pra-pemrosesan maupun pasca-pemrosesan dan untuk pemrosesan tugas. Dataflow secara otomatis mengelola performa, skalabilitas, ketersediaan, dan kebutuhan keamanan.
Ikuti tutorial ini untuk melihat contoh menyeluruh dari pipeline HPC yang sangat paralel yang menggunakan container kustom dengan library C++.
Pelajari praktik terbaik yang perlu dipertimbangkan saat mendesain pipeline HPC yang sangat paralel.

Referensi

Penggunaan GPU pada tugas Dataflow dapat mempercepat pemrosesan gambar dan tugas pemrosesan machine learning.
HSBC menggunakan alur kerja Dataflow HPC yang sangat paralel untuk meningkatkan kapasitas dan kecepatan penghitungan sekaligus mengurangi biaya.
Contoh pipeline HPC Dataflow yang sangat paralel dan kode sumber yang sesuai tersedia di GitHub.