Mahsulot tavsifi
Apache Spark arxitekturasi uch asosiy komponentdan iborat: Driver, Executor va Cluster Manager. Driver ilova logikasi va boshqaruv vazifalarini bajaradi, DAG yaratadi, ishlovchilarni va vazifalarni rejalashtiradi. Executorlar hisoblash vazifalarini bajaradi, xotira va CPU resurslarini ishlatadi, natijalarni qaytaradi. Cluster Manager resurslarni taqsimlaydi va Executorlarni ishga tushiradi; keng tarqalgan Cluster Managerlar: YARN, Mesos, Kubernetes. Spark ilovasi job, stage va task darajalarida bajariladi; Driver va Executorlar orasida RPC orqali aloqa amalga oshadi
#dataset api#dataframe#rdd#apache spark
Muallif
Joker 🃏Tasdiqlangan muallif
- Hujjatlari
- 9 690
- Sotilgan
- 310
