Apache Spark Questions et reponses d'entretien
Question : What is the Broadcast variable in Spark and when is it used?Reponse : A Broadcast variable is a read-only variable cached on each worker node. It is used to efficiently distribute large read-only data structures, such as lookup tables, to all tasks in a Spark job.Example:
|
Enregistrer pour revision
Ajoutez cet element aux favoris, marquez-le comme difficile ou placez-le dans un ensemble de revision.
Connectez-vous pour enregistrer des favoris, des questions difficiles et des ensembles de revision.
Est-ce utile ? Oui Non
Les plus utiles selon les utilisateurs :
- What is the purpose of the Spark SQL module?
- Explain the difference between narrow and wide transformations in Spark.