spark1 [Spark With Livy] Livy, Spark (개념, 특징, 장단점, 면접 대비) LivyApache Livy는 Apache Spark 클러스터에서 대화형 Spark 작업을 제출하기 위한 서비스입니다. Livy는 REST 인터페이스를 통해 Spark 작업을 제출하고 관리할 수 있도록 하는 오픈 소스 REST 서비스로, Spark 클러스터와의 통신을 단순화하여 사용자가 Spark 작업을 더 쉽게 제출하고 관리할 수 있도록 돕습니다. 개념REST API: Livy는 REST API를 통해 사용자가 HTTP 프로토콜을 사용하여 Spark 작업을 제출하고 관리할 수 있게 합니다. 이는 다양한 프로그래밍 언어와 플랫폼에서 쉽게 접근할 수 있게 해 줍니다.세션 관리: Livy는 Spark 세션을 생성하고 관리할 수 있습니다. 사용자는 이 세션을 통해 반복적인 작업을 수행할 때 Spark 컨텍.. 2024. 4. 1. 이전 1 다음
