Đăng nhập
 
Tìm kiếm nâng cao
 
Tên bài báo
Tác giả
Năm xuất bản
Tóm tắt
Lĩnh vực
Phân loại
Số tạp chí
 

Bản tin định kỳ
Báo cáo thường niên
Tạp chí khoa học ĐHCT
Tạp chí tiếng anh ĐHCT
Tạp chí trong nước
Tạp chí quốc tế
Kỷ yếu HN trong nước
Kỷ yếu HN quốc tế
Book chapter
Bài báo - Tạp chí
14856 (2024) Trang: 489-493
Tạp chí: International Conference on Database Systems for Advanced Applications, Gifu,Japan, July 2-5 2024

This paper proposes a monitoring system called GUESS to compare the performance and energy consumption of join query processing on Spark in serverless and serverful environments. The system collects metrics on resource utilization, query execution times, and power usage through Prometheus, Grafana, Spark History Server, and OpenManage Enterprise Power Manager. These metrics are visualized through an intuitive web dashboard to easily compare the serverless and serverful Spark workloads. Experimental results using the TPC-H benchmark show that the serverless environment consumes less energy than the serverful environment due to on-demand resource allocation. However, the serverful environment exhibits better query performance, especially for workloads with known resource requirements. GUESS provides insights into optimizing resource efficiency and query performance when deploying Spark analytic workloads.

 


Vietnamese | English






 
 
Vui lòng chờ...