Optimizing Spark in the Cloud - with Jean-Yves Stephan

Building the Backend: Data Solutions that Power Leading Organizations

Nội dung được cung cấp bởi Travis Lawrence. Tất cả nội dung podcast bao gồm các tập, đồ họa và mô tả podcast đều được Travis Lawrence hoặc đối tác nền tảng podcast của họ tải lên và cung cấp trực tiếp. Nếu bạn cho rằng ai đó đang sử dụng tác phẩm có bản quyền của bạn mà không có sự cho phép của bạn, bạn có thể làm theo quy trình được nêu ở đây https://vi.player.fm/legal.

2+ y ago 32:26

MP3•Trang chủ episode

This episode features Jean-Yves Stephan Co-Founder & CEO @ Data Mechanics (recently Acq. by Spot by NetApp), during our discussion we talk about optimizing Spark to run in the cloud at a low cost.

Top 3 Value Bombs:

Running Spark CAN be expensive but there are ways to reduce your current operating costs by 50-75% by smart automations (i.e. tune for node type, memory and CPU).
Spot instances can lower your costs by utilizing unused instances.
Creating serverless architectures and using containers will allow for more flexibility with deployment models and scalability.

43 tập

#Tech #Podcasting Education #Travis Lawrence