職缺描述
1. 建置與管理大數據平台 : 負責 Hadoop、Apache NiFi、Apache Spark、Dremio、Apache Iceberg、JupyterHub 等開源系統的部署、升級、日常維運與故障排除。 2. 容器化技術與叢集編排管理 : 使用 Docker 進行服務容器化,執行叢集部署、監控、擴展與調整,確保平台穩定與高可用性。 3. 系統監控與效能調校 : 建置系統監控(如 Prometheus、Grafana)、記錄分析(如 elasticsearch),針對叢集效能瓶頸進行診斷與優化,提升整體作業效率。 4. 跨部門協作與技術支援 : 與Big Data開發團隊合作,提供平台技術支援,協助設計符合需求的數據處理流程與運算資源規劃。 5. 技術研究與平台優化 : 持續關注雲端、大數據、開源工具領域的新技術,評估導入可能,主動提出系統升級或優化建議,推動平台持續進化。 ※依學經歷、工作年資敘薪
收合內容