資料工程師

工作内容

摘要

資料工程師是負責開發、建構、測試以及維護系統結構(例如數據庫和大規模處理系統)的工程人員。確保系統結構符合商業需求,並將數據轉換為易於分析的格式。

Maxonrow 正在擴大專業分析團隊,數據工程師將負責擴展、優化數據和數據管道架構,以及為跨職能團隊優化數據流程圖和數據採集。

職責
  • 數據管道架構的創建及維護
  • 蒐集可滿足功能/非功能商業需求的大型複雜數據集。
  • 發現、設計和進行內部流程的改進:自動化人工流程,優化數據傳輸,重新設計基礎架構以增強擴展性等。
  • 使用SQL和大數據技術,建構可從各種數據源中提取準確值、轉換與加載數據所需的基礎架構。
  • 創建可利用數據管道提升客戶量、營運效率和其他績效指標的分析工具。
  • 與各部門合作,包括執行、產品、資訊和設計部門,協助解決數據相關的技術問題並支援數據架構的需求。
  • 參與開源社區的項目和活動。通過多個數據中心和區域,確保數據跨國界的分離與安全。
  • 替數據分析和數據科學團隊創建工具,協助他們打造及優化創新技術產品。
  • 與數據專家和分析專家合作,增強數據系統功能。
相關經驗

具有類似經歷證明,並能夠向技術受眾溝通有效的區塊鏈解決方案。

條件要求
  • 電腦科學、軟體工程或相關領域的學士學位
  • 6 年以上相關工作經驗
  • 熟悉常見演算法和資料結構
  • 熟悉密碼學(對稱/非對稱、雜湊、簽名機制)
  • 熟悉進階 SQL 程式語言及關聯式資料庫的使用,以及熟悉各種資料庫的操作。
  • 具有創建與優化大數據管道、架構和資料集的經驗。
  • 能針對內外部資料及流程進行分析,隨時應變商業問題並找出解決方法。
  • 具有非結構化資料集相關的分析技能。
  • 建立支持資料轉換、資料結構、後設資料、依附性及工作量管理的流程。
  • 能夠操作及處理離線型大數據集並提取準確數據值。
  • 具有訊息佇列、串流處理與擴展大數據儲存的操作知識。
  • 具有跨團隊合作經驗。
  • 具有大數據工具的經驗:Hadoop、Spark、Kafka 等。
  • 具有數據管道和工作流程圖管理工具的經驗:Azkaban、Luigi、Airflow 等。
  • 具有阿里雲端服務經驗
  • 具有使用開源系統的經驗:Storm、Spark-Streaming 等。
  • 具有程式設計的經驗:Python、Java、C++、Scala 等。
  • 具有統合交易系統相關經驗(電子商務,支付,銀行等)
  • 英語讀寫能力。
  • 瞭解最新科技趨勢。
  • 具有處理開源項目和社區活動的經驗
加分條件
  • 熟悉類似比特幣和以太坊的區塊鏈、Tendermint、Polkadot
  • 熟悉主流的操作引擎(WASM,EVM,JavaScript引擎)
  • 中文讀寫能力。
管理方面與個人特質
  • 良好的溝通能力。
  • 良好的分析推理、解決問題與創新思維能力。
  • 具有好奇心,思維開放、態度正面積極。
  • 清晰的書面和口頭表達能力。
  • 能適應發展及變化快速的工作環境。
  • 態度謙虛、嚴謹。
  • 積極主動,能主動執行任務。
  • 具有良好的組織能力並注重細節。
待遇

薪資待遇優渥,附加額外津貼,並遷至馬來西亞吉隆坡的技術團隊辦公室。與遍布全球的國際團隊一同打造歡樂、相互支援的工作環境。

在快速發展、組織扁平化的新創公司為區塊鏈產業做出珍貴貢獻。

提供發展專業、與業界精英學習的絕佳機會。