资料工程师

工作内容

摘要

资料工程师是开发、构建、测试以及维护体系结构(例如数据库和大规模处理系统)的人员。确保体系结构支持商业需求,并将数据转换为易于分析的格式。

Maxonrow 正在扩大分析专家团队,数据工程师将负责扩展、优化数据和数据管道架构,以及为跨职能团队优化数据流和数据采集。

职责
  • 创建和维护最佳的数据管道架构
  • 采集可满足功能/非功能商业需求的大型复杂数据集
  • 发现、设计和实施内部流程改进:人工流程自动化,优化数据传输,重新设计基础架构以增强扩展性等
  • 使用 SQL 和“大数据”技术,建构从各种数据源中优化提取、转换和加载数据所需的基础架构
  • 建构利用数据管道的分析工具,以提供客户获取、运营效率和其他绩效指标的改善方案
  • 与利益相关者合作,包括执行、产品、资讯和设计团队部门,以协助解决数据相关的技术问题并支持数据架构需求
  • 参与开源社区项目和活动。通过多个数据中心和区域,使我们的数据保持分离并跨越国界
  • 为分析和数据科学家团队成员创建数据工具,帮助他们将产品打造、优化为创新产业领导者
  • 与数据和分析专家合作,增强数据系统功能
相关经验

具有类似经历证明,能够以以区块链为解决方案与技术受众有效沟通。

条件要求
  • 电脑科学、软体工程或相关领域的学士学位
  • 5 年以上相关工作经验
  • 熟悉常见演算法和数据结构
  • 熟悉密码学(对称/非对称、哈希、签名)
  • 具有使用关系数据库,查询创作(SQL)以及熟悉各种数据库的进阶SQL知识
  • 具有构建和优化“大数据”管道、架构和数据集的经验
  • 能对内部和外部数据及流程进行原因分析,以回答特定的商业问题,并找出解决方法
  • 具有非结构化数据集相关的分析技能
  • 建立支持数据转换、数据结构、元数据、依赖性和工作负载管理的流程
  • 能够操作、处理离线型的大数据集和提取价值
  • 具有消息队列、流处理和可扩展“大数据”存储知识
  • 具有支持跨职能团队合作经验
  • 具有大数据工具的经验:Hadoop、Spark、Kafka 等
  • 具有数据管道和工作流管理工具的经验:Azkaban、Luigi、Airflow等
  • 具有阿里云端服务经验
  • 具有流处理系统的经验:Storm、Spark-Streaming 等
  • 具有面向对象/对象函数脚本语言的经验:Python、Java、C ++、Scala 等
  • 交易系统经验(电子商务,支付,银行等)
  • 英语读写能力
  • 瞭解最新科技趋势
  • 具有处理开源项目和社区活动的经验
首选
  • 熟悉类似比特币和以太坊的区块链、Tendermint、Polkadot
  • 熟悉流行的状态引擎(WASM,EVM,JavaScript引擎)
  • 中文读写能力
管理方面与个人特质
  • 良好的沟通能力
  • 良好的分析推理、解决问题和创新思维能力
  • 具有好奇心,态度开放、积极
  • 清晰专业的书面和口头交流技巧
  • 能够适应快速、虚拟、不断变化的工作环境
  • 态度谦虚、严谨
  • 具有极强的自我驱动能力
  • 高度组织化和注重细节
待遇

薪资待遇优渥,加上额外津贴,并迁至马来西亚吉隆坡的技术团队办公室。与遍布全球的国际团队一同打造欢乐、互相支援的工作环境。

在快速发展、组织单纯低层次的新创公司为区块链产业做出宝贵贡献。

专业发展、向业内精英学习的绝佳机会。