大数据数仓开发

ABFinance 是一家总部位于美国的企业，致力于构建面向未来的数字金融。我们的愿景是打造一个全面的金融生态系统，将数字资产、传统金融和日常资金管理无缝融合为一体的体验，并让所有人都能从中受益。 我们由一支由创新者、交易员和合规专家组成的团队创立，使命是通过安全、受监管的产品将数字资产推向主流市场。我们的旗舰生态系统结合了一个合规且安全至上的加密货币交易所（为散户及机构客户提供服务），以及一张支持日常消费、实现法定货币与数字资产之间平滑转换的借记卡，并以现货交易和收益生成产品等核心能力作为有力支撑。 岗位职责 负责公司数据仓库体系建设与演进，参与离线/实时数仓模型设计、开发与落地，支撑业务分析、运营增长、风控合规、经营决策等场景。 负责ODS、DWD、DWS、ADS 等数据分层建设，推动统一数据口径、指标体系和维度体系沉淀。 负责数仓规范建设，包括建模规范、命名规范、开发规范、调度规范及文档沉淀。 负责主题域建模，结合业务场景抽象公共模型、宽表、标签和数据服务能力，提升数仓复用性与可扩展性。 基于Spark / Flink 等技术完成数据开发、任务调度、数据加工与指标产出，保障数据链路稳定、准确和高效。 负责数据质量治理，包括数据校验、监控告警、血缘追踪、异常排查和问题闭环，保障核心数据资产可用性。 深入理解业务需求，协同产品、研发、运营、风控、财务等团队完成数据需求分析、方案设计和交付落地。 任职要求 本科及以上学历，计算机、软件工程、数学、统计学等相关专业优先。 具备 5 年及以上大数据开发或数仓开发经验，有较完整的数据仓库建设经验。 熟悉数据仓库建模理论，理解维度建模、主题域划分、分层设计、宽表设计和指标体系建设方法。 熟练使用SQL，具备扎实的数据加工能力，熟悉Spark / Flink 中至少两种，能够独立完成复杂数据开发任务。 熟悉 Hadoop 生态相关组件，如 Hive、Spark、Flink、HDFS、Airflow等，理解其基本原理和应用场景。 熟悉离线数仓和实时数仓常见设计方案，理解批处理、流处理、Lambda / Kappa / 流批一体等架构思路。 具备较强的问题定位与性能优化能力，能够处理任务慢、数据延迟、数据倾斜、小文件、资源瓶颈等常见问题。 有良好的业务理解能力和跨团队沟通能力，能够将业务需求转化为数据模型和技术方案。 需要流利的英语和中文（普通话）。