大数据开发工程师
关于优比客思UBiX
优比客思UBiX是数字智能时代,数据和算法驱动的端到端AI全智能营销平台。致力于通过数据和算法驱动,为广告主提供AI智能化精准营销解决方案,为开发者提供安全高效的AI全智能的变现方案,共同创造价值。
岗位职责
1、用户智能分析平台建设
--负责公司核心用户智能分析平台的架构设计与开发迭代,构建以设备ID为基础的用户全生命周期数据资产体系
--开发广告用户层面的分析能力,包括但不限于:曝光/点击/转化漏斗分析、归因模型、用户留存与流失分析、LTV预估
--搭建并持续优化用户画像(用户标签体系),覆盖人群属性、兴趣偏好、设备特征、行为序列等多维度标签
2、数据工程
--设计和维护离线/实时数据处理链路,基于 Spark / Flink 完成大规模数据的 ETL、清洗、聚合与特征工程
--负责 OLAP 数据仓库及分析型数据库的建模设计与性能调优(ClickHouse / Doris / StarRocks 等),支撑秒级多维分析查询
--与数据产品、算法工程师紧密协作,将业务需求转化为高效、可扩展的数据方案
3、算法协同
--配合算法团队完成特征工程、样本构建、模型特征回溯等数据准备工作
--参与算法效果评估的数据侧建设,包括 A/B 实验数据管道、模型在线特征服务等
4、平台稳定性与数据治理
--建立数据质量监控体系,保障数据一致性、及时性和准确性
--持续优化数据管道的性能与成本,解决数据倾斜、小文件、GC 等常见问题
任职要求
1、3-5 年数据开发/大数据开发相关工作经验
2、精通 Spark(批处理与 SQL),有大规模数据处理的实战经验,熟悉 Spark 调优
3、熟练使用 Flink 进行实时流处理开发,包括 CDC 数据同步、实时指标计算等场景
4、熟悉至少一种 OLAP 数据库(ClickHouse / Doris / StarRocks / Druid 等),具备建模设计与查询优化能力
5、有过以用户/设备为核心的数据分析平台建设经验,包括用户画像体系、用户行为分析、广告归因等
6、熟悉 Hadoop 生态技术栈(Hive / HDFS / YARN / Kafka 等)
7、熟悉 Java 或 Scala 开发(Spark/Flink 作业开发),熟练掌握 SQL
软素质要求:
1、主动性强:能自主发现数据层面的问题并推动解决,不满足于「接需求-做需求」
2、数据思维:能从海量数据中提炼业务价值,具备良好的数据敏感度
3、沟通协作:能够清晰地与产品、算法、业务团队沟通技术方案
4、严谨务实:对数据准确性有近乎偏执的追求
加分项:
1、有移动广告行业经验,有SDK收集收集分析经验
2、对机器学习/推荐算法有实际理解,能与算法团队高效协作
3、了解实时数仓架构(如 Hudi / Iceberg / Paimon)
4、对 DMP / CDP 系统有一定认知
