要求:
1、计算机、数据科学、人工智能、数学等相关专业,全日制本科及以上学历;
2、熟悉Hadoop/Spark/Flink/Kafka/Hive/StarRocks等大数据技术的原理和使用;
3、熟悉DataX、Seatunnel、Flink CDC、Flume等常用数据集成工具,了解组件间的优缺点;
4、熟练使用关系型数据库(MySQL/SQL Server/Postgresql);
5、熟练数据库建模(维度建模/分层设计)、SQL优化)及ETL工具(Sqoop/Kettle/DataX);
6、在熟悉各类技术框架基础上,结合具体项目能提出可行性的技术解决方案,并能确定最优技术方案;
7、熟悉Java、Python、C++、C#等至少一种编程语言,熟悉基础编程原理,有良好的编程风格和规范;
8、具备识别项目的性能瓶颈的能力,能独立设计相应的优化方案及方案实施,并输出优化报告。
职责:
1、负责公司数据的采集、清洗、分析及可视化,支持业务决策;
2、构建数据分析模型,挖掘数据价值,提升业务效率;
3、与相关部门协作,提供数据支持和策略建议;
4、持续优化数据处理流程,提升数据质量和分析效率。