职位描述
大数据开发岗位需求
主要职责:
1、负责设计、开发和维护公司的大数据架构,包括数据仓库、大数据处理平台的部署与优化。
2、使用SQL、Hive等工具对海量数据进行ETL处理,确保数据质量及准确性,参与数据分析模型的构建与优化,支持业务团队的数据需求。
3、利用FineBI、ECharts等工具开发数据可视化产品,为用户提供直观的数据洞察和决策支持。
4、大数据处理流程进行性能调优,解决系统瓶颈;监控大数据平台的运行状态,及时排查并解决故障,确保系统稳定运行。
5、关注大数据领域的新技术、新工具,评估并推动其在公司内部的应用落地。
6、负责开发、运维工作过程中相关文档的编写工作;
任职要求:
1、硕士及以上学历;
2、3年以上大数据开发经验;
3、掌握常见分布式解决方案及原理,具有扎实的编程基础,熟练掌握Java、Python、Scala至少一门开发语言编程;熟悉常用的数据结构与算法;
4、掌握基于Hadoop生态圈开源组件(Hadoop/Hive/Zookeeper/Flink/Kafka等)独立完成实时及离线任务开发,对各组件的底层原理有一定理解,掌握大数据组件的开发,构建,维护和性能的优化,具备快速定位、解决疑难问题的能力;
5、掌握常用的关系型数据库、开源数据仓库架构(Clickhouse,presto、impala)和数仓模型设计,掌握SQL开发及SQL性能调优;
6、对数据业务场景非常敏感,掌握数据仓库、数据中台领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;
加分项
1、3年以上大数据开发经验并深度参与或负责过1个以上中型大数据软件项目的设计工作。
2、深入了解交通/医疗/公安行业的业务需求,具备相关领域工作经验或项目经验者优先。
3、了解大数据安全的基本概念、策略、实践和发展趋势,有数据安全项目经验者优先。
公司简介
广西交科集团有限公司(广西交通科学研究院)是一家在广西乃至全国交通运输系统中具有重要影响力的高新技术企业,作为交通基础设施领域综合解决方案供应商,始终致力于“为建设交通强国贡献智慧解决方案”,被认定为“国家企业技术中心”,获评“广西高新技术百强企业”第二名、“广西创新活力十强企业”榜首、“广西创新能力十强企业”排名第二、“2020年度全区数字广西建设突出贡献奖先进集体”等称号。目前现有员工1600余人,其中博士40余人、硕士800余人,教授级高级工程师30余人、高级职称300余人,享受政府特殊津贴专家2人、自治区优秀专家2人、第一批广西高层次人才1人,交通运输部与广西“新世纪十百千人才工程”第二层次人选2人,是广西交通建设行业人才小高地。
上班地点
工作地址:
南宁市良庆区北投大厦-B座 查看上班路线
-
可能感兴趣的职位
-
暂无推荐岗位
南宁相关热门岗位
- 广西交科集团有限公司
- 所在行业 交通/运输
- 成立时间 25年(2000年4月7日)
- 企业性质 国有企业
- 公司规模 1000-9999人