Python

大数据开发工程师

贵阳市|1-3年|本科

贵州航天智慧农业有限公司

作者:世纪恒通平台支持 有效期:长期有效
发布时间:2021-03-26

职位描述

1、负责基于Hadoop生态的大数据平台建设及维护;

2、能依据项目需求进行概要和详细设计,承担数据抽取、清洗、实时统计及离线数据处理等程序开发,按时保质完成具体模块或特定任务的开发,并编写相关技术文档;

3、负责核心技术问题的攻关,架构设计、系统优化,协助解决项目开发过程中的技术难题,并根据项目需求预研并引入新的大数据分析技术;

4、负责核心代码实现、系统性能优化、代码审核检查、搭建系统开发环境;

任职要求:

1、计算机、软件工程、数学等相关专业本科及以上学历;

2、三年以上大数据领域工作经验,有智慧农业领域大数据应用经历优先;

3、熟练掌握一种或以上的开发语言,如Python、Java和Scala等,有良好的编码习惯,对JVM原理有一定的了解,对Spring全家桶技术栈框架熟悉;

4、熟悉数据库理论,了解或熟悉一种或多种SQL/NoSQL数据库,熟练掌握SQL及其调优方法;

5、熟悉主流的数据仓库建模理论、hadoop平台架构、流式处理技术以及海量数据采集与处理技术;

6、对Hadoop相关技术和组件HDFS,YARN、MR,HBASE,Hive,Flume,Impala、Spark,Storm、azkaban等有全面深入了解,能够熟练安装、配置、部署和优化;

7、熟练掌握至少一种ETL及作业调度工具;

8、有大型分布式、高并发、高负载、高可用性系统设计和稳定性经验优先。

9、具备良好的识别业务关键需求和设计领域模型的能力;

10、热爱技术,工作认真、严谨,善于沟通与团队协作。

公司介绍

贵州航天智慧农业有限公司(简称航天智慧农业)隶属中国航天科工集团第十研究院,注册资本5400万元,地处贵州省贵阳市。航天智慧农业是中国航天科工集团进军智慧农业领域,承担智慧农业工程规划及建设、农业信息系统集成、农业大数据及云服务等多业务为一体的农业科技型企业。航天智慧农业以航天科工智慧农业产业联盟为平台,智慧农业工程技术中心为技术支撑,整合航天科工集团所属各院涉农产业,现已形成智能节水灌溉系统、农业遥感信息化产业、农业无人机产业、农业物联网信息技术产业、智慧水务、智慧粮库产业、现代温室产业、农产品精深加工装备等全面综合的技术、产品及服务体系,致力于服务我国现代农业发展。

工作地址

花溪区小河经开区大数据安全产业园双子楼210

联系电话

15510461089