岗位职责：

1、负责产品计算中心方案设计实施及Hadoop/Spark集群线上故障处理、性能调优；

2、负责基于Hadoop/Spark生态系统的产品研发；

3、负责基于搜索引擎（ElasticSearch）的产品研发；

4、负责基于Redis，kafka集群调优及产品研发；

5、参与海量数据处理和高性能分布式计算的架构设计，负责数据处理流程的设计和代码开发，撰写相关文档；

6、研究大数据、AI领域最新进展，并应用到业务中。

职位要求：

1、大学本科或以上学历，计算机相关专业，spark/hadoop全栈优先，精通任意一栈者也可；

2、拥有实际Apache Hadoop/Spark相关系统的调优、运维、开发经验；

3、使用hadoop及hadoop生态圈中的常用组件，如Spark、Hive、zookeeper、Sqoop、Flume、Kafka、Storm、Redis、Spark、Yarn、Impala、HBase、Presto、solr 等全部或者部分组件,最好精通其中1-2个；

4、熟练掌握java 、scala或者python语言，熟悉并行计算或者分布式计算，理解MapReduce、HDFS原理、spark RDD/DataFrame原理。

凯通科技源于信产部电信科学研究院软件开发中心，2000年成立于广州，拥有超过4000平米的研发中心，4个分公司、12个技术支持中心，员工近400人，研发人员占70%以上。公司经营持续向好，各项财务指标呈增长趋势，近三年每年的研发费用均占到销售额的10%以上，已获得5项专利、76项软件著作权、32项软件产品证书。凯通主要客户包括电信、移动、联通、电力、水利、教育、政府、广电等多个行业，是国内顶尖的通信信息网络运营支撑平台和企业信息化咨询专家、通信及信息领域软件开发商和系统集成商；是业内仅有的几家能提供从标准制定与顶层规划咨询到系统自主研发实施、工程技术服务甚至增值业务运营服务的综合型系统提供商之一，产品在电信OSS领域具有示范作用，也是全国最大通信运营商广东电信在OSS系统领域的第一大综合服务提供商（占75%市场份额）。遵循“用软件改变世界，让互联更加智能”的使命，我们希望把自己打造成为“智能物联网和大数据运营服务的领导者”，这是愿景，也是方向的引领，目前凯通以自主研发的“天工测物”智慧物联网云平台为基础，针对通信网络、电力能源、水利农业三大战略方向，以“核心平台+行业专业化服务”的模式为客户提供了整套行业解决方案。