数据开发工程师岗位职责篇1

职责：

1.负责数据库的设计工作;

2.负责数据库的代码开发工作;

3.负责数据库的优化和维护工作;

4.分析和解决数据库应用系统出现的问题。

任职要求：

1.计算机软件相关专业，一本以上学历;

2.具备1年以上大型数据库开发、设计、维护经验;

3.精通数据库语言，至少精通oracle、sqlserver等常用的.数据库其中的一种;

4.能熟练使用流行的数据库分析设计工具;

5.学习能力强，善于思考，具备良好的分析和解决问题的能力;

6.工作认真、严谨细致，具有责任心，沟通能力强，具有良好的团队合作精神。

数据开发工程师岗位职责篇2

职责：

1.负责公司大数据业务集群的运维工作确保高可用;

2.负责基础运维、故障定位、容量规划、扩容及性能优化;

3.设计实现大规模分布式集群的'运维、报警监控和管理平台;

4.参与业务架构设计，在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技术及发展方向。

任职资格：

1.大专以上学历，2年及以上大数据运维工作经验，熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术，熟悉源码尤佳，至少掌握python/shell中的一种语言，接受优秀应届毕业生;

2.了解大数据平台应用架构，具备常见问题的基本分析和解决能力;

3.熟悉Linux操作系统的配置、管理及优化，能够独立排查及解决操作系统层面的问题;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

数据开发工程师岗位职责篇3

1、从事大数据分布式存储/应用服务的设计和开发，挑战大规模、高并发、易运维的`分布式系统设计构建；

2、参与负责大数据运营/风控/分析等数据应用产品开发迭代，包括需求讨论需求/系统/算法的讨论、设计及实现；

3、定位和解决集群组件如spark、hive、hbase、kafka的性能和高可用问题，协助集群监控系统的开发。

数据开发工程师岗位职责篇4

职责：

1、规划及建设大数据平台;

2、负责大数据存储系统、分布式计算系统、挖掘算法等设计、研发以及维护、优化工作;

3、负责分析、挖掘、对抗各种产品安全层面的恶意行为;

4、参与项目的系统设计和核心代码开发，指导和培训其他工程师;

5、整理和提交技术文档，负责核心功能模块的代码编写和测试工作。

岗位要求：

1、计算机、统计学等相关专业本科及以上学历，具有深厚的数学、统计学和计算机相关知识，精通数据仓库和数据挖掘的`相关技术，3年以上大数据开发相关经验;

2、具有非常扎实的Java基础，熟悉Shell、Python、R、Scala等一种以上语言;

3、算法基础扎实，熟悉常见的数据结构，了解分布式算法和分布式系统的技术原理;

4、精通MapReduce设计方法或Spark计算框架、对NoSQL，Hadoop、Hbase、Spark、Hive等主流云计算，大数据相关软件有充分的了解，并且有实践经验，能解决应用中的复杂问题;

5、熟悉大数据处理相关技术，包括但不限于Hadoop、Hive、Hbase、Impala、Spark，Kafaka、Flume、Sqoop、Storm、Redis等;

6、研读过Hadoop、Hbase、Hive源代码者，能够在特定业务中进行定制改造者优先;

7、具有海量数据处理、数据挖掘、数据分析相关项目的工作经验者优先。

数据开发工程师岗位职责篇5

1、熟悉PHP语言开发，有PHP项目开发经验，熟悉面向对象的'设计方法，开发经验3-5年;

2、掌握JS、HTML、CSS等相关Web开发技术知识;

3、掌握MySQL数据库应用，具有相关应用开发经验及数据库规划能力;

4、具备良好的代码编程习惯及较强的文档编写能力;

5、具备强烈的进取心、求知欲及团队合作精神，有较强的沟通及协调能力;能够准确了解需求;

6、熟悉ThinkPHP、Laravel框架优先;

7、熟悉前端框架如AngularJs,jQuery,Bootstrap,jQueryMobile等优先。

8、熟悉memcache,redis,mysql/postgresql，mongodb。如对NoSQL有深入了解者尤佳;

9、对个人和团队代码质量要很高要求，习惯并喜欢codereview

10、熟悉常用设计模式，有大型分布式、高并发、高负载、高可用性系统设计开发经验者优先;

11、有商城系统开发、熟悉微擎系统经验者优先

数据开发工程师岗位职责篇6

职责：

1、参与核心产品的架构设计、服务器端程序开发

2、负责业务模块开发和相关模块数据库设计

3、参与客户端接口设计、开发

4、参与已有产品的调优和BUG处理

5、参与产品需求研讨

任职要求：

1、计算机相关专业本科以上学历

2、3年以上专职PHP开发经验

3、能够熟练使用Linux操作系统

4、熟悉Html/Css/Javascript/Ajax/jQuery等前端技术

5、熟练使用Yii2/TP3/TP5/Laravel/CI等框架中的任意两种以上

6、熟练使用Mysql数据库，具备手写SQL的'能力

7、有视频或直播相关行业经验优先

8、有大型项目整体设计经验或有成熟作品者优先

9、熟悉常用网络通信协议

10、优秀的逻辑思维能力、较强的分析和解决问题的能力

11、优秀的沟通能力、团队合作精神

12、善于思考、积极主动、高度的责任感和敬业精神

数据开发工程师岗位职责篇7

职责：

1、从事Hadoop、Spark、Hbase、hive等分布式大数据产品的设计和开发；

2、针对部门大数据业务进行大数据分析、挖掘等产品应用的开发；

3、大数据平台各类数据业务抽象及模型化；

4、参与大数据管理平台的开发及维护；

5、负责大数据平台数据及相关的应用开发，调优及维护；

6、为项目相关开发人员提供大数据技术指导及解决大数据平台应用中遇到的技术难题；

7、良好的`团队合作与沟通能力。

任职要求：

1、本科及以上学历，2年以上大数据应用开发经验；

2、具备Java、Python、Scala其中两种语言的开发经验；

3、了解泛Hadoop大数据生态圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中两种以上技术，并有实际的项目开发经验，有相关源码研究者优先；

4、具备ETL开发与运维能力，有Flume、kettle经验优先；

5、熟悉大数据平台的搭建过程，熟悉数据处理流程，有TB级以上数据处理经验优先，有实时数据处理经验者优先；

6、熟悉离线和实时数据处理流程，熟练使用Spark，Flink处理TB级数据优先；

7、熟悉Linux系统环境，有shell等脚本编写经验，熟悉Mysql、PostgreSql、Oracle等常用关系数据库，熟练编写SQL语句；

8、熟悉Yarn，Kubernetes，Azkaban等资源调度框架者优先；

9、熟悉Datax的二次开发，并有实际开发经验优先。

数据开发工程师岗位职责篇8

职责：

1、负责大数据统计平台建设与优化;

2、负责广告效果分析，反作弊平台建设;

3、负责移动广告平台相关系统的设计研发及持续优化。

职位要求：

1、计算机或相关专业本科学历及以上，2年工作经验;

2、精通大数据采集、处理、存储、查询相关技术;

3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相关技术;

4、至少熟练掌握Java/Scala/Python中一门语言;

5、有做过大数据量查询优化的优先;

6、有大数据服务运维、性能调优者优先;

7、熟悉常用的设计模式，对MVC框架有了解;

8、强烈的`责任心，对技术充满热情，高效率，良好的沟通能力。

数据开发工程师岗位职责篇9

职责：

1、负责参与数据库选型、给出数据库设计方案、优化方案;

2、负责数据库故障恢复、备份、调优;

3、负责监控数据库资源消耗情况、数据库运行日志、故障日志，给出解决方案;

4、负责数据库安装和配置管理;

5、负责解决数据库、数据方面的问题。

任职要求：

1、本科以上学历，计算机及相关专业;

2、两年以上的数据库开发经验;

3、熟悉oracle或者greenplum等常见关系型数据库，有开发存储过程(PL/SQL)的`经验;

4、熟悉SQL调优;

5、熟悉数据库集群、分库、分表等操作的优先考虑;

6、有greenplum数据开发的经验优先考虑。