当前位置:概念范文网>文秘>岗位职责>

Hadoop运维工程师岗位职责(精选25篇)

岗位职责 阅读(1.47W)

Hadoop运维工程师岗位职责 篇1

op集群运维、监控、开发;

Hadoop运维工程师岗位职责(精选25篇)

op生态圈框架部署、故障处理、异常排查等基本工作;

3.对有助于提升集群处理能力、高可用性、扩展性的各种解决方案进行跟踪和落地;

4.解决海量数据不断增长面临的挑战,解决业务需求;

5、 对Hadoop集群进行日常管理,保障系统正常运行;

Hadoop运维工程师岗位职责 篇2

1、负责移动大数据中心的建设与维护;

2、负责安徽移动hadoop集群的故障排查、解决;

3、其他省份hadoop项目建设提供技术支持。

Hadoop运维工程师岗位职责 篇3

1.负责高并发,大存储和实时流的Hadoop/spark大数据平台规划,运维,监控和优化工作;

2.保证Hadoop/spark平台各核心服务运行的稳定、高效;

3.对Hadoop/spark平台运维不断优化,提升数据产品的质量和响应速度;

4.开发各种Hadoop大数据自动化运维与监控工具;

5.平台大数据环境的部署维护和技术支持;

6.应用故障的处理跟踪及统计汇总分析;

7.应用安全,数据的日常备份和应急恢复。

Hadoop运维工程师岗位职责 篇4

1. 负责Hadoop及相关组件的部署和维护,保证其稳定运行;

2. 开发和使用Hadoop大数据自动化运维与监控工具;

3. 基于大数据应用需求,不断调整和优化Hadoop框架及组件的配置,提升性能;

4. 为数据仓库、数据挖掘建模等数据应用项目提供运行环境支持;

Hadoop运维工程师岗位职责 篇5

1.负责Hadoop相关项目日常运行维护、故障排查工作;

2.负责Hadoop集群的监控和配置调优工作;

3.负责Hadoop平台的用户管理、权限分配、资源分配;

4.负责集群服务器软件的安装、维护、部署、更新;

Hadoop运维工程师岗位职责 篇6

职责:

1.负责电力行业信息系统账号及权限治理、标准化生产工艺、项目后评估等专项工作牵头与组织;

2.负责对应用系统的架构及性能进行分析,提出合理化建议并制定优化解决方案;

3.负责对系统运行过程中发生的故障进行深入剖析,指导运维人员编写故障分析报告与处理总结报告;

4.负责指导运维人员对信息系统业务端口、安全漏洞及隐患排查整改;

5.负责收集、整理及编制信息系统运维预案、方案、报告等相关文档;

6.负责完成上级领导安排的其它专项工作。

职位要求:

1.专科及以上学历,计算机应用、软件等相关专业,5年以上工作经验(其中,3年及以上研发或运维工作经验,2年及以上项目管理经验);

2.至少负责过2个基于weblogic平台搭建的信息系统运维工作;

3.至少参与过1个项目招投标相关工作,包括技术规范书、技术标书等材料编制工作;

4.有较强的学习能力、沟通及协调能力和服务意识,具有良好的文档编制功底和语言表达能力;

5.熟悉国网公司SG-UAP开发平台研发要求及系统安装部署架构,并有电力行业应用系统运维经验者优先。

Hadoop运维工程师岗位职责 篇7

1、解决在工作中出现有关网络和桌面系统的问题,包括完成系统安装、维护,保证系统正确实施和应用;

2、负责桌面计算机软硬件的安装、配置、维护与故障排除;

3、熟悉主流桌面级操作系统的安装,设置与排错;

4、熟悉打印机、扫描仪、传真等外设的共享与使用;

5、具备基础的网络维护经验,能够简单检查、确定、排除网络故障;

6、熟悉office等办公软件。

Hadoop运维工程师岗位职责 篇8

职责:

1、负责优化公司IT系统以及各应用系统的体系架构;

2、负责系统升级、扩容需求与资源落实,配合开发需求,测试、调整运维平台;

3、负责网络以及服务器的网络设置、维护和优化、网络的安全监控、系统性能管理和优化、网络性能管理和优化;

4、负责设计并部署相关应用平台,并提出平台的实施、运行报告。

5、负责配合开发搭建测试平台,协助开发设计、推行、实施和持续改进。

6、负责相关故障、疑难问题排查处理,编制汇总故障、问题,定期提交汇总报告。

岗位要求:

1. 2年以上大中型在线系统运维工作经验、精通Linux系统及常见服务的安装配置,熟悉常见的负载均衡实现方案并有实际实施经验;

2. 精通Linux系统如Redhat、Gentoo、精通Apache、NginX、MySQL、FTP、DNS、Squid等常用服务的安装、配置和维护;

3. 精通和灵活运用1种以上的脚本语言,包括:Shell、PERL、PHP、Python等;

4. 能够熟练排查运维过程中出现的服务故障、系统故障、网络故障;

5. 高度的责任感,较强的故障分析及排除能力,善于在工作中学习,能够承受工作压力。

Hadoop运维工程师岗位职责 篇9

1. 域控制器服务器的管理维护。

2. 终端服务器的管理维护,数据的备份还原。

3. 防火墙的管理维护,邮件服务器,杀毒软件的维护

4.机房其它服务器的管理维护.

,终端,打印机,传真机等设备的简单维护.

6.内部网络的管理维护.

7.机房设备操作管理,检查服务器等设备的保修状况并及时提出保修计划.

Hadoop运维工程师岗位职责 篇10

职责:

1、企业内外网管理;按需进行网络架构的调整、性能优化;

2、网络环境的管理,配置,排错,维护;

3、网络设备的安装、配置、管理,提供网络设备维护方案;

4、服务器系统的安装、配置、管理,提供网络设备维护方案;

5、网络安全,网络质量及网络设备的监控;

6、协助办公网络环境的维护,终端设备的维护。

7、企业云生产服务器的管理,配置,排错,维护,包含阿里云,微软云Azure

掌握技能:

1、熟悉电脑软硬件操作和维护;

2、精通AD、DNS、DHCP、DFS、等服务搭建和运维;

3、熟悉Winserver20xx、Winserver20xx等服务器系统操作和使用;

4、熟悉华为、思科等网络设备调试配置;

5、熟悉Vsphere虚拟机的配置和使用;

6、有云环境如Azure的管理经验,包含虚拟机创建,虚拟网络管理,网络安全组管理(NSG)

7、有呼叫中心IT机房和职场运维经验优先

Hadoop运维工程师岗位职责 篇11

1、作为基础资源服务提供方,支持SRE、DBA等工作,保障基础设施稳定性;

2、负责机房规划、管理,包括上架、调试、备件、联系厂商维保,提供稳定高效的硬件环境;

3、机柜管理标准制定与落地(设备放置、空间、布线、双电源);

4、负责基础设施管理与标准化,比如系统初始化、cmdb、账号体系、DNS、NTP;

5、硬件监控报警及应急处理;

6、运行维护Exchange和AD

Hadoop运维工程师岗位职责 篇12

1、对服务器进行日常维护,确保各项服务连续正常运行,无重大事故;

2、负责服务器存储网络等基础平台的技术维护和问题处理 ;

3、负责执行大客户服务项目的定制化服务配置和硬件安装等处理工作;

4、了解操作系统安装与配置;

5、具备一定的网络相关故障解决能力;

6、熟悉主流厂商PC服务器硬件安装与配置;

7、Windows、Linux、VMware等日常管理、维护;

8、负责服务器异常或故障的受理、跟踪、解决以及统计分析;

Hadoop运维工程师岗位职责 篇13

职责:

1、负责24小时监控业务及系统运行状态;

2、定期检查网络硬件及底层系统的运行情况;

3、及时响应、诊断、定位、处理系统常见故障;协调问题解决;

4、及时反馈故障情况和处理结果;

5、收集记录系统运行异常现象及处理方案,认真填写工作日志。

任职要求:

1、有半年以上IDC运维经验或者系统运维经验;

2、有计算机系统硬件、网络相关设备基础;

3、熟悉Linux服务器操作系统管理、用户权限管理、命令行操作;

4、熟悉常用监控工具和中间件;

5、工作严谨细致,踏实稳定;

6、有较强的责任心和团队协作精神。

Hadoop运维工程师岗位职责 篇14

职责:

1、负责系统运维,解答用户疑问,处理异常;

2、负责系统用户操作培训;

3、负责收集并统计用户系统需求及初步沟通及分析;

4、负责系统数据库的基本维护检查备份。

任职要求:

1、计算机或信息化管理等专业本科及以上学历;

2、熟悉SQL Server/Postgresql数据库,熟练掌握SQL 语句的运用;

3、有一定软件开发语言基础,熟悉C#语言者优先;

4、熟悉制造企业的生产流程,熟悉鞋服制造企业生产流程者优先;

5、抗压能力强;

6、良好的沟通及理解能力。

Hadoop运维工程师岗位职责 篇15

职责:

1、负责银行数据中心内基础环境交付工作,包含服务器、操作系统批量安装配置管理。

2、负责运维自动装机系统及其他自动化运维系统,通过脚本批量配置管理服务器及系统。

3、对数据中心进行周期性巡检,及时发现故障隐患,协助故障处理。

4、其他的一些日常运维工作。

岗位要求:

1、全日制本科学历,计算机、网络、通信等相关专业毕业,2年以上工作经验。

2、熟悉Linux系统安装配置,熟悉 shell命令,会编写bash脚本,对linux系统有丰富运维管理经验,具备RHCE认证更佳。

3、了解cobbler自动装机或其他自动装机原理,熟悉Ansible,具备基础python编程能力,会flask api的优先考虑。

3、了解X86架构服务器,有大中型企业数据中心Linux运维工作经验者优先。

4、具有良好的抗压能力、沟通表达能力、人际交往能力、情绪控制能力以及团队协作能力。

5、有较强学习能力和学习意识,能够积极主动的学习掌握新产品新技术。

6、有较强安全生产意识,严格遵守公司及客户规章制度

Hadoop运维工程师岗位职责 篇16

职责:

1、 负责企业机房日常维护和巡检工作

2、 负责机房内服务器、存储等硬件设备的维护管理, 自动化运维系统的部署和管理,以及常见软硬件故障的处理

3、 负责企业内核心应用数据库的日常维护,数据备份、数据恢复以及数据库的优化等工作

4、 负责各类服务器操作系统的维护和管理,包含Windows、Linux以及Unix服务器系统的日常维护

5、 负责云平台系统的日常维护管理,虚拟机创建,资源分配、回收以及系统资源的日常监控和管理

任职资格:

1、 本科或以上学历,计算机相关专业

2、 至少两年以上 windows、linux 服务器运维管理经验

3、 熟练掌握windows server、 liunx操作系统的安装配置、系统管理以及系统优化

4、 熟练掌握oracle/mysql/sybase主流数据库的配置与优化,数据备份与恢复,数据安全,数据迁移与归档,数据库日常监控与管理

5、 具有丰富的系统软件及其硬件的故障排除经验,具备较强的分析及解决问题的能力,并善于主动总结和分享自己的工作经验;

6、具有良好的服务意识,端正的服务态度,敢于吃苦,服从安排

Hadoop运维工程师岗位职责 篇17

负责公司英文网站的更新维护,完成产品上传,负责网站的新闻内容更新;

负责维护公司网站(facebook、instagram、twitter)社交媒体的运营与维护,

负责公司独立站的管理、运营、推广引流、数据分析及效果评估;

负责网站产品上线、策划、内容编辑、专题设计等日常维护运营管理工作;

负责网站页面SEO要素优化以及网站内部链接建设,逐步提升网站以及网站关键词排名;

在国外主流社区,行业论坛,博客对公司网站及品牌进行整体营销推广;

了解和分析竞争对手的SEO策略,熟练掌握软文编辑以及推广。

Hadoop运维工程师岗位职责 篇18

职责:

1、 负责参与IT信息系统硬件集成项目实施工作;

2、 负责处理计算机及办公外设、监控、网络、的安装及调试工作,处理相关的故障问题及异常排除;

3、 综合布线及相关的工作;

4、 协助进行客户使用培训工作;

5、 具有良好的技术文档编制能力;

6、有IT售后服务经验者优先考虑

岗位要求:

1、 大专及以上学历,计算机类等相关专业;

2、 在学校有一定的弱电系统硬件集成系统实施经验;

3、 了解项目管理和项目实施;

4、 良好的逻辑思维能力、人际沟通能力;

5、 积极主动,具备团队意识,具有高度的责任心,能够承受较强的工作压力。

Hadoop运维工程师岗位职责 篇19

职责:

1、负责公司各项目发布、维护及相关业务支撑;

2、负责平台产品的监控、应急响应等,及时定位及解决性能瓶颈和疑难问题;

3、编写各种运维脚本,推动自动化运维,确保日常部署工具安全高效进行;

4、服务器异常事件的处理并记录,和其他成员共同承担7*24线上服务质量保障工作,确保系统7*24小时稳定运行

5、对公有云网络、存储、CPU等资源进行性能评估测试

任职要求:

1、大学专科及以上学历,计算机或者相关专业,3年以上工作经验;

1、熟练使用linux系统,熟练掌握一门以上脚本语言(shell/python/go等)

2、对docker、Kubernetes(k8s)有一定了解

3、熟悉Nginx、Redis、Mysql、tomcat、ElasticSearch组件的部署、使用、调优;

4、掌握常用业务监控方式,熟练使用prometheus,granafa等监控工具使用

5、工作认真严谨,责任心强,抗压能力强

6、有阿里云,腾讯云,Azure, AWS等至少一家公有云使用经验优先考虑

Hadoop运维工程师岗位职责 篇20

1、负责电话及网络相关设备的维护和调整;更新维护相关表格。

2、负责对电脑及相关软硬件的维护,及时排除故障;

3、负责对接总部相关同事,协调处理相关问题;

4、负责考勤钉钉系统维护,处理并反馈异常问题;

5、负责公司网站业务后台与邮箱相关管理工作。

Hadoop运维工程师岗位职责 篇21

职责:

1、负责办公系统的部署及日常维护。

2、监控平台的搭建和日常维护。

3、数据库的日常管理。

4、运维自动化体系的建设与维护。

5、协助开发测试排查开发过程中出现的系统相关问题。

岗位要求:

1、精通CentOS、Ubuntu等Linux系统,及系统自带组件的管理和应用。

2、精通Nginx、Tomcat、Apache、Keepalived等部署和管理。

3、精通Shell,熟悉Pythen或PHP,擅长编写脚本。

4、熟悉MySQL、MongoDB等数据库的部署和管理。

5、熟悉Zabbix或Prometheus、Ansible或Saltstack的部署和使用。

6、熟悉自动化运维和分布式等架构的设计与实施。

7、五年以上运维工作经验。

Hadoop运维工程师岗位职责 篇22

职责:

1、负责公司大数据平台自动化运维开发、监控和优化工作,保障数据平台服务的稳定性和可用性;

2、负责公司Hadoop核心技术组件日常运维工作 ;

3、负责公司大数据平台现场故障处理和排查工作;

4、研究大数据前沿技术,改进现有系统的服务和运维架构,提升系统可靠性和可运维性;

任职要求:

1、本科或以上学历,计算机、软件工程等相关专业,3年以上相关从业经验

2、精通Linux运维命令,熟悉Linux的维护和管理,熟悉Shell/Python脚本开发,掌握Scala/JAVA优先;

3、熟悉大数据项目实施:包括不限于Kafka、Hadoop、Hive、Hbase、Spark等大数据生态的平台搭建,监控和调优;

4、良好团队精神服务意识,沟通协调能力;

Hadoop运维工程师岗位职责 篇23

职责:

1、负责客户及公司站群系统日常维护,确保网站的安全运行;

2、 具有一定的网站修改维护经验,有软件开发基础,了解asp、jsp语言,熟悉css、js、html,可以进行页面简单修改及数据库操作,对常用开发环境比较熟悉,能对站群网站代码进行相应的简单修改及维护;

3、 能进行网络的调试和配置,及时解决故障问题;

4、办公网络环境的基本维护,各部门的桌面技术支持,客户网站系统及办公系统远程操作维护;

5、负责网站运行管理;服务器软件环境管理;oracle11g/mysql数据库,备份、新建、性能优化。

6、熟悉jsp语言可以根据需求修改网站程序者优先;

【任职要求】

1、计算机及相关专业,本科以上学历;

2、具备两年以上网站及各种B/S架构系统维护相关工作经验,掌握各种网络环境搭建,具备较强的技术基础;

3、熟悉网络设备、服务器、调试、维护;

4、熟悉计算机网络和网络安全的调试;

5、具备一定的软件开发基础和软件调试部署,网络故障分析、判断、解决问题的能力;

6、工作认真、仔细,有强烈的责任感和良好的沟通能力。

Hadoop运维工程师岗位职责 篇24

职责:

1.对公司各业务系统进行技术维护;

2.业务平台新建、扩容等工作中部署、调测和对接;

3.业务系统故障和投诉的处理;

4.建设方案、割接方案等技术方案的编写和实施;

5.公司各平台业务所需的信号接收、转码等系统的维护;

6.业务系统的监控和巡检;

7.根据工作需要,能适应夜班及节假日值班工作;

任职要求:

1.全日制本科(统招)及以上学历,计算机、软件、通信工程、网络等相关专业,工作经验不限。

2.熟悉linux操作系统,熟练使用linux基本命令。

3.熟悉一两种常用linux上的开源程序或中间件,如:tomcat、nginx、lvs、redis、zabbix等。

4.了解mysql、oracle等主流数据库,了解计算机网络。

5.了解大数据、云计算、虚拟化、容器化、AI、CI/CD等技术者优先,如:hadoop、docker、kubernetes、python、jenkins等。

6.有良好的逻辑思维,掌握一门主流编程语言者优先,如:Java、php、js、python、C++、go等。

7.具备良好的沟通协调能力,文字表达能力和执行力,对其他部门的技术支持工作有服务意识。

8.有较强的学习能力,热爱运维工作,喜欢钻研运维相关技术,能吃苦耐劳

9.对运维工作有高度的安全意识,办事仔细、认真、不浮躁。

Hadoop运维工程师岗位职责 篇25

职责:

1. 负责公司核心集群的运维工作,保证其高可用和稳定性。

2. 负责集群容量规划、扩容及集群性能优化。

3. 深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的Hadoop运维技术及发展方向。

4. 设计实现分布式集群的运维、监控和管理平台。

职位要求:

1.2年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验。

2.对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验。

3.有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验。

4.实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作。

4.熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作。

5.有Cloudera的CM使用经验尤佳。