《大数据运维工程师的岗位职责【合集28篇】》
大数据运维工程师的岗位职责(通用28篇)
内容导航
大数据运维工程师的岗位职责 篇1大数据运维工程师的岗位职责 篇2大数据运维工程师的岗位职责 篇3大数据运维工程师的岗位职责 篇4大数据运维工程师的岗位职责 篇5大数据运维工程师的岗位职责 篇6大数据运维工程师的岗位职责 篇7大数据运维工程师的岗位职责 篇8大数据运维工程师的岗位职责 篇9大数据运维工程师的岗位职责 篇10大数据运维工程师的岗位职责 篇11大数据运维工程师的岗位职责 篇12大数据运维工程师的岗位职责 篇13大数据运维工程师的岗位职责 篇14大数据运维工程师的岗位职责 篇15大数据运维工程师的岗位职责 篇16大数据运维工程师的岗位职责 篇17大数据运维工程师的岗位职责 篇18大数据运维工程师的岗位职责 篇19大数据运维工程师的岗位职责 篇20大数据运维工程师的岗位职责 篇21大数据运维工程师的岗位职责 篇22大数据运维工程师的岗位职责 篇23大数据运维工程师的岗位职责 篇24大数据运维工程师的岗位职责 篇25大数据运维工程师的岗位职责 篇26大数据运维工程师的岗位职责 篇27大数据运维工程师的岗位职责 篇28大数据运维工程师的岗位职责 篇1
职责:
1、用户支持(硬件/软件故障排除);
2、辅助负责网络开发和调试,系统运行维护;
3、辅助维护局域网/广域网/ VPN /闭路电视等基础设施、Windows服务器和防火墙;
4、与内部IT团队(瑞士)和外部服务提供商协调合作以解决问题;
任职资格:
1、熟悉MS Office 20xx- 20xx和Windows 7- 10;
2、熟练的英语读写能力,具备口语能力优先;
3、积极主动,善于沟通,注重细节,乐于学习;
4、本岗位欢迎IT专业优秀应届毕业生。
大数据运维工程师的岗位职责 篇2
职责:
1、负责公司大数据平台的部署、管理、优化、监控报警,保障平台服务7*24稳定可靠高效运行;
2、深入理解公司大数据平台架构,发现并解决性能瓶颈,支撑业务和数据量的快速增长;
3、开发大数据自动化运维、监控报警、故障处理相关脚本和工具;
4、负责Hadoop/spark/Mysql等集群服务、业务监控、持续交付、应急响应、容量规划等。
任职要求:
1、3年以上互联网运维相关工作经验,2年以上大数据平台运维相关工作经验;
2、具备一定的故障排查能力,有良好的技术敏感度和风险识别能力,精通一门以上脚本语言(shell/python等),熟悉Http/Https、TCP/IP、SMTP等协议;
3、熟悉Hadoop大数据生态圈,包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impala/Hue/Sqoop/Elasticsearch/kibana/MySQL/Oracle等;
4、熟悉Hadoop各组件的原理和实现,有实际部署维护、管理( 包括元数据管理)及优化经验。并拥有持续调优能力,运维管理过大规模数据平台;
5、熟悉 Kubernetes(K8s) 集群 Docker 在大数据环境场景的使用;
6、熟悉Linux(redhat/centos)软硬件环境、系统管理和优化,熟练部署、优化各种常用服务
7、有Java开发经验和阅读源码能力者优先。
大数据运维工程师的岗位职责 篇3
1、负责服务器相关应用中间件的安装、部署、配置、监控、优化及维护;
2、负责处理各类系统基础服务的日常运行维护,配置更新,故障应急响应,保证所负责业务的高可用。
3、负责公司项目的升级、需求与资源落实,配合开发需求,测试、调整运维平台;
4、负责系统运维工作的规划、部署、实施、监控、数据备份、容灾备份、数据迁移、日志分析、故障排除等工作;
5、运维相关的新技术的研究;
6、完善系统架构、拓扑图、日常运维等相关文档。
7、完成上级交办的其他事务工作;
大数据运维工程师的岗位职责 篇4
职责:
1、管理维护公司网络,做好公司服务器、计算机、打印机等硬件设备的日常维护;
2、管理公司内部OA办公系统、用友财务系统、财务系统;
3、对服务器进行日常维护、保证公司产品网站及服务应用的安全,为其稳定的运行提供技术支持;
4、做好领导安排的其他工作。
任用要求:
1、 大专及以上学历,计算机相关专业;
2、 1-2年运维经验,优秀应届毕业生也可;
3、 有较强的学习能力,热爱系统管理工作,有高度的责任心,喜欢钻研系统管理相关技术。
大数据运维工程师的岗位职责 篇5
职责:
1、负责公司办公、生产服务器及网络维护;
2、参与设计、审核、优化公司IT系统以及各应用系统的体系架构;
3、对主流数据库(Mysql/Mongodb/Redis等)有深入了解,有实际数据库性能优化经验;Mongodb 集群、切片存储参数优化优先
4、负责IT运维相关流程的规划、设计、推行、实施和持续改进;
5、负责windows/linux系统安装调试及环境搭建;
6、负责配合开发搭建测试平台,协助开发设计、推行、实施和持续改进;
7、负责相关故障、疑难问题排查处理,编制汇总故障、问题,定期提交汇总报告。
8、负责网络监控和应急反应,以确保网络系统有7*24小时的持续运作能力。
9、负责日常系统维护,及监控,提供IT软硬件方面的服务和支持,保证系统的稳定。
10、负责经理交办的其他工作。
任职要求:
1、4年以上运维工作经验,大专及以上学历,软件工程、计算机科学与技术及相关专业;
2、团队意识强,善于沟通;
3、责任心强,平衡协调,能主动与别人合作;
4、学习能力强,能独立完成安排任务,善于学习,接受能力很强,能学以致用;
5、创新精神很强,能不断提出新想法,新措施,善于学习,锐意求新,能将创造力应用于工作中,风险意识强;
大数据运维工程师的岗位职责 篇6
职责:
1.负责公司大数据业务集群的运维工作(Hadoop/Hbase/Hive/Presto/Yarn/Spark/Storm/Kafka/Elasticsearch/Flume等)确保高可用;
2.负责大数据平台的日常部署、升级、扩容、迁移;
3.设计实现大规模分布式集群的运维、监控和管理平台;
4.参与业务架构设计,在设计阶段给出可运维性改进建议;
5.深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技及发展方向;
6.兼顾应用系统的运维工作。
任职要求:
1.要求掌握java、shell语言,有Spring Cloud微服务架构开发经验的优先;
2.了解Docker,可以做简单应用;
3.熟悉Hadoop/Hbase/Hive/Storm/Spark/Kafka/Elasticsearch/Flume等开源项目优先;
4.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;
5.掌握puppet、kerberos应用的优先;
6.良好的客户服务意识,强烈的责任心和使命感,执行力强,富有团队合作精神;
7.对大数据方向运维有很高的热情和兴趣,能主动学习了解相关知识;
大数据运维工程师的岗位职责 篇7
职责:
1. 负责外包企业用户的 IT 技术支持服务, 在线解决用户在工作中出现有关网络和桌面系统的问题, 包括完成系统安装、维护,与用户协调和沟通,保证系统正确实施和应用。
2. 接听400技术支持热线,负责Client端产品(PC,打印机等)的故障诊断及修复,包括软件应用和修复等。(如windows, office等常用软件)
3. 利用内外部资源,跟踪处理客户技术问题,提高客户满意度。
职位要求:
1. 大专以上学历,计算机相关专业,1年以上相关工作经验;
2. 熟悉PC硬件组装、维修,Windows、office等软件的安装与应用;
3. 普通话标准,英文口语可沟通者优先;
4. 有思科、华为、微软相关认证者优先;
5. 善于表达,能够与用户进行有效的交流、沟通与协调;
6. 具备团队合作精神 ,积极主动,自我管理,责任心强。
大数据运维工程师的岗位职责 篇8
职责:
1.负责业务系统的运维管理工作包括日常巡检、状态监控、性能监控、故障监控、故障处理、疑难问题分析和优化等;
2.负责数据库日常运维,备份、恢复、扩容及安全管理;
3.根据公司平台的发展需求,负责服务器、应用架构和网络规划、调试优化、日常监控、故障处理、数据备份、日志分析等工作;
4.保障服务器、操作系统、数据库、中间件及业务系统安全,检查并消除安全漏洞;
5.协助完成应用系统持续迭代或者升级,负责系统组件测试、部署及运维;
6.参与运维流程制定,确保任何突发情况都能高效响应;
7.负责运维相关数据的收集、分析和总结;
8.负责技术运维相关的文档、手册、流程编写整理;
9.根据公司平台的发展需求,优化运维流程,能从各角度制定及优化提高业务系统SLA服务标准的方法。
任职要求:
1.计算机或相关专业,两年以上系统(应用)运维或运维开发经验;
2.1年以上Linux运维经验,熟悉Linux系统参数设置、性能调优、系统安全、故障定位处理经验,熟悉常见的负载均衡实现方案并有实际实施经验;
3.具有大中型系统(PC端及移动端)的运维/架构经验,了解自动化运维和监控工具,在网络安全方面有一定经验,了解Nagios/Zabbix/Cacti任意一种运维监控平台的使用及实施;
4.掌握一门脚本语言(shell/Perl/Php/Python其中一种),善于使用脚本来完成日常系统运维工作,有自动化运维工具如Ansible, SaltStack, Puppet或Jenkins等实施及应用经验;
5.对主流公有云服务(阿里云、AWS等)有一定了解;
6.了解Nginx、Mysql、Git、Redis、FTP、DNS、ElasticSearch等第三方中间件服务,并且有运维经验;
7.对Mysql数据库的维护以及SQL语句性能排查技巧有一定了解;
8. 高度的责任心,工作细致耐心,积极主动,抗压性强,有团队合作精神,具有良好的沟通能力;
9.有项目管理经验优先;
10.了解KVM虚拟化技术,了解OpenStack、Docker等云计算相关技术优先。
大数据运维工程师的岗位职责 篇9
职责
1.负责公司项目的日常运维,包括日常巡检,版本更新、异常处置、优化改造等工作;
2.负责新客户的培训及指导工作;
3.负责为客户提供现场技术支持,跟进、处理软件系统使用过程中出现的问题;
4.定期总结问题报告,配合系统研发团队完善系统功能。
任职要求
1.大专及以上学历,计算机网络、软件工程等相关专业,3年以上相关工作经验;
2.熟悉SQL、ORACLE数据库其中的一种,具有一定的数据库操作能力;
3.善于沟通与交流,有团队协作精神,遇到问题可以及时反馈及处理;
4.注重细节,有高度的责任感,有良好的规范化文档书写能力;
5.有良好的学习能力,主动性,执行力,可以主动快速的学习需要负责系统的相关知识,并按时保质保量地完成工作任务;
6.有相关工作经验者优先。
大数据运维工程师的岗位职责 篇10
职责:
1.基础应用服务日常维护工作,保障业务稳定可靠;
2.配合业务团队完成应用部署,协助研发进行故障排查;
3.对业务提供稳定、安全、性能合格的运行环境和专业技术支持;
4.自动化运维组件的规划、设计和开发,提升运维质量和效率;
5.负责公司产品的版本控制、构建和发布管理。
任职资格:
1.熟悉Linux系统管理,熟练掌握各公开云平台管理技术,两年以上互联网行业实际工作经验;
2.精通Python和Shell等编程语言,熟练使用sed、awk、sort、uniq、grep等命令;
3.精通WEB及负载均衡相关技术,如Apache/Nginx/LVS/haproxy等应用服务的安装/配置和维护,具备对应用系统的故障定位和处理能力;
4.精通各类数据库相关技术,如Mysql/Pgsql/Redis/Mongodb/Oracle/Ldap等服务的安装配置及灾备维护,有DBA相关经验者优先;
5.熟悉各类中间件的安装配置及维护;具备故障快速定位排查分析能力;
6.熟悉TCP/IP协议,路由交换的基本概念,能够掌握网络检查工具的使用;
7.必须精通Git维护及操作;熟悉发布系统构建部署如Jenkins(Hudson),Gerrit,Ansible等;
8.熟练掌握常见监控软件zabbix、Nagios等监控软件的使用;
9.有运维自动化、监控系统、发布系统、运营支撑系统等开发经验者优先;
10.具备良好的网络安全意识,熟悉各类软硬件防火墙的配置及使用;有互联网安全行业相关经验者优先。
大数据运维工程师的岗位职责 篇11
职责:
游戏服务器的部署,更新和维护
游戏服务器的性能调优
后台数据统计分析
GM工具开发和维护
任职要求:
一年以上linux运维经验,游戏行业优先
熟悉Nginx服务器配置及性能优化(负载均衡、反向代理、SSL等)
熟悉memcache、mongo数据库部署,优化及常规查询操作
熟悉kafka配置及调优
能够接受python开发
熟悉linux系统下常规服务的配置、优化、维护工作
大数据运维工程师的岗位职责 篇12
职责:
负责公司大数据业务集群的运维工作、集群容量规划、扩容及性能优化;
设计实现大规模分布式集群的运维、监控和管理平台;
参与业务架构设计,在设计阶段给出可运维性改进建议;
深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技及发展方向;
负责公司大数据平台的应用监控、容量管理,应急响应等;
领导安排的其他工作。
任职要求:
1、本科及以上学历,软件工程、计算机等相关专业;
2、熟悉计算机原理、网络原理等知识;至少2年以上运维或开发工作经验;
3、搭建,管理及调优Hadoop/HBase/Hive/Flink/Spark/Kafka/Elasticsearch/Flume等开源项目优先;
4、至少掌握java/python/go中的一种语言;
5、熟悉HBase/Flink/mysql/redis运维优先;
6、熟悉zabbix/graphit/grafana加分;
7、具有很强的分析和解决问题的能力;
8、具有攻克难题的强烈兴趣,以及提升技术能力的意愿;
9、善于主动学习,责任心强,能够承受较大的工作压力。
大数据运维工程师的岗位职责 篇13
职责:
1.负责软件系统日常维护工作,确保系统安全运行;应用环境的各类服务软件的搭建和维护工作;
2.负责参与软件的培训与实施上线工作;
3.负责系统运维,日常软件故障排除、系统优化、安全优化、网络故障诊断及排除等各类技术故障处理;
4.负责对客户在线支持、软件运行过程中问题解答、应急现场支持等;
5.对已有的运维项目进行维护、更新及管理;
任职要求:
1.计算机相关专业,大专及以上学历;1-3年相关经验
2.了解计算机网络、硬件及常用软件的相关知识;熟悉数据库的基础知识;
3.具备较强的沟通、合作能力;有强烈的责任心,工作踏实认真、积极主动;善于思考,学习能力强,能够快速掌握专业知识;
4.熟练操作oracle或者Mysql者优先。
5.熟悉一门开发语言者优先,如java等。
大数据运维工程师的岗位职责 篇14
职责:
1、负责公司服务器、办公电脑、核心路由器、交换机、防火墙的运维、调优、监控、故障排查和日常问题的处理;
2、负责公司网络相关的项目建设和实施等工作,以及后期项目维护等工作;
3、监控各环境的服务器及所有服务,做好基础监控;服务器、网络设备的管理,以及平台的监控和维护。
任职要求:
1、大专及以上学历,具有2年以上网络系统运行维护经验,精通以太网路由与交换,熟练掌握网络设备的安装、调试及网络运行环境的配置;熟悉网络安全设备的使用;
2、熟悉主流各型号路由器、交换机的选型、配置与部署,CCNP以上或同等水平;
3、熟悉Linux服务器的管理和维护;
4、具备信息安全经验的优先考虑;
5、吃苦耐劳、责任心强、具备良好的服务意识及抗压能力;
6、有通信、IT行业从业经验者优先考虑。
大数据运维工程师的岗位职责 篇15
职责
1.负责项目上业务系统、服务的优化及监控,提升业务连续性及可用性;
2.开发自动化运维平台、提高运维效率,规范操作流程、减少重复性工作;
3.负责相关系统环境搭建、数据备份、日志分析、系统监控、性能优化、故障排查等;
4.参与内部应用系统架构设计及可用性建设,负责新技术探索、研究和方案落地;
5.不断开发或者引入新的工具以及提高效率的方法,来提升系统稳定性和生产效率;
6.制定相关策略、标准流程及规范,完成运维工作文档的编写。
任职要求
1.精通Linux操作系统、体系结构,熟练掌握PythonShellgoruby等一至两种语言;
2.熟悉业界主流技术,如LVS、Nginx、Tomcat、Mysql、Postgresql、Redis、ELK等;
3.熟悉Zabbix、Nigos等监控工具;熟练Saltstack、Ansible等自动化运维工具;
4.有CMDB、运维工单系统、监控系统等相关的设计和开发工作经验者优先;
5.有较强的学习能力,能够熟练阅读涉及产品和技术的英文文档; 6.能够承受较高的工作压力,有强烈的工作责任心;
7.有较好的沟通能力;有良好的团队合作精神。
大数据运维工程师的岗位职责 篇16
1.负责协同MES系统的上线实施及上线后的运维、优化工作,确保产线的正常运行;
2.负责协同ERP系统的上线实施及上线后的运维工作;
3.负责公司日常桌面支持(包括常规办公设备及网络故障排除)。
4.负责相关工作文档资料整理、修订及领导安排的其他相关工作。
大数据运维工程师的岗位职责 篇17
职责:
1、负责公司线上WEB的日常管理、信息维护、运维优化等工作;
2、对应用系统的检测数据以及故障日志进行分析、协助研发进行相关问题查找;
3、负责自动化运维的项目推进及技术创新;
4、负责平台服务器的系统运维工作,版本更新、系统监控、系统升级、系统安全、性能优化、数据备份等;
5、分析排除系统、数据库、网络、应用等故障响应;
6、负责整理编辑运维相关技术文档;
岗位要求:
1、3-5年运维工作经验、有集群式WEB运维经验优先,;
2、精通Linux系列操作系统;
3、熟悉网络游戏运维流程,具备IDC管理经验及服务器大批量运程维护管理经验;
4、熟练使用shell/python等脚本编程语言,熟悉自动化运维工具(如saltstack、Ansible等);
5、有较强的沟通协调能力,工作认真细致,有强烈的负责心,良好的团队合作精神,积极主动的工作态度,能独立解决线上问题。
大数据运维工程师的岗位职责 篇18
1. 负责MES系统调研、分析、整理、提炼用户的产品需求,完成需求分析和设计
2. 负责整体MES系统的开发工作,交付客户高质量的开发成果;
3. 负责MES系统的日常运维管理、用户技术支持、功能变更需求、系统调优等,保障所负责系统的平稳、高效运行
4. 负责为客户提供相关的技术培训。
5. 根据现有业务流程推动MES系统的功能应用和验证,提出解决方案并协助业务部门予以解决业务问题。
大数据运维工程师的岗位职责 篇19
职责:
1、协助实施运维部经理组织实施运维技术团队的管理、部门工作分配;
2、组织实施运维部人员履行项目内容,完整把控整个项目及实施各阶段,并调动组员积极能动性,对其工作进行监督检查;
3、做好与公司其它部门的协调工作;
4、组织安排部门工作所需的技能培训,提高团队的知识水平。
任职要求:
1、大学本科及以上学历;
2、高度的责任感和事业心,服从公司领导,坚决贯彻执行上级领导指示;
3、具有计算机SM系统运维技术经验,具有运维团队的管理经验;
4、有坚实的专业技术功底,具备解决技术难题的能力;
5、具备优秀的团队组织、协调沟通和综合管理能力;
6、具备良好的语言沟通、文字表达和独立处理问题能力;
7、具备良好的抗压能力;
大数据运维工程师的岗位职责 篇20
职责:
1.负责公司局域网的建立及维护(各点的局域网的浏览权限及保证网络的正常使用)以及网络评估及费用管理;
2.负责公司计算机硬件系统的管理;
3.负责公司服务器的操作及管理;
4.负责公司ERP系统的管理;
5.负责公司通讯设备的维护与管理。
岗位要求:
1.计算机相关专业,20-26岁;
2.1年以上相关工作经验,熟悉日常工厂/公司软硬件故障排除;
3.熟悉桌面运维管理,熟练掌握交换机、路由器、防火墙等设备设置;
4.熟悉和了解ERP的维护与用户管理等。
大数据运维工程师的岗位职责 篇21
职责:
1、负责应用的测试、运行保障,版本发布、变更、监控、测试环境维护;
2、负责业务系统故障处理、定位并解决网络、硬件、操作系统及应用程序的各种异常;
3、负责应用系统的性能分析与系统优化,不断提高系统运行效率;
4、负责镜像仓库和版本发布的管理工作,制定镜像、产品的发布和部署相关流程;
5、负责开发运维系统的自动化和标准化工作;
6、响应和支撑开发部门进行服务器/虚拟机的设置和管理。
任职要求:
1、精通操作系统管理(Centos/redhat/winserver);
2、熟悉shell、python;
3、熟悉常用的开源监控工具,如zabbix、cacti、nagios等;
4、熟悉lvs、haproxy等负载均衡技术;
5、熟悉如下应用的安装、配置、性能调优、备份/恢复:nginx、apache、oracle、mysql、neo4j、redis、tomcat;
6、熟悉常规的虚拟化技术,如xen、kvm、lxc、vmware、vSphere。
大数据运维工程师的岗位职责 篇22
职责:
1. 负责公司核心集群的运维工作, 任务调度、监控预警,持续完善大数据平台,保证稳定性、安全性;
2. 负责集群容量规划、扩容及集群性能优化;
3. 基于大数据应用需求,持续优化Hadoop框架及组件的配置,提升性能;
任职资格:
1.大专以上计算机,通信和网络相关专业;
2.3年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验;
3.对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验;
4.有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验;
5.实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作;
6.熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作;
7.能维护Hadoop源码,有Hadoop 源代码BUG修复或者源代码优化经验者优先;
8.有Cloudera的CM使用经验尤佳。
大数据运维工程师的岗位职责 篇23
职责:
1、配合公司对相关设备定期做巡检工作;
2、负责对电脑的日常维护;
3、负责对应用服务器的日常运行与维护;
4、负责对客服软件及操作系统的日常检查和维护,及时解决发现问题;
5、周期做数据备份,测试数据备份的正确性和完整性,以增强服务器的安全性。
任职资格:
1、专科或以上学历,
2、较强的语言沟通能力和文档编写能力;
3、能够使用SQL语言实现数据库操作优先考虑;
大数据运维工程师的岗位职责 篇24
职责:
1、参与测试网络的规划、建设、实施和维护;
2、参与公有云生产环境规范编写、制定及建设运维工作;
3、参与数据中心日常网络变更需求的评审;
4、参与网络运维自动化体系建设,致力于实现网络运维标准化、工具化、自动化;
5、参与下一代新数据中心的设计和建设;
6、其他运维性事务的工作
任职要求:
1、计算机网络及相关专业本科以上毕业;
2、熟悉主流交换机、路由器、防火墙、负载均衡等网络设备。有2年以上网络维护相关工作经验,掌握多种网络环境搭建,具备较强的技术基础;
3、熟悉思科、华为等主流网络产品的规划,安装,设置和维护,有CCIE/CCNP及同等证书优先;有较强的沟通协调能力及高度责任心。
4、熟悉思科、华为SDN的配置和管理的优先考虑;
5、熟悉vmware、kvm、openstack、docker、kubernetes的优先考虑;
6、熟悉公有云优先;
大数据运维工程师的岗位职责 篇25
职责:
1. 负责公司核心集群的运维工作,保证其高可用和稳定性。
2. 负责集群容量规划、扩容及集群性能优化。
3. 深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的Hadoop运维技术及发展方向。
4. 设计实现分布式集群的运维、监控和管理平台。
职位要求:
1.2年以上中等规模集群环境下的Hadoop/Impala/Hive/Spark集群相关运维经验。
2.对各种HDFS/Yarn/Hive/Impala/Spark/Hbase等相关参数调优, 性能优化等有实际经验。
3.有实际踩坑经历, 对于相关组件的版本跟进, 补丁跟踪, bug追踪等有相关经验。
4.实际处理过各种集群在线版本升级, 数据迁移, 集群扩容, 稳定性监控等工作。
4.熟悉Kerberos安全认证系统,实施过集群权限管理, 资源隔离方面的方案规划或二次开发工作。
5.有Cloudera的CM使用经验尤佳。
大数据运维工程师的岗位职责 篇26
职责:
1、负责公司服务器日常的维护,包括巡检、故障排除、数据备份等业务,保证服务器高质量、高效率运行状态;
2、负责公司大数据产品的现场实施,制定可靠的实施方案;
3、负责公司大数据环境(hadoop生态)集群环境安装、维护、部署、优化;
【任职资格】
1、至少2年服务器、大数据集群运维经验;
2、精通linux运维命令,熟悉Linux的维护和管理,熟悉Shell脚本开发,能看懂Python/Scala优先;
3、熟悉大数据项目实施:包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大数据生态的平台搭建,监控,运维,调优、生产环境;
4、熟悉docker技术优先;
5、熟练使用git版本控制,jenkins持续集成工具优先;
6、具备强烈的进取心、自我学习能力,良好的沟通能力和团队合作意识。
大数据运维工程师的岗位职责 篇27
职责:
1. 负责公司各生产服务器维护、软件更新布署。
2. 钻研、探索运维技术,将运维工作智能化、自动化,提高可靠性
3. 规划管理公司服务器、网络架构,提高服务质量
4.及时监控、处理服务器软硬件故障,保证各个部门工作流程不被中断
任职要求:
1. 计算机相关专业本科以上学历
2. 良好的沟通能力及团队合作精神
3. 熟练使用Python/shell或其它语言,熟悉运维工具与脚本开发
4. 扎实的网络基础知识,了解网络结构,有基本的配置、故障解决能力
5. 熟练使用MySQL数据库、SQL语句
6. 熟悉Windows、Linux服务器的基本操作、维护
7. 熟悉计算机基础硬件,有及基本的故障解决能力
8. 自我驱动,较强的学习和问题解决能力
大数据运维工程师的岗位职责 篇28
职责:
1.负责大数据管理平台产品的运维支撑工作,包括项目实施(安装、调优、培训)、项目联调以及其他日常维护等;
2.负责大数据管理平台产品的自动化运维相关脚本的开发、维护等;
3.参与大数据管理平台其他相关工作;
4.领导交付的其他事宜任职要求
任职要求:
1.熟悉Linux(redhat/centos)软硬件环境、系统管理和优化,熟练部署、优化各种常用服务,熟练使用Linux 命令;
2.具备一定的故障排查能力,能够独立排查及解决操作系统层的各类问题,有良好的技术敏感度和风险识别能力,熟悉一门以上脚本语言(Shell/Python等);
3.熟悉Hadoop大数据生态圈,包括但不限于Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;
4.熟悉Hadoop各组件的原理和实现,有实际部署维护、管理( 包括元数据管理)及优化经验,并拥有持续调优能力,运维管理过大规模数据平台经验者优先考虑;
5.熟悉掌握常用的安全协议和组件服务,对hadoop各组件的权限、安全、kerberos进行配置管理。熟悉SSL、ACL、kerberos等在大数据环境场景的使用;
6.大型节假日需低频次维护各项目,可以调休;
7.具备良好的服务意识,善于主动思考,自我驱动力强。有良好的沟通、协调能力,富有团队精神,有较强的文档编写能力;
8.本科或硕士毕业于211、985等国内知名高校者优先(注意,仅是加分项,不是必须);
9.有实际工作经验者优先;