1、大數(shù)據(jù)運維工程師的職責精選大數(shù)據(jù)運維工程師負責大數(shù)據(jù)平臺的穩(wěn)定性和性能優(yōu)化。下面是小編為您精心整理的大數(shù)據(jù)運維工程師的職責精選。大數(shù)據(jù)運維工程師的職責精選1職責：1、負責大數(shù)據(jù)平臺Hawq數(shù)據(jù)庫運維 ;2、負責大數(shù)據(jù)平臺Tbase 數(shù)據(jù)庫運維 ;3、負責傳統(tǒng)數(shù)據(jù)(Oracle 、 MySQL等數(shù)據(jù)庫 ) 數(shù)據(jù)遷移、數(shù)據(jù)同步 ;4、負責日常數(shù)據(jù)庫的監(jiān)控及問題分析排查;5、負責 OGG、 Kafafa 等組件數(shù)據(jù)傳輸同步日常運維;6、負責數(shù)據(jù)庫的優(yōu)化、SQL語句的優(yōu)化調優(yōu);7、負責數(shù)據(jù)同步的檢驗與異常處理，確保數(shù)據(jù)的一致性、完整性、及時性;8、負責制定數(shù)據(jù)同步方案及實施。任職要求：1、大專或以上學

2、歷，計算機或統(tǒng)計類相關專業(yè)2、有 3 年以上技術類或數(shù)據(jù)類的開發(fā)經(jīng)驗;3、熟練 linux系統(tǒng)操作及l(fā)inux運維監(jiān)控、軟件安裝配置 ;4、熟悉大數(shù)據(jù)技術， 如 Hadoop、Spark 、storm 、zookeeper等;5、熟悉主流數(shù)據(jù)庫mysql/sqlserverl/oracle/postgreSQL等，精通 SQL語句，對復雜 SQL能進行優(yōu)化，能熟練編寫存儲過程;6、熟練 Linux SHELL ，可以進行運維SHELL開發(fā) ;7、學習能力強，責任心強，具有優(yōu)秀的溝通表達、理解能力與團隊合作能力;8、有 CentOS 7、Red Hat 7 等 Linux 操作系統(tǒng)， 有 She

3、ll腳本編寫經(jīng)驗的優(yōu)先。9、有3年以上的基于 MPP(greenplum ,HAWQ,Vertica,GBASE 等 MPP DB)數(shù)據(jù)倉庫的實際運維經(jīng)驗或 3 年以上 HIVE 、SPARK 實際項目運維經(jīng)驗10、在實際項目中，有異構數(shù)據(jù)庫遷移經(jīng)驗，從傳統(tǒng)ORACLE,MYSQL遷移至 MPP數(shù)據(jù)倉庫的實戰(zhàn)經(jīng)驗.大數(shù)據(jù)運維工程師的職責精選2職責 :1. 負責公司核心集群的運維工作, 任務調度、監(jiān)控預警，持續(xù)完善大數(shù)據(jù)平臺，保證穩(wěn)定性、安全性;2. 負責集群容量規(guī)劃、擴容及集群性能優(yōu)化;3. 基于大數(shù)據(jù)應用需求，持續(xù)優(yōu)化 Hadoop 框架及組件的配置，提升性能 ;任職資格：1. 大專以上計算

4、機，通信和網(wǎng)絡相關專業(yè);2.3年以上中等規(guī)模集群環(huán)境下的Hadoop/Impala/Hive/Spark集群相關運維經(jīng)驗;3. 對各種HDFS/Yarn/Hive/Impala/Spark/Hbase等相關參數(shù)調優(yōu),性能優(yōu)化等有實際經(jīng)驗;4. 有實際踩坑經(jīng)歷 , 對于相關組件的版本跟進 , 補丁跟蹤 , bug 追蹤等有相關經(jīng)驗 ;5. 實際處理過各種集群在線版本升級 , 數(shù)據(jù)遷移 , 集群擴容 , 穩(wěn)定性監(jiān)控等工作 ;6. 熟悉 Kerberos安全認證系統(tǒng)，實施過集群權限管理,資源隔離方面的方案規(guī)劃或二次開發(fā)工作;7. 能維護 Hadoop 源碼，有 Hadoop 源代碼 BUG修復或者源

5、代碼優(yōu)化經(jīng)驗者優(yōu)先 ;8. 有 Cloudera 的 CM使用經(jīng)驗尤佳。大數(shù)據(jù)運維工程師的職責精選 3職責：1 負責政務云平臺、政務應用系統(tǒng)中數(shù)據(jù)庫業(yè)務的日常運維，保障平臺及應用系統(tǒng)服務7*24 穩(wěn)定可靠高效運行2 負責數(shù)據(jù)庫性能調優(yōu)，了解鎖與隔離機制，協(xié)助客戶解決數(shù)據(jù)庫性能瓶頸3 制定數(shù)據(jù)庫使用規(guī)范，制定數(shù)據(jù)庫備份、升級、遷移規(guī)劃并部署實施4 參與數(shù)據(jù)庫設計工作，提高數(shù)據(jù)庫維護自動化水平5 熟悉 Linux操作系統(tǒng)，熟練使用Python ， Go，Shell等至少一種語言崗位要求：1) 5年以上 Oracle/MySQL DBA從業(yè)經(jīng)驗 ;2) 熟練掌握 Oracle/MySQL 數(shù)據(jù)庫的基

6、礎理論知識、運行機制、 體系架構、 高可用方案、 備份機制、 容災機制等 ;3) 熟練掌握數(shù)據(jù)庫性能優(yōu)化，了解主流的分布式數(shù)據(jù)庫 Spanner/Cassandra;4) 熟悉 Linux/Unix操作系統(tǒng)，對服務器硬件有一定了解 ;5) 熟練掌握 golang 、Python 、Java 等語言中的一種 ;6) 熟悉阿里云產(chǎn)品線，具備 ACP認證者優(yōu)先考慮 ;大數(shù)據(jù)運維工程師的職責精選4職責：- 負責局點大數(shù)據(jù)平臺的部署、 管理、優(yōu)化、監(jiān)控報警，保障平臺服務7*24 穩(wěn)定可靠高效運行;- 深入理解公司大數(shù)據(jù)平臺架構，發(fā)現(xiàn)并解決性能瓶頸，支撐業(yè)務和數(shù)據(jù)量的快速增長;- 開發(fā)大數(shù)據(jù)自動化運維、監(jiān)

7、控報警、故障處理相關腳本和工具 ;- 負責 Hadoop/spark/Kafka 等集群服務、業(yè)務監(jiān)控、持續(xù)交付、應急響應、容量規(guī)劃等。要求：- 4 年以上運維相關工作經(jīng)驗，有大數(shù)據(jù)平臺運維相關工作經(jīng)驗優(yōu)先 ;- 具備一定的故障排查能力，有良好的技術敏感度和風險識別能力， 精通一門以上腳本語言 (shell/python 等 ) ，熟悉 Http/Https 、 TCP/IP 、 SMTP等協(xié)議 ;-熟悉 Linux(redhat/centos)軟硬件環(huán)境、 系統(tǒng)管理和優(yōu)化，熟練部署、優(yōu)化各種常用服務。熟練使用Linux命令和常用的 ssh 、 ftp 、git 、 maven等開發(fā)工具 ;-

8、 熟 悉 Hadoop 大 數(shù) 據(jù) 生 態(tài) 圈 ， 包 括 但 不 限 于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flink/Impala/Elasticsearch/kibana/MySQL/Kubernetes等 ;- 熟悉 Hadoop 各組件的原理和實現(xiàn)，有實際部署維護、管理 ( 包括元數(shù)據(jù)管理 ) 及優(yōu)化經(jīng)驗。并擁有持續(xù)調優(yōu)能力，運維管理過大規(guī)模數(shù)據(jù)平臺 ;-熟悉掌握常用的安全協(xié)議和組件服務，對hadoop 各組件的權限、 安全、kerberos 進行配置管理。 熟悉 SSL、ACL、 kerberos 等在大數(shù)據(jù)環(huán)境場景的使用

9、;- 熟悉常用運維監(jiān)控工具(nagios/ganglia/zabbix/grafan/openfalcon等 ) 和相關插件的開發(fā)。比如郵件、短信、微信報警插件等;-熟悉常用 nginx/haproxy/varnish/netscaler等代理工具的使用和優(yōu)化;- 具備良好的服務意識， 善于主動思考， 自我驅動力強。有良好的溝通、協(xié)調能力，富有團隊精神，有較強的文檔編寫能力 ;- 有大數(shù)據(jù)開發(fā)經(jīng)驗和閱讀源碼能力者優(yōu)先大數(shù)據(jù)運維工程師的職責精選 5職責：1、負責銀行各類應用系統(tǒng)的運維標準制定和運維管理等工作 ;2、負責銀行各類應用系統(tǒng)的運行情況及相關技術的整理、分析和總結等工作;3、負責銀行各類應用系統(tǒng)的應用監(jiān)控、應用運維體系工具的建設和維護工作;4、負責銀行各類應用系統(tǒng)的自動化腳本編寫和測試工作。招聘要求：1、全日制一本以及以上學歷，理工類專業(yè);2、具備 2 年及以上應用系統(tǒng)運維或應用系統(tǒng)開發(fā)經(jīng)驗，有銀行應用系統(tǒng)運維或開發(fā)經(jīng)驗者優(yōu)先;3、具備較強的文檔編寫、英語文檔閱讀能力;4、具備良好的溝通表達能力和團隊合作精神，具有較強的工作責任心和主動性;5、至少具備以下二項技能：(1) 熟悉銀行應用系統(tǒng)體系架構、應用運維標準化流程;(2) 熟悉 AIX 、LInux 操作系統(tǒng)相關運維工作，具備熟練的 SH