職位描述
崗位職責:
1、負責大數(shù)據(jù)基礎平臺、大數(shù)據(jù)能力開放平臺的搭建與優(yōu)化;
2、負責基于大數(shù)據(jù)平臺(Hadoop)的數(shù)據(jù)倉庫工具Hive/Spark/HBase, ETL調(diào)度工具,數(shù)據(jù)同步工具的開發(fā)、使用、集成和自動化運維,以及多租戶與權限控制策略的實現(xiàn);
3、研發(fā)基于大數(shù)據(jù)平臺的數(shù)據(jù)倉庫平臺產(chǎn)品;
4、參與大數(shù)據(jù)平臺的容量規(guī)劃、持續(xù)交付、業(yè)務監(jiān)控、應急響應,保證平臺正常運行;
5、利用大數(shù)據(jù)相關技術實現(xiàn)對數(shù)據(jù)的加工、分析、挖掘、處理、及數(shù)據(jù)可視化等相關工作;
6、 推動團隊內(nèi)成員技術經(jīng)驗分享,關注相關前沿技術研究,通過新技術服務團隊和業(yè)務。
崗位要求:
1、大學本科以上學歷、計算機相關專業(yè),3年及以上大數(shù)據(jù)開發(fā)經(jīng)驗;
2、熟悉HDFS/HBasefka/Hive/MapReduce/spark/flink等,有豐富的分布式編程經(jīng)驗;
3、熟悉Spark Streaming和Spark SQL;
4、熟悉Core Java,熟悉Java IO, NIO, 多線程編程, 熟悉JVM運行機制和內(nèi)存管理,網(wǎng)絡協(xié)議;
5、熟練掌握Linux操作系統(tǒng),熟悉shell等腳本編程;
6、有在Spark相關項目中應用Java或Python語言的經(jīng)驗者優(yōu)先;
7、有過海量數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗者優(yōu)先;
8、有良好的語言溝通能力,能夠協(xié)調(diào)團隊成員及相關部門開展分工及合作;
9、能夠短期出差。
企業(yè)介紹
甘肅萬維信息技術有限責任公司(以下簡稱甘肅萬維公司)成立于1998年10月,注冊資金5000萬元,是中國電信全資子公司,從事ICT(信息通信技術) 的高新技術企業(yè)。公司位于蘭州高新技術產(chǎn)業(yè)開發(fā)園區(qū),辦公占地13000多平方米,擁有高新技術人才600多名。
公司主要從事應用軟件開發(fā)、系統(tǒng)集成、IT服務外包、互聯(lián)網(wǎng)運營四大業(yè)務領域,是甘肅省首家通過CMMI(軟件能力成熟度模型)3級評估、ISO20000質(zhì)量體系認證、ISO9000質(zhì)量體系認證三項國際標準的企業(yè),同時擁有國家計算機信息系統(tǒng)集成一級、涉及國家秘密的計算機信息系統(tǒng)集成乙級等眾多資質(zhì)證書,是甘肅省企業(yè)技術中心、高新技術企業(yè)、中國軟件產(chǎn)業(yè)基地骨干企業(yè)。
公司深刻貫徹 “追求企業(yè)價值與客戶價值共同成長”的市場經(jīng)營理念,憑借著良好的社會信譽,過硬的技術能力,優(yōu)質(zhì)高效的服務保障,在省內(nèi)外主導實施了眾多具有代表性和影響力的綜合信息化建設項目,得到了社會各界的廣泛認可和高度贊譽,目前公司業(yè)務已涉足國內(nèi)二十余個省份,實現(xiàn)了良好的市場開拓局面。
從企業(yè)創(chuàng)建始伊,公司便注重人才梯隊建設和技術團隊培養(yǎng),積極學習并引入國內(nèi)外高新技術,學習國際標準和規(guī)范,不斷完善和優(yōu)化自身技術管理體系的建設,目前已自主研發(fā)了一大批擁有自主知識產(chǎn)權的信息化應用軟件產(chǎn)品及行業(yè)解決方案,其中有多項軟件產(chǎn)品列入國家火炬計劃和國家重點新產(chǎn)品計劃,并在國內(nèi)多個省份得到廣泛應用。
甘肅萬維公司將一如既往的秉承以人為本,以雄厚科技實力為依托,以建設成為“技術一流、服務一流、管理一流、效益一流”為企業(yè)目標,為推進國民經(jīng)濟發(fā)展和社會信息化建設而不懈努力。