職位描述
崗位職責(zé):
1、負責(zé)大數(shù)據(jù)基礎(chǔ)平臺、大數(shù)據(jù)能力開放平臺的搭建與優(yōu)化;
2、負責(zé)基于大數(shù)據(jù)平臺(Hadoop)的數(shù)據(jù)倉庫工具Hive/Spark/HBase, ETL調(diào)度工具,數(shù)據(jù)同步工具的開發(fā)、使用、集成和自動化運維,以及多租戶與權(quán)限控制策略的實現(xiàn);
3、研發(fā)基于大數(shù)據(jù)平臺的數(shù)據(jù)倉庫平臺產(chǎn)品;
4、參與大數(shù)據(jù)平臺的容量規(guī)劃、持續(xù)交付、業(yè)務(wù)監(jiān)控、應(yīng)急響應(yīng),保證平臺正常運行;
5、利用大數(shù)據(jù)相關(guān)技術(shù)實現(xiàn)對數(shù)據(jù)的加工、分析、挖掘、處理、及數(shù)據(jù)可視化等相關(guān)工作;
6、 推動團隊內(nèi)成員技術(shù)經(jīng)驗分享,關(guān)注相關(guān)前沿技術(shù)研究,通過新技術(shù)服務(wù)團隊和業(yè)務(wù)。
崗位要求:
1、大學(xué)本科以上學(xué)歷、計算機相關(guān)專業(yè),3年及以上大數(shù)據(jù)開發(fā)經(jīng)驗;
2、熟悉HDFS/HBasefka/Hive/MapReduce/spark/flink等,有豐富的分布式編程經(jīng)驗;
3、熟悉Spark Streaming和Spark SQL;
4、熟悉Core Java,熟悉Java IO, NIO, 多線程編程, 熟悉JVM運行機制和內(nèi)存管理,網(wǎng)絡(luò)協(xié)議;
5、熟練掌握Linux操作系統(tǒng),熟悉shell等腳本編程;
6、有在Spark相關(guān)項目中應(yīng)用Java或Python語言的經(jīng)驗者優(yōu)先;
7、有過海量數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗者優(yōu)先;
8、有良好的語言溝通能力,能夠協(xié)調(diào)團隊成員及相關(guān)部門開展分工及合作;
9、能夠短期出差。
企業(yè)介紹
甘肅萬維信息技術(shù)有限責(zé)任公司(以下簡稱甘肅萬維公司)成立于1998年10月,注冊資金5000萬元,是中國電信全資子公司,從事ICT(信息通信技術(shù)) 的高新技術(shù)企業(yè)。公司位于蘭州高新技術(shù)產(chǎn)業(yè)開發(fā)園區(qū),辦公占地13000多平方米,擁有高新技術(shù)人才600多名。
公司主要從事應(yīng)用軟件開發(fā)、系統(tǒng)集成、IT服務(wù)外包、互聯(lián)網(wǎng)運營四大業(yè)務(wù)領(lǐng)域,是甘肅省首家通過CMMI(軟件能力成熟度模型)3級評估、ISO20000質(zhì)量體系認證、ISO9000質(zhì)量體系認證三項國際標(biāo)準的企業(yè),同時擁有國家計算機信息系統(tǒng)集成一級、涉及國家秘密的計算機信息系統(tǒng)集成乙級等眾多資質(zhì)證書,是甘肅省企業(yè)技術(shù)中心、高新技術(shù)企業(yè)、中國軟件產(chǎn)業(yè)基地骨干企業(yè)。
公司深刻貫徹 “追求企業(yè)價值與客戶價值共同成長”的市場經(jīng)營理念,憑借著良好的社會信譽,過硬的技術(shù)能力,優(yōu)質(zhì)高效的服務(wù)保障,在省內(nèi)外主導(dǎo)實施了眾多具有代表性和影響力的綜合信息化建設(shè)項目,得到了社會各界的廣泛認可和高度贊譽,目前公司業(yè)務(wù)已涉足國內(nèi)二十余個省份,實現(xiàn)了良好的市場開拓局面。
從企業(yè)創(chuàng)建始伊,公司便注重人才梯隊建設(shè)和技術(shù)團隊培養(yǎng),積極學(xué)習(xí)并引入國內(nèi)外高新技術(shù),學(xué)習(xí)國際標(biāo)準和規(guī)范,不斷完善和優(yōu)化自身技術(shù)管理體系的建設(shè),目前已自主研發(fā)了一大批擁有自主知識產(chǎn)權(quán)的信息化應(yīng)用軟件產(chǎn)品及行業(yè)解決方案,其中有多項軟件產(chǎn)品列入國家火炬計劃和國家重點新產(chǎn)品計劃,并在國內(nèi)多個省份得到廣泛應(yīng)用。
甘肅萬維公司將一如既往的秉承以人為本,以雄厚科技實力為依托,以建設(shè)成為“技術(shù)一流、服務(wù)一流、管理一流、效益一流”為企業(yè)目標(biāo),為推進國民經(jīng)濟發(fā)展和社會信息化建設(shè)而不懈努力。