最新大數(shù)據(jù)工程師的崗位職責(zé)大數(shù)據(jù)工程師職責(zé)(21篇)(存儲(chǔ)版)
【正文】 平臺(tái)及應(yīng)用產(chǎn)品的需求和技術(shù)方案設(shè)計(jì)。精通java開發(fā)，熟悉jvm調(diào)優(yōu)， 對(duì)gc有深刻理解。熟悉elasticsearch、redis、hbased等相關(guān)數(shù)據(jù)庫(kù)的構(gòu)建和操作，尤其是數(shù)據(jù)庫(kù)集群的構(gòu)建和操作，熟悉neo4j者尚佳。，熟悉數(shù)據(jù)倉(cāng)庫(kù)模型設(shè)計(jì)與etl開發(fā)經(jīng)驗(yàn) ，掌握kimball的維度建模設(shè)計(jì)方法，具備海量數(shù)據(jù)加工處理(etl)相關(guān)經(jīng)驗(yàn) 。，參與企業(yè)數(shù)據(jù)管理體系建設(shè)。任職要求計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷，5年以上開發(fā)經(jīng)驗(yàn)，其中3年以上為互聯(lián)網(wǎng)、大數(shù)據(jù)相關(guān)的開發(fā)經(jīng)驗(yàn)。熟悉hadoop生態(tài)圈技術(shù)體系， 對(duì)離線計(jì)算、內(nèi)存計(jì)算和流式計(jì)算均有深刻理解， 如hadoop、storm、spark三個(gè)中的任意二個(gè)， 能進(jìn)行平臺(tái)和組件優(yōu)化。有數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)相關(guān)應(yīng)用或研究背景。負(fù)責(zé)大數(shù)據(jù)產(chǎn)品核心組件設(shè)計(jì)。精通oracle、dbmysql等主流關(guān)系型數(shù)據(jù)庫(kù)，熟悉數(shù)據(jù)倉(cāng)庫(kù)建設(shè)思路和數(shù)據(jù)分層架構(gòu)思想。依據(jù)行業(yè)數(shù)據(jù)現(xiàn)狀和客戶需求，完成行業(yè)大數(shù)據(jù)的特定技術(shù)方案設(shè)計(jì)與撰寫。負(fù)責(zé)對(duì)使用關(guān)鍵技術(shù)的預(yù)研和選型，完成poc。熟悉hadoop相關(guān)技術(shù)，對(duì)hdfs、mapreduce、hive、hbase有一定的使用和開發(fā)經(jīng)驗(yàn)。熟悉常用機(jī)器學(xué)習(xí)算法(如分類、回歸、聚類、關(guān)聯(lián)規(guī)則等)及其原理，具備應(yīng)用場(chǎng)景經(jīng)驗(yàn)，如用戶畫像、商品關(guān)聯(lián)度分析、輿情分析。研究大數(shù)據(jù)領(lǐng)域前沿?cái)?shù)據(jù)挖掘技術(shù)，并引入相應(yīng)技術(shù)在數(shù)據(jù)中心的使用。5)負(fù)責(zé)大數(shù)據(jù)流式框架的設(shè)計(jì)、優(yōu)化及部署。熟悉oracle、mongodb、mysql數(shù)據(jù)庫(kù)的使用。負(fù)責(zé)解決核心技術(shù)問題，對(duì)技術(shù)方案進(jìn)行決策。大數(shù)據(jù)工程師的崗位職責(zé) 大數(shù)據(jù)工程師職責(zé)篇一，結(jié)合公司實(shí)際業(yè)務(wù)情況進(jìn)行技術(shù)選型及大數(shù)據(jù)戰(zhàn)略規(guī)劃。包括但不僅僅限于：hadoop、storm、spark、等。任職要求：精通goldengate for bigdata相關(guān)理論，具備大型數(shù)據(jù)利用的生產(chǎn)實(shí)戰(zhàn)經(jīng)驗(yàn)。良好的邏輯分析能力和溝通能力，執(zhí)行力強(qiáng)、對(duì)待工作認(rèn)真嚴(yán)謹(jǐn)、責(zé)任心強(qiáng)、具備出色的學(xué)習(xí)能力和團(tuán)隊(duì)合作精神，有一定的推動(dòng)能力。3)3年以上產(chǎn)品架構(gòu)經(jīng)驗(yàn)，主導(dǎo)過產(chǎn)品的成功上線。開展數(shù)據(jù)爬取、聚類分析、輿情分析、魚骨圖分析、定價(jià)策略等領(lǐng)域數(shù)據(jù)挖掘
公司管理相關(guān)推薦
鄂ICP備17016276號(hào)-1