大数据工程师岗位职责职位要求

适配人群大数据工程师,数仓开发工程师,数据平台架构师使用场景数据仓库建设,实时计算平台,ETL流程开发
设立背景公司要搞大数据平台和数仓,得有人搭架子写代码
核心职能做平台架构设计、开发数据流程、管海量数据的采存管分建模
工作内容写hadoop/spark/mppdb代码、调优平台、解性能问题、做etl和监控
协作关系跟产品经理聊需求,跟开发同事联调,向技术组长汇报,配合测试和运维

职责描述:

华为企业bg-大数据工程师

1、基于hadoop/spark/mppdb的大数据、数仓平台架构设计及开发工作

2、数据处理流程设计及开发

3、海量数据的采集、存储、管理、分析、建模

4、负责大数据、数仓平台的监控及优化,针对持续增长的数据提供相应的解决方案

5、负责大数据、数仓项目的疑难问题解决,性能优化

专业知识要求:

1、有3年以上相关岗位工作经历,或者非金融业的数据服务或信息数据管理工作经验

2、数学、计算机技术等相关专业

3、精通大数据(mppdb、hadoop)等相关技术,并精通hbase/hive/mr/spark/solr/storm/flink其中的任意3个组件技术。

4、至少精通主流数据库技术oracle/postresql/mysql/sql server中的一种,精通数据仓库理论架构,包括但不限于数据调度、etl、元数据管理、数据监控;

5、精通1-2门开发语言(java/python/scala/shell)

6、具有比较突出的组织、策划、协调及沟通能力,有强烈的结果导向和客户导向。

岗位要求:

学历要求:本科

语言要求:不限

年龄要求:不限

工作年限:3-5年

大数据工程师岗位职责职位要求:贵金属大数据工程师

适配人群数据平台工程师,量化分析师,金融数据架构师使用场景贵金属交易,数据中台建设,实时风控
设立背景公司要搞贵金属数据分析,得搭个大数据平台才行。
核心职能搭大数据平台框架。理解贵金属业务规则。做数据清洗分析。把结果传给前端。
工作内容写spark streaming代码。用hbase存数据。配kafka传消息。写java后台接口。处理pb级文本数据。
协作关系跟前端工程师对接页面展示。向技术总监汇报进度。和业务部门聊贵金属规则。配合测试人员调bug。和运维一起部署平台。

大数据工程师 工作职责:

1.负责公司大数据平台框架的研发设计工作。

2.通过对贵金属业务规则的理解,完成对数据的分析和处理。

3.开发数据后台,将数据分析结果呈现到前端。

任职要求:

1.全日制本科以上学历,计算机,数学或统计相关专业。

2.有数据分析,数据处理等相关领域的工作经验。

3.有pb级别的文本数据的清洗和处理经验。

4.熟悉常用的大数据技术。如:spark streaming,hbase,kafka 等。

5.熟悉java开发语言。

大数据工程师岗位职责职位要求:微信安全大数据工程师职位描述与

适配人群算法工程师,数据科学家,NLP工程师使用场景内容安全审核,反欺诈风控,社交平台治理
设立背景微信安全风险越来越多,得有人专门搞数据建模来防黑产和恶意行为。
核心职能用数据挖特征、建模型、识异常。重点是把坏人从海量用户里揪出来。
工作内容跑数据清洗脚本、调参训练模型、写文本分类代码、搭数据仓库表、测策略效果。
协作关系跟安全策略组一起调规则,向安全技术负责人汇报,和大数据平台同事联调spark任务,偶尔帮内容审核组优化识别逻辑。

职位描述:

工作职责:

通过海量数据挖掘建立微信安全画像和数据仓库,协助在线策略进行安全控制

构建机器学习无监督或有监督算法模型,协助精准识别微信体系内各种恶意行为

建立大规模文本内容识别能力,包括但不限于文本分类,聚类等常见nlp任务模式

任职要求:

数学、统计、计算机、自然语言处理等相关专业硕士及以上学历;或者三年以上互联网数据分析和大数据开发相关工作经验;

熟悉经典的聚类、分类等机器学习和深度学习算法,有大规模机器学习系统开发经验优先;

熟练掌握c /java/scala/python等至少一门编程语言。

有主流大数据平台spark/hadoop/flink/storm等平台开发经验,熟悉分布式计算原理优先

大数据工程师岗位职责职位要求:java大数据工程师

适配人群数据挖掘工程师,算法开发工程师,智能诊断研究员使用场景智能网络诊断,大数据算法开发,数据建模验证
设立背景公司要搞网络业务智能诊断,得有人做数据挖掘和算法实现。
核心职能挖数据、写算法、做智能诊断模型。让机器能自动发现问题。
工作内容跑数据、调模型、写代码、验证结果、改bug、交诊断报告。
协作关系跟产品经理聊需求,和开发一起联调,向技术组长汇报,配合测试查问题,有时帮运营看数据。

职责描述:

岗位职责:

1、 负责大数据挖掘与数据算法实现;

2、 负责网络业务智能诊断课题任务。

岗位要求:

1、2年以上数据分析、数据挖掘及模型开发经验;

2、熟练掌握至少一门语言(java、python、r、scala)进行挖掘和分析;熟练掌握数据分析工具(sas、spss、r、python),对数据进行快速验证和分析;

3、熟悉常用的数据挖掘和机器学习算法(决策树、逻辑回归、svm、贝叶斯、神经网络等);有大数据并行处理分布式计算经验,熟悉hadoop/hive/storm/spark等;

4、熟悉数据可视化相关理论,有数学建模经验优先。

工作地点:福州

学历要求:本科及以上

语言要求:不限

年龄要求:不限

工作年限:经验1-3年

大数据工程师岗位职责职位要求:大数据处理工程师

适配人群数据处理工程师,大数据运维员,电信数据分析师使用场景电信项目,数据日报,平台监控
设立背景公司接了大数据项目,要有人盯着平台别出问题,还要天天出数据报告。
核心职能管好大数据平台,算数据、出日报、盯监控,不让项目卡壳。
工作内容看平台有没有报错,每天发日报,统计日报里的数,跑脚本算项目数据。
协作关系跟项目经理汇报,和开发一起调脚本,帮运营查数据,找dba修数据库问题。

岗位职责:

1、负责大数据平台的日常维护和监控

2、负责大数据项目日报发布工作

3、负责日报数据的统计

4、负责大数据项目日常数据的计算、分析和维护

任职要求:

1、一年以上相关工作经验,有电信行业经验者优先

2、熟悉linux和excel,熟练使用perl或者其他的脚本语言

3、 具有oracle dll/dml技术的使用经验

4、具有良好的团队合作精神,有较强的学习能力、适应能力、沟通能力

大数据工程师岗位职责职位要求:大数据开发工程师

适配人群风控建模师,数据科学家,算法工程师使用场景风险评估,成长评价,业务建模
设立背景公司要管住风险,得靠数据说话。业务增长快,模型得跟上节奏。没这个岗,风控就只能拍脑袋。
核心职能搞风险模型。从数据里挖线索。把想法变成能跑的模型。让模型真能用在业务里。
工作内容跑数据查质量。做特征工程。调参、测模型。上线后盯效果。改bug、加新功能。
协作关系和风控同事天天聊需求。听产品经理讲场景。向技术组长汇报进度。和数据平台同事一起调环境。

职责描述:

岗位职责:

1、运用大数据分析工具和技术解决风险管理业务中遇到的实际问题与需求,如风险评估、成长评价等,包括对模型进行设计、开发、验证、测试、部署及监控、优化。

2、基于海量用户数据和特征,进行数据质量检查、特征加工、数据清洗等,建立数据挖掘模型。

3、评估数据源的质量和价值,能结合业务需求和场景,从各种数据维度中挖掘数据价值,并设计不同的模型,应用于不同的业务场景中。

职位要求:

1. 计算机、统计学相关背景,熟悉常用各类机器学习算法的原理(如逻辑回归、决策树、svm、神经网络、随机森林、深度学习等);

2.熟练使用sas、r、python等至少一种分析工具;

3.熟悉大数据分析平台和工具,如hive,hadoop, spark等优先;

4.有较强的逻辑思维能力、优秀的沟通表达能力及团队合作能力。

岗位要求:

学历要求:本科

语言要求:不限

年龄要求:不限

工作年限:5-7年经验

大数据工程师岗位职责职位要求:大数据应用工程师-外销领域

适配人群外销管理者,经营分析师,营销数据岗使用场景外销管理,经营分析,报表编制
设立背景外销业务越来越复杂,需要有人专门搭分析架子,让数据能看清、能用上。
核心职能搭分析体系,做展示原型,写需求文档,推数据落地,给业务提建议。
工作内容梳指标、画pc/手机/大屏图、写方案、跟技术对接、测系统、训用户、回数据需求、挖分析主题、出分析报告。
协作关系常跟it同事聊系统,向销售管理部汇报,帮各外销部门查数、解问题、一起想优化点,和财务、运营偶尔碰需求。

职位描述:

职责描述:

1、根据业务需求,负责外销领域整个分析体系搭建,包括分析指标梳理,设计pc、移动、大屏的展示原型,按照项目方法编写需求及方案文档。

2、通过和技术人员沟通、协同,完成数据分析平台建设,负责系统测试、用户培训等,推动业务充分利用数据,驱动管理。

3、对各级外销部门进行数据需求支持,挖掘分析主题,开展数据分析工作;基于数据分析成果,为各级外销部门(集团/事业部)提供商业策略分析和业务优化建议,持续改进运营效果。

职位要求:

1. 全日制本科或以上学历;具有3年以上制造企业营销管理经验,熟悉集团化企业经营分析报表编制内容、流程和方法。

2. 具有企业外销管理实务经验,了解企业外销管理内容,能够通过数据发现业务问题和改善点。

3. 具有很好的沟通、表达能力,熟练运用excel、ppt 等基本工具。

4. 勤奋、好学,具有很好的团队合作意识,对数据分析职业有强烈兴趣。

5、懂oracle/sap等大型erp系统软件,有咨询公司工作经验者优先。

大数据工程师岗位职责职位要求:java大数据开发高级工程师

适配人群Java后端工程师,通信软件开发者,定制化交付工程师使用场景呼叫中心建设,客户系统集成,电信业务支撑
设立背景公司要自己做呼叫中心产品,得有人专门搞开发。
核心职能写代码做呼叫中心系统,改bug,按客户要求加功能。
工作内容敲代码、测功能、修线上问题、配实施同事查错、改客户定制需求。
协作关系跟实施同事一起盯问题,向技术组长汇报,和测试、产品、前端常碰头,有事群里喊一声。

职责描述:

岗位要求:

1、计算机或相关专业本科以上学历,3年以上专业java开发经验,有过大型项目经验优先;

2、精通 jdbc、jsp / ibatis /spring/ struts2等java主流技术;

3、熟悉web容器及主流开源框架,熟悉http的基本工作原理;

4、熟悉io、多线程、集合类等基础框架,熟悉缓存、消息、搜索等机制;

5、熟悉linux操作系统,熟悉mysql数据库;,精通sql语言;

6、有大型项目架构设计开发和数据库优化经验优先;

7、具有良好的团队协作精神,较强的沟通能力,具备良好的问题定位分析能力和新兴技术学习能力。

岗位职责:

1.负责研发公司自主呼叫中心产品;

2.协助实施部门定位跟踪产品问题;

3.客户化项目定制开发

岗位要求:

学历要求:大专

语言要求:不限

年龄要求:不限

工作年限:3-5年

大数据工程师岗位职责职位要求:大数据云计算工程师

适配人群Java开发工程师,云计算工程师,大数据开发工程师使用场景系统重构,性能调优,需求落地
设立背景公司要搞云计算和大数据项目,得有人搭平台、解难题。
核心职能设计优化系统平台,做需求分析和功能开发,写文档,支持用户。
工作内容画模块图、写代码、测功能、修bug、调性能、写需求文档、帮用户解决问题。
协作关系跟产品经理聊需求,和测试一起跑用例,向技术组长汇报,配合运维升级环境,帮业务同事提建议。

职责描述:

1、负责/参与应用系统平台设计、重构、优化,主导/参与技术难题攻关;

2、负责并参与系统需求分析、功能模块详细设计,完成系统业务功能实现、测试及维护工作;

3、负责编写相应的需求、设计与技术文档,向系统使用者提供技术支持服务;

4、参与线上系统环境的升级、运维监控、性能调优;

5、推动跟进业务线需求,为改善系统的功能积极提出建议。

任职要求:

1、3以上java语言开发经验,基础扎实, 熟练使用springmvc框架进行开发;

2、对多线程编程,线程安全等有较深理解. 能够熟练使用线程池等常用功能;

3、熟练使用jpa,hibernate,mybatis中的一种或多种持久层框架;

4、熟练使用sql的crud命令;

5、具有库表结构设计能力, 并且有一定的sql开发及优化能力。

大数据工程师岗位职责职位要求:华为大数据治理工程师

适配人群数据架构师,数据治理顾问,主数据管理员使用场景数据治理项目,金融数据管理,政务数据整合
设立背景公司要管好客户数据,得有人专门搞数据模型和标准,不然数据乱七八糟没法用。
核心职能搭数据模型、定数据标准、管元数据主数据、盯数据质量。活儿得自己干,别人插不上手。
工作内容画数据模型图、写数据标准文档、查数据质量问题、填元数据表、理主数据清单。
协作关系跟数据开发工程师一起改模型,向架构师汇报方案,配合项目经理推项目,找合作伙伴对技术细节。

职责描述:

1.参与客户大数据治理及管理工作,包括设计数据模型、定义数据标准、构建数据管理体系(元数据、主数据、数据质量等)等。

2.参与大型数据治理项目实施,对技术解决方案进行评估及审核,并给出符合数据架构规范的建议,与生态合作伙伴共同保证项目顺利落地。

任职资格:

1.具有数据模型分析设计、数据仓库建设和数据集成经验。

2.拥有大型客户数据治理或咨询经验。

3.熟悉主数据、元数据、数据质量等企业数据治理相关的体系和方法。

4.有金融、政府或公安行业项目经验优先。

岗位要求:

学历要求:本科

语言要求:不限

年龄要求:不限

工作年限:3-4年经验

大数据工程师岗位职责职位要求:大数据可视化工程师

适配人群数据可视化工程师,前端架构师,金融IT开发者使用场景金融分析,数据大屏,移动投研
设立背景金融数据越来越多,客户要看懂得快,得靠图和屏来展示。
核心职能把数据变成图、屏、移动端能看的东西。做前端也碰后台,搭架子写组件。
工作内容和数据同事一起想方案,做大屏,做分析产品,搞移动端可视化,写前端和后台代码。
协作关系天天跟大数据工程师、数据科学家打交道。向技术组长汇报。用会议 在线文档对齐需求,一起调接口改样式。

工作职责:

1、和大数据工程师、数据科学家共同工作,探索可视化在金融业务场景的技术方案和产品应用;

2、开发展示为主的数据大屏和业务分析为主的数据产品以及在移动端数据可视化项目;

3、负责数据产品/可视化大屏的前端架构和应用后台及通用组件的开发

任职要求:

1、本科及以上学历,功底扎实,视野开阔,对新技术具有敏感和热情;

2、工程能力强,熟悉axure rp等设计工具,有较复杂的 webapp 类型产品前端开发经验;

3、熟悉数据可视化开源方案,有数据分析场景/数据可视化经验者(echarts/highcharts/d3)优先;

4、技术跟随前沿,熟悉servlet,html5,javascript,json,了解node/angularjs/react;

5、熟悉web后台性能优化和前端展示技术;

5、熟悉1-2种分析型数据库(如db/hive/neo4j)者优先;

6、性格要求:性格开朗,勇于挑战;良好的人际关系,对技术追求工匠精神。

大数据工程师岗位职责职位要求:大数据售前工程师

适配人群大数据售前工程师,行业解决方案专家,金融IT顾问使用场景品牌口碑监测,竞品动态分析,行业解决方案设计
设立背景公司做舆情早报网,要帮客户听网上声音,得有人懂数据又懂行业。
核心职能帮汽车、金融客户搞清楚网上怎么说他们,出方案,盯落地。
工作内容采互联网数据,看品牌口碑,挖客户想要啥,写方案,陪交付。
协作关系跟销售一起见客户,和产品、技术同事对方案,向售前主管汇报,常线上聊。

岗位职责:

1、 海量采集互联网数据为基础,为金融、汽车等行业提供互联网品牌聆听,帮助企业及时掌握网络口碑和竞争动态;

2、 负责汽车、金融行业的客户,主要是售前工作,包括挖掘客户需求、设计解决方案,知道实施交付等工作。

任职要求:

1、3年以上大数据领域售前工作经验;

2、熟悉大数据行业,了解舆情、金融、政务、安全等行业业务场景;

3、要求大数据行业经验。

大数据工程师岗位职责职位要求:大数据安全研发工程师职位描述与

适配人群安全架构师,数据平台工程师,安全研发专家使用场景安全运营,攻防演练,等保合规
设立背景公司要建安全感知系统,得有人从头搭技术方案和写核心代码。
核心职能把安全业务需求变成可运行的系统功能,带团队做开发和培养新人。
工作内容设计系统方案、拆解需求、写核心代码、帮审计和运营分析数据、组织技术分享。
协作关系跟审计员、运营员一起看数据,向技术主管汇报,和产品团队天天对齐进度,还要带组里同事一起干活。

职位描述:

工作职责:

岗位职责:

1、负责信息安全中心态势感知系统的技术方案设计、需求把控、核心功能开发,将业务需求拆解细化并实施;

2、协助审计人员、运营人员完成安全数据分析相关工作;

3、驱动团队与产品团队密切合作;

4、构建团队并培养团队成员,组织技术,促进团队成员进步。

岗位要求:

1、全日制统招本科及以上学历;5年以上互联网研发工作经验;

2、具有扎实的计算机科学功底,扎实的编程基础和数据结构算法基础,极强的编程能力和问题解决能力;

3、深入理解面向服务的架构、熟悉javaweb应用框架和工具链、熟悉linux/mysql/nosql等;

4、熟悉java及面向对象设计开发、设计模式,面对复杂系统、复杂问题有化繁为简的能力;

5、熟悉数据分析建模技术,熟悉常用数据算法和建模;

6、对互联网安全技术具备一定的认知,了解常见攻击与防护技术;

7、善于交流,有良好的团队合作精神和协调沟通能力,有与产品、前端、移动端等多方密切配合的经验和意识;

8、有过安全态势感知平台、安全大数据处理平台相关研发经验者优先;

9、具备hadoop、storm、hive、elasticsearch等大数据研发经验者优先;

10、参与过同类型业务核心系统建设或高并发系统经验者优先;

11、有“代码洁癖”、有极客精神者优先。

大数据工程师岗位职责职位要求:大数据隐私安全计算工程师职位描述与

适配人群数据安全工程师,隐私计算研究员,联邦学习架构师,大数据安全专家,可信AI解决方案师使用场景数据安全治理,隐私计算应用,企业级数据共享,大数据合规流通,可信AI落地
设立背景公司要推大数据安全产品,得有人懂技术又会落地
核心职能做数据安全方案,搞联邦学习和可信计算,让数据能安全流动
工作内容写方案文档、配数据分类分级、调差分隐私参数、测同态加密效果、跑spark安全任务
协作关系跟产品经理对需求,向技术总监汇报,和研发联调接口,帮销售写投标材料,配合法务过合规条款

职位描述:

工作职责:

- 面向公司内部及企业级市场,提供可信大数据分析计算、联邦机器学习等领域的产品化解决方案

- 提供数据安全流通领域的全套解决方案,包含但不限于数据分类分级、数据使用规范、数据脱敏方法、数据安全生命周期、隐私数据加密、隐私数据管理等;

职责要求:

- 计算机相关专业,扎实的数据安全计算领域知识,熟悉相关基础知识,包括应用密码学、安全协议和加密算法;精通隔离域、可信计算(包括差分隐私、同态加密等)前沿大数据安全技术,主导过大型项目,具有安全生产实践经验。

- 至少5年以上大数据编程经验;熟悉大数据编程技术hadoop/hive/spark/yarn等,掌握机器学习算法的应用和调优(lr/svm/gbdt等等),熟悉其优缺点;

- 具有良好的学习能力和自我驱动力,具备良好的英文阅读与交流能力,保持跟进机器学习领域最新研究方向和成果以及对于大数据应用在安全领域的探索。

- 熟悉国内外安全行业发展现状,了解企业级数据安全的最佳实践。

大数据工程师岗位职责职位要求:大数据开发工程师(数据分析、信息安全、前端开发、数据对接)职位描述与

适配人群数据工程师,前端开发员,安全架构师使用场景数据清洗,算法优化,安全测试
设立背景公司要做车联网数据处理和安全防护,得有人专门搞这些事。
核心职能把杂乱数据理清楚、做出图表、保证车机系统不被黑、连通各个系统。
工作内容清洗数据、分词、画图、写代码、测漏洞、接api、整理采集需求。
协作关系跟产品经理聊需求,和后端工程师一起调接口,向技术主管汇报,帮测试同事查问题,配合车企提方案。

职位描述:

数据分析工程师:

岗位职责:

1、负责结构化数据和文本的数据处理、建模、分析等工作,如:数据清洗、中文分词、情感分析、文本分类等;

2、负责数据需求的收集、整理和分析,配合其他同事完成结构化数据和文本的需求分析;

3、负责分析结果的可视化展现;

4、负责核心算法的设计与优化。

任职要求:

1、全日制本科毕业;

2、计算机或数学或软件类或统计相关专业;

3、熟悉数据挖掘和文本挖掘的理论基础,掌握统计模型、机器学习相关原理;

4、熟悉r/python/java等编程语言,熟悉常用数据结构和算法,熟悉正则表达式的使用。

web前端开发工程师:

1、负责前端框架设计及组件库开发、前端开发工作统筹;

2、与后端工程师紧密配合,高效率、高质量地完成页面展现研发工作;

3、负责对产品页面性能的优化和维护;

4、负责数据可视化图表显示。

1、本科及以上学历,专业不限。3年以上前端开发经验;

2、精通html5/css3、xhtml/xml,熟悉页面架构和布局,对表现与数据分离、web语义化等有深刻理解;

3、在多浏览器兼容性问题及css/javascript性能优化方面有一定的经验;

4、熟练掌握至少一种前端框架及工具、库。如jquery、angular、webpack;

5、有echars、highcahrts、d3js等数据可视化框架开发经验优先。

信息安全架构工程师:

1、 规划车联网安全架构,不断完善车联网产品的安全规范和要求,跟进、解决存在的安全隐患;

2、 对上线前的软件或者车上产品进行安全方面验证及测试;

3、 跟进最新漏洞的研究工作,理解漏洞的原理,编制漏洞研究报告和防范措施;

4、 负责行业/国家车联网汽车网络安全部分的技术及标准规范的研究工作。

1、本科以上学历,信息安全,计算机,通信等相关专业;

2、 拥有网络安全专业技能,熟悉车载网络架构,模块及协议;

3、 熟悉常见网络/车辆安全漏洞,掌握漏洞原理以及解决方案具备独立开展渗透工作的能力;

4、 熟悉常见黑客攻击手法,具备对黑客行为的入侵检测能力;

5、 精通安全测试框架,理解网络,应用,数据等不同层面的安全。

数据对接工程师:

1、负责内部系统的对接工作;

2、第三方平台的数据对接及程序维护;

3、负责各车型的数据采集要求整理及规划;

4、熟悉数据结构和常用算法,有良好的代码规范,能对接入数据/系统提出优化方案。

1、 本科以上学历,信息化项目,计算机,无线传输等相关专业;

2、拥有信息化相关技能,熟悉系统间的交互对接流程;

3、熟悉数据库的管理及查询、同步工作;

4、熟悉信息对接的方式,能用api、视图等进行对接工作。

大数据工程师岗位职责职位要求(优选15篇)

大数据工程师岗位职责职位要求适配人群大数据工程师,数仓开发工程师,数据平台架构师使用场景数据仓库建设,实时计算平台,ETL流程开发设立背景公司要搞大数据平台和数仓,得有人搭
推荐度:
点击下载文档文档为doc格式