d. 熟习linux,熟习LINUX常用命令,至少熟习python,php,shell等一种脚本言语。
e. 了解HADOOP,HIVE有运用这两个平台,或有在下面开发过相关运用。
f. 熟习DataStage、Informatica、微软DTS、OWB、Kettle中的一种或多种ETL工具,可以纯熟的停止理想表、维度表、汇总表的ETL开发。
g. 具有良好的沟通才能,做事仔细、细心,有责任心,具有团队协作才能。
优先思索:
a. 有分布式存储/实时计算开发阅历优先
b. 熟习PostgreSQL、Greenplum优先
c. 熟习Hadoop、Spark技术优先
d. 有海量数据处理阅历者优先
02. 数据仓库工程师(参考贝贝网招聘信息)
岗位职责:
a. 基于大型分布式平台的数据仓库模型设计及完成。
b. ETL开发、优化、技术攻关,BI报表定制开发数据支持。
c. 协助建立数据模型,对数据停止发掘、优化及统计。
d. 担任企业级数据仓库架构设计、建模以及ETL开发,构建可扩展的数据仓库处理方案。
e. 担任公司日常运营报表开发维护,和业务及分析部门沟通协作,提供多层面数据服务。
f. 提供完善的数据保障体系,包括元数据管理、数据质量、数据安全等。
岗位要求:
a. 两年以上数据仓库实施阅历,ETL实施阅历,认可数据产生价值。
b. 了解数据库原理,纯熟Mysql,了解Hadoop,Hive,Spark。
c. 熟习Linux 操作系统,纯熟掌握 Shell、Python。
d. 具有较强的业务了解才能和项目管理、推进力。
e. 熟习数据标准管理、元数据管理、数据质量管理,对全体数据有综合的把控才能。
f. 计算机或相关专业本科及以上学历 。
g. 具有丰富的数据开发阅历,对数据处理、数据建模、数据分析等有深入看法和实战阅历。
h. 熟习SQL,有一定的SQL功能优化阅历。
i. 纯熟掌握Java言语,MapReduce编程,脚本言语Shell/Python/Perl之一。
j. 业务了解力强,对数据、新技术敏感,对云计算、大数据技术充满热情。
k. 积极悲观、诚信、有责任心;具有激烈的进取心、求知欲及团队合作肉体。
优先思索:
暂无
03. 大数据工程师(参考京东招聘信息)
岗位职责:
a. 担任大数据处理中的各个环节,参与需求分析、架构设计、技术决策以及详细设计。
b. 为现有大数据Hadoop、hive平台提供功能调优、架构优化重组,处理系统中的关键成绩和技术难题。
c. 把握基础业务复杂系统的设计,确保系统的架构质量,编写核心部分代码。
d. 持续应战新的技术方向,攻克大数据量,高并发,高波动性,易用性等各种技术难点。
岗位要求:
a. 本科或以上,计算机软件或相关专业毕业。
b. 扎实的编程才能,熟习算法和数据结构,熟习计算机的基础实际。
c. 熟习大数据处理相关技术,包括但不限于 Hadoop、Hive 、Hbase、Impala、Spark 、Kafaka、Flume、Sqoop 、Storm、Redis等。
优先思索:
熟习引荐系统和数据发掘算法者优先。
04. Hadoop开发工程师(参考京东金融招聘信息)
岗位职责:
a. 担任Hadoop系统的资源管理和日常维护。
b. 担任Hive/HBase/Spark/Impala等组件的优化和二次开发。
岗位要求:
a. 熟习Hadoop、Hbase、Hive,5年以上Hadoop开发阅历。
b. 了解MapReduce计算框架的思想,熟习分布式计算模型或有高效索引 技术阅历者优先。
c. 知晓JAVA言语,熟习J2EE相关技术。
d. 至少纯熟运用Shell、Python、Perl等脚本言语之一。
e. 热爱技术,工作仔细、严谨,有团队肉体。
优先思索:
a. 熟习主流数据发掘算法开发。
b. 有github开源项目优先。
c. 有技术博客优先。
05. Java大数据工程师(参考喜马拉雅招聘信息)
岗位职责:
a. 担任公司大数据相关系统和平台的设计和开发
b. 担任公司数据业务开发,包括分析、统计、引荐等系统
c. 研讨Hadoop/Spark/Hbase/Storm/ES等开源项目,停止系统优化和二次开发
岗位要求:
a. 扎实的计算机系统和算法基础知识;良好的英文阅读才能。
b. 扎实的Java言语基础,对JVM运转机制有深化了解。
c. 丰富的Java开发阅历,对大数据范畴和框架感兴味,并有所了解。
d. 对Scala言语有所了解,情愿深化学习。
e. 对常见开源框架代码有研讨。
f. 熟习SQL和noSQL的设计和开发。
g. 熟习企业运用设计形式、面向对象的分析和设计技术,包括设计形式、UML建模等。
h. 擅长思索,能独立分析和处理成绩,热衷于互联网技术的研讨和创新。
i. 责任心强,具有良好的团队合作肉体。
优先思索:
暂无
06. Spark开发工程师(参考网易招聘信息)
岗位职责:
a. 担任网易大数据平台的Spark、Spark Streaming技术研发、功能优化、成绩诊断
b. 担任网易云托管Hadoop产品(EMR)研发
岗位要求:
a. 两年以上大数据平台设计和开发阅历,具有优秀的编程才能和良好的开发习气。
b. 具有独立架构设计、内核开发、测试与运维的才能,有过大规模系统设计和工程完成的阅历。
c. 熟习Spark、Spark SQL和Spark Streaming内核原理;了解Hadoop生态组件相关技术,例如Hadoop、Hive、Storm等。
d. 知晓Java、Scala言语,熟习Linux 操作系统,纯熟运用Python、Shell脚本言语。
e. 具有仔细的技术态度,良好的团队沟通和协作才能。
优先思索:
有深化研讨过Hadoop/Spark源码者优先。
[attach]271159[/attach]
07. 大数据运维工程师(参考美图大数据事业部招聘信息)
岗位职责:
a. 担任公司大数据通用服务集群相关组件的支撑保障(包括如:Hadoop/Hbase/Hive/Yarn/Spark/Storm/Kafka/Elasticsearch等)
b. 担任集群容量规划、扩容及功能调理优化。
c. 参与业务架构设计,在设计阶段给出可运维性及可扩展性方面的改进建议。
d. 深化研讨大数据业务相关运维技术,持续优化集群服务架构,调研集群资源调度技术及平台方向。
岗位要求:
a. 至少掌握java/python/shell中的一种言语。
b. 熟习Hadoop/Hbase/Hive/Storm/Spark/Kafka/Elasticsearch等开源组件项目优先。
c. 熟习Linux操作系统的配置、管理及优化,可以独立排查及处理操作系统层面的成绩。
d. 良好的客户服务看法,激烈的责任心和使命感,执行力强,富有团队合作肉体。
e. 对大数据方向运维有很高的热情和兴味,能自动学习了解相关知识。
优先思索:
掌握ansible、yarn及mesos运用的优先。
08. 数据可视化工程师(参考滴滴出行招聘信息)
岗位职责:
a. 担任滴滴第一大战略业务-智慧交通业务数据可视化的全体设计与完成,搭建一套业内顶尖的数据可视化平台(对标echars,datav,raydata) 。
b. 担任数据可视化组件开发及新型展现方式研发;支持智慧交通及数据平台的相关可视化展现。
c. 深化了解次要数据可视化展现方式,针对实践场景梳理数据信息,提出专业的数据可视化元素使意图见。
d. 技术应战大,海量交通数据的动态,多维展现,在功能和效果层面达到业内顶尖 。
岗位要求:
a. 对数据可视化有热情,了解业界发展现状和趋向,熟习相关工具和技术,对于数据可视化有一定个人见解。
b. 纯熟掌握各项Web前端技术 (HTML/CSS/Javascript) ,了解svg,canvas,webgl技术。
c. 在地图/gis相关数据可视化有过开发阅历。
d. 具有计算机图形学实际基础,熟习数据可视化相关基础算法。
e. 有过dashboard,大屏,数据展现各种开发阅历,熟习e-charts等工具。
优先思索:
暂无
09. 机器学习算法工程师
岗位职责:
a. 运用机器学习算法处理常见的业务成绩,运用的算法包括常用的图像处理、自然言语处理算法、机器学习引荐算法等。
b. 发掘各种来源的非结构化数据。
c. 决方案,评价并优化模型。
岗位要求:
a. 计算机、数学或相关专业本科以上学历。
b. 一年以上机器学习项目阅历,有深度学习项目阅历优先,擅长将业务成绩笼统为机器学习成绩。
c. 熟习常用的分类聚类算法,清楚了解算法原理并能做一定的改进。
d. 了解深度学习模型如CNN、RNN、GAN等。
e. 熟习常用参数调整策略。
f. 纯熟掌握Java/Python一种或多种。
优先思索:
a. 熟习常用的深度学习计算框架scikit-learn、对tensorflow熟习者优先。
b. 熟习大数据开发者优先。
10. 数据发掘工程师(参考小米招聘)
岗位职责:
a. 担任小米公司的数据搜集、数据发掘和数据产品的开发工作。
b. 建设小米的用户画像和用户标签体系。
c. 运用大数据技术赋能小米各业务线,包含新批发,广告,金融,AI手机等。
d. 从事大数据相关方向的前沿性研讨。
岗位要求:
a. 有扎实的编程才能和算法基础。
b. 掌握Java、Scala、Python等至少一门常用言语,熟习数据结构和算法。
c. 纯熟掌握概率统计,具有很强的数据分析才能与敏感度,能疾速从给定的数据中找出规律。
优先思索:
a. 熟习分布式/高功能计算系统,有hadoop、spark、mpi等开发阅历者优先。
b. 对行为预测、自然言语、用户画像、社交网络、时空大数据等范畴有深化实际者优先。
11. 大数据分析师(参考VIPKID招聘信息)
岗位职责:
a. 担任大数据相关产品的规划与设计,停止需求分析、数据打点、构成产品设计以及原型构建。
b. 根据新的业务需求,经过数据分析提出创新性的处理方案,并构成数据产品。
c. 对于产品改版迭代停止分析,基于数据为产品改进提供建议,与产品经理协作,对现有产品停止运用创新。
岗位要求:
a. 统计学、运用数学或计算机等相关专业本科及以上学历。
b. 有较丰富的BI数据产品实际阅历,包括需求调研分析、数据模型设计、内外部资源协调、产品运营管理等。
c. 熟习SQL,excel,纯熟运用SPSS/SAS/Python/中的一种或几种。 - d. 学习沟通才能强,能疾速熟习了解复杂业务,逻辑思想才能强,擅长经过数据发掘产品改进点。
e. 激烈责任心,开放的性情,悲观的心态。
优先思索:
了解Hadoop,HDFS,Hive等分布式大数据技术,能与技术人员良好沟通的优先思索。
12. 大数据架构师(参考映客直播招聘信息)
岗位职责:
a. 担任大数据项目全体架构规划,包括运用架构、技术架构、物理架构和数据架构等。
b. 担任指点工程师停止技术验证与完成,核心技术成绩的攻关,处理项目开发过程中的技术难题。
c. 担任项目对外技术沟通,具有较强的沟通,表达和文案才能。
d. 根据公司项目和业务发展特点,担任研讨相关大数据前沿技术。
e. 担任营建团队技术氛围,推进技术才能的沉淀。
岗位要求:
a. 计算机、信息系统、数学或相近专业本科以上学历,7年以上相关研发阅历阅历,5年以上大数据研发和架构阅历。
b. 知晓和片面掌握常用的软件设计方法、计算架构和处理方案,包括面向对象设计、SOA、J2EE、云计算等。
c. 拥有5年以上Hadoop开发设计和实施阅历,知晓Hadoop生态及高功能缓存相关的各种工具并有实战阅历,包括但不限于hadoop/hive/spark/impala/elasticsearch/druid/redis/hbase/kafka/flume等,可以纯熟安装、配置、部署和优化大型Hadoop集群系统。
d. 有超PB级别大数据处理实战阅历,熟习整个大数据的残缺处理流程,包括数据的采集、清洗、预处理、存储、分析发掘和数据可视化,以及架构设计、开发、部署、自动化运维等工作。
e. 有优秀的业务了解才能,能了解清楚业务并停止合理的模块和架构设计。
f. 不怕困难,有关键技术攻关的决计和才能,可以顺应和享用高强度高压力的工作。
优先思索:
有BAT工作阅历优先。
13. 大数据迷信家(参考好将来招聘信息)
岗位职责:
a. 担任相关大数据运用算法的设计、研发与产品化。包括但不限于数据选品算法、个性化引荐、文本发掘、图像分析等方向。
b. 独立担任算法类产品的商业需求发掘、技术预研、系统设计,以及推进业务方共同落地,并制定后续运营和优化计划 。
c. 跟踪最新最热的机器学习算法实际停顿(如deep learning),并且将优秀的算法运用到业务场景当中,提升业务效果。
岗位要求:
a. 计算机、统计、数学相关专业博士及以上学历,3年以上的互联网公司机器学习、文本发掘、图像辨认、搜索或广告算法研发阅历。
b. 知晓Java、C++、Python、R、Matlab等的一种或几种开发言语;知晓hadoop/hive/mahout/MPI/spark等一个或多个分布式计算框架/算法平台。
c. 聪明和自我学习。
d. 优秀的沟通和表达才能,清楚的表达个人想法、了解别人观点,具有团队合作看法和推进协作达成的才能。
优先思索:
对数据敏感,疾速的发现关键成绩,超强的业务建模才能,并且持续的迭代优化。
14. 大数据产品经理
岗位职责:
a. 担任数据产品规划,以产品的视角组织数据,给运营人员提供基于数据的业务指点。
b. 数据需求分析:搜集各个业务部门的数据需求,将需求汇总、整合、构成数据数据产品文档。
c. 参与外部数据平台建设:推进公司数据化运营的发展,提供数据数据化运营工具。
d. 为团队外部定期提供数据报告。
岗位要求:
a. 二年以上互联网产品阅历或数据产品阅历,熟习产品设计流程,纯熟运用Axure等产品原型设计工具。
b. 具有扎实的产品设计、文档策划功底和较丰富的项目管理阅历。
c. 对数据敏感,有数据分析系统设计、报表系统设计阅历者佳。
d. 熟习数据仓库、商业智能基本实际,有数据分析系统运用阅历佳(如GA)。
e. 激烈责任心,开放的性情,良好的沟通才能。
f. 擅于协作,具有良好的团队合作肉体。
优先思索:
暂无
15. 数据运营(参考拉钩招聘业务部招聘信息)
岗位职责:
a. 业务流程中关键节点的跟踪与反馈。
b. 对接业务模块Leader停止项目数据搜集及汇总。
c. 保证业务数据的准确性,并停止记录、清洗、汇总与呈现。
d. 其他业务体系内运营工作。
岗位要求:
a. 本科及以上,经管会计类专业优先。
b. 优秀的沟通才能和抗压才能,性情悲观皮实,不拘泥不固执。
优先思索:
暂无
16. BI工程师(参考每日优鲜招聘信息)
岗位职责:
a. 了解业务团队的业务数据需求,完成相关数据支持。
b. 完成各种面向业务目的的数据模型的定义和运用开发规范的制定,并保证数据质量。
c. 协调处理数据处理过程中出现的成绩。
岗位要求:
a. 本科以上学历,2年以上相关工作阅历。
b. 具有海量数据建模实际阅历,有BI架构体系建设阅历。
c. 纯熟运用sql语句,会写存储过程。
d. 最好有python、Hadoop、hive、ES等相关阅历。
e. 具有良好的沟通才能、自我学习才能、团队协作才能。
优先思索:
暂无
17. 商业分析师(参考猫眼电影招聘信息)
岗位职责:
a. 了解业务方向和战略,为管理层提供决策支持,竞争分析及建议。
b. 针对公司业务,经过深度分析停止数据价值发掘,提供业务策略支持。
c. 配合各业务部门项目,给予数据支持,从多种数据源组合数据停止深度诊断分析,完成业务专题分析,输入核心业务报告。