什么是大数据开发工程师?与一般Java开发有什么
栏目:w66利来手机登录 发布时间:2019-08-10 13:12

原标题:什么是大数据开发工程师?与一般Java开发有什么区别?

最近发现有些同学并不太了解大数据开发工程师这个职位,所以想简略介绍一下什么是大数据开发工程师,当时互联网公司的数据开发究竟是什么姿态的?和一般的Java或许PHP工程师在作业上有什么区别?

什么不是大数据开发?

仅运用数据库(联系型mysql,sqlserver,oracle等 非联系型 mongo redis等),虽然数据量到达千万等级,亿等级不是大数据开发。 从事务体系的数据库中查询数据然后产出报表不是大数据开。 端上(页面,h5,手机native)埋点上报数据记录到数据库中不是大数据开发。

什么是大数据开发

1. 大数据开发需求的技能

到智联上搜了一下大数据开发工程师这个职位,随意点了几个职位,截图如下:

所以说,现在互联网公司所指的大数据开发用到的东西是:hadoop,hive,hbase,spark,kafka等。

2. 大数据开发做的作业

精简到一个词语便是:核算 精简到两类目标便是:PV和UV 精简到一句话便是:核算各种目标的PV和UV

PC互联网年代,各门户网站(比方:新浪,网易,搜狐)重视的是各自网站今日被翻开了几回(pv),今日有多少人(uv)访问了网站。更杂乱一点的比方:

翻开全文
页面上某个按钮或许某个衔接有多少人点击了几回 某个页面上的热力求(点击当地越多,图上色彩越重)

移动互联网年代,手机运用被用户翻开的次数和人数也是我们重视的要点,可是除此之外还多出了许多其他十分重要的数据,由于手机屏幕的约束,信息流成为了移动年代的干流。

各大门户网站十分重视自己的新闻客户端中:在信息流中曝光了多少篇文章,其中有多少篇文章被用户点击了。每篇文章阅览了长期,由于用户点击的文章越多,运用客户端的时刻越长,各公司的广告收入才越高,所以各公司想方设法引荐用户喜爱的内容。

3. 怎么做这些作业

服务热线