登录 | 地图 欢迎访问【UZ导航】
当前位置:网站首页 > 推荐 > 正文

淘宝网易云背后的智能推荐机制,都是数据科学的魔力

admin 2019-10-13 64 浏览 0 评论

你有没有过这样的体验:

在淘宝上买了一幅装饰壁画,第二天你再打开淘宝,发现推荐商品里面全是家装类的商品;

或者在网易云上面听了一首民谣,第二天网易云又给你推了好几首相同类型的歌;

是巧合,还是淘宝、网易云在窥探你的生活?它们又是怎么做到的?

这就要问问这些软件背后的数据工程师们了。

1.jpg

1

数据科学是什么?

数据科学(Data Science)是一个应运而生的新学科。

由于互联网的普及,网络用户每天使用网络能够产生非常庞大的数据量,网站的每一次点击、刷新、停留时间,都会被存储下来记录在案,

一家公司如果想要从这么庞大的数据流中找出他们的潜在客户以及顾客的消费趋势等信息,就要通过数据科学来进行分析。

比如说,美国20世纪90年代中期最大的零售商Target,在2008年的金融危机后完全输给了竞争对手沃尔玛,但是在2013年,该公司引入了一支优秀的数据分析团队。

他们通过预测客户的行为模式向顾客家里邮寄相关产品的广告,这样就会比一股脑地把所有产品的广告都塞给顾客要更精准,也能带来更大的购买量。

于是奇迹发生了,该公司2013年第三季度的销售额比去年增长了5%以上,而在8月份,线上收入的增长率高达41%——这是该公司有史以来的最高增幅。

再比如说,Facebook的数据分析团队会通过大数据来精准地判断你的喜好,并通过你的喜好预测出一系列你的个人属性数据,譬如对生活的满意度、智力、情绪稳定性、性取向等等。

同样拥有发达的推荐引擎的是今日头条,他们的推荐功能可以依据用户的喜好为其推荐个性化的信息,因此能够在信息过剩、碎片化的时代抓取用户的眼球。

甚至,Google每天会从全球各地收到超过2800份简历,无法光靠HR一双肉眼去把每一份简历都看过来,于是数据科学又起了作用,它可以通过关键词的筛选从几千份简历中把某个岗位最适合的候选人挑出来,大大减少了工作量。数据使用的多样化促使越来越多的行业和企业开始重视数据科学,于是一门新的学科诞生了,“数据分析师”也在最短的时间内成为了“二十一世纪最热门的职业”。

2.jpg

2

数据科学学什么?

目前数据科学还属于新兴的专业,并不是所有的大学都会开设这一专业

根据Data Science Community的统计数据,美国共有611所大学开设数据科学相关专业,

但在这些大学中数据科学只作为计算机科学或商科的辅修专业,而不是一个独立的学位,并且还有很多学校的数据科学专业是用线上教学的方式开设的。

根据Data Science 的统计数据,美国现有50余所学校开设单独的数据科学(Data Science)专业,

今年5月,美国数据科学人才测评专业机构Correlation One公布了数据科学专业的世界大学排名,本科与硕士前10名的学校如下图所示:

这些学校尽管都开设数据科学专业,但课程设置却不尽相同,有些学校更偏向于统计学而有些学校更偏向于计算机科学,

比如,斯坦福大学数据科学专业的核心课程则是离散数学、概率分析、统计推断导论和数据挖掘;

卡内基-梅隆大学的数据科学专业核心课程是机器工程学、云计算和计算机编程等。

3

还有什么专业可以胜任数据科学家?

其实看到上文大家应该就明白了,数据科学(DA)是一门交叉学科,它与计算机科学(CS)和统计学(Statistics)是分不开的。

因此在就业的时候,也并不是只有数据科学专业毕业才可以做数据科学方向的专业。

在美国招聘平台Indeed上搜索数据科学家(Data Scientist)这个岗位,可以看到很少有公司要求求职者的学历必须是数据科学专业,

原因之一就是上文中提到的,目前正经开设数据科学专业的学校数量并不多,原因之二是因为许多其他专业毕业的人才也可以胜任这个职位。

那么数据科学方向的岗位更偏好什么专业呢?这要先从数据科学方向到底包括哪些岗位开始说。

1point3acres(留学求职论坛)博主Warald将数据科学方向的工作大致分为以下三类:

  • 机器学习工程师(Machine Learning Engineer)

  • 数据分析师(Data Analyst)

  • 数据科学家(Data Scientist)

这三种职位的工作内容和难度各不相同。

举个简单的例子,在Indeed上分别搜索数据科学家、机器工程师和数据分析师三个职位,任职要求中所列出的技能是有很大区别的。

对于数据分析师,用人单位一般只会要求一些基础技能,对学历的要求也不高,而数据科学家和机器工程师则各自需要掌握不同方向的专业技能。

数据分析师比较偏向基础工作,类似于数据的提取和简单分析,撰写数据报告等,在分析层面上也没有太高的要求,统计学专业或者学过统计学的其他专业就可以胜任;

机器学习工程师则偏向于技术岗,他们比数据分析师工作的含金量要再上一个层次,可能需要用到专业的建模软件,或者编写一些程序进行数据的清洗、归纳和分析,而根据具体职位要求的不同,机器学习工程师这个岗位更多招聘计算机专业、人工智能专业的毕业生;

数据科学家则是最高难度的岗位,数据分析一定是用来支撑商务决策的,而不同的数据应该如何支撑决策?比如零售业需要用数据来预测购买趋势和客户需求,从而对产品的定价做出调整;而像ebay、淘宝、Amazon这种平台则需要根据数据来调整推荐顺序,这就需要数据科学家不仅需要熟悉各种复杂的分析软件,还需要清楚地知道你所分析的数据是用来做什么的。

因此数据科学家对于应聘者的学历背景要求就更为严格,不光要有编程的知识、统计学的知识,而且还要有商科的思维。

但是,对这个职位心仪的人也不用因此望而却步,不用觉得:那我岂不是要本科学计算机、硕士读商科、博士学统计学才能当数据科学家?

数据科学家需要有这几个方面的知识,但不用太深,譬如编程,数据科学家一定不需要像软件工程师那样,写出能经得起测试的代码;也不用比市场部总监还了解市场,而是只需要有一个全局观,能够利用数据优化产品,为公司带来利润就够了。

3.jpg

4

数据科学家挣多少?

根据美国咨询公司麦肯锡发布的报告,数据分析师的人才缺口会在2018年前达到140000-190000,今天,在LinkedIn上搜索“数据分析师”这个岗位,会跳出38,601条结果。

这个行业对于人才有着庞大的需求量,不光是IT行业需要大数据,像是零售业、金融保险业和传统行业也早已开始使用数据分析——正如前文所言,我们生活在一个数据的时代,数据分析的兴起只能是大势所趋。

既然人才缺口大,企业想必就要通过提高报酬的方式吸引人才,那么,数据科学方向的工作能挣多少?

工作类型

正如上文所说,数据科学方向的工作分为三大工种,既然他们所做的工作如此不一样、门槛如此不一样,那么薪资也是必定有差距的。

根据美国薪酬调查机构Payscale的数据:

数据分析师的平均薪资为$59,504;

5.jpg

工作地点

虽然几乎所有行业都需要数据科学类人才,但是就像软件工程师一样,大型互联网公司是数据科学类职位的招聘主力,对比其他行业,IT行业的起薪也会更高。

因此互联网公司聚集的加州或高科技产业区西雅图,一定会比其他地区的起薪要高,而根据各地的消费水平不同,起薪也会有差距。

根据Indeed在全国范围内的调查结果,数据科学家这一职位在加州的平均年薪为$144,330,比这一职位的平均年薪高出17%;

4.jpg

5

小结

数据科学之所以能够成为专业和就业的大热门,是因为这个工作有无限的“可能性”。

它比软件开发这种技术类的工作更需要大局观,更需要对产品和市场的把握。

他们能够发现问题在哪,能够知道从何处下手去解决,并且还能自己制造工具去解决这个问题。

因此,数据科学类职业的前景比任何其他职业都要好,一个优秀的数据科学家,完全可以进入高级管理层,甚至走得更远。


相关推荐

暴风影音的官网、App都挂了
暴风影音的官网、App都挂了

在暴风影音成功上市,市值高达400亿之时,其创始人冯鑫恐怕怎么都没有想过,自己只能在狱中眼睁睁看着暴风影音在市场中消失,做一个无能为力“光杆司令”。官网、App...

5小时前 admin

拼多多宣布开启“黑五”海淘盛宴
拼多多宣布开启“黑五”海淘盛宴

“双11”之后,又一重磅大促“黑五”即将来袭。11月22日,新电商平台拼多多宣布,旗下“全球购”业务已在美国、英国、德国、日本四地设立“全球购海外站”,将通过全...

6小时前 admin

微信发布 7.0.9 内测版,了解一下!
微信发布 7.0.9 内测版,了解一下!

近期,微信发布7.0.9内测版,根据更新文件所述,此次更新主要修复了一些已知问题。那么这次的内测版都有哪些变化呢?下面我们就来一起了解下!在微信7.0.8...

6小时前 admin

百度小程序:只需两招,帮你短期快速提升小程序关注量
  • 百度小程序:只需两招,帮你短期快速提升小程序关注量
  • 百度小程序:只需两招,帮你短期快速提升小程序关注量
  • 百度小程序:只需两招,帮你短期快速提升小程序关注量
  • 百度小程序:只需两招,帮你短期快速提升小程序关注量
百世快递正式上线小米快递平台
百世快递正式上线小米快递平台

据小米快递官方消息,今日百世快递正式上线小米快递平台,可享受1000元免费保价服务。据了解,小米快递是即点即用的快递服务平台,可以在这里下单寄送,会智能匹配最优...

7小时前 admin

360周鸿祎:很多时候,成功都是被逼出来的
360周鸿祎:很多时候,成功都是被逼出来的

360集团创始人兼CEO周鸿祎(长江商学院CEO8期校友),他的成长几乎伴随了整个中国互联网的成长,这二十年当中,有太多惊心动魄的时刻让人难忘。今天分享的这篇文...

7小时前 admin

谷歌正式推出云游戏服务Stadia
谷歌正式推出云游戏服务Stadia

根据谷歌官方消息,Stadia在硬件上提供着英特尔至强系列CPU、基于AMDVega的GPU、16GB的共享HBM2内存和固态硬盘,理论浮点运算能力达到10....

15小时前 admin

知乎启动“知乎百科”,个人机构皆可参与
知乎启动“知乎百科”,个人机构皆可参与

 最近、知乎对外宣布正式启动“知乎百科”公共编辑计划,无论是个人用户还是机构用户,都可以参与,推出了一条跟百度百科、维基百科都不相同的百科玩法。“知乎...

1天前 admin

搜狗浏览器访问百度被提示禁止访问
搜狗浏览器访问百度被提示禁止访问

11月21日消息有大量网友称,用搜狗浏览器访问百度网站时提示被禁止访问。截止发稿时,IT之家通过搜狗浏览器访问百度页面进行实测时,搜索页面显示“您要访问的网站...

1天前 admin

车载微信很快发布!你准备好了吗?
车载微信很快发布!你准备好了吗?

科技先生11月21日讯,世界5G大会今日正式开幕,在5G与数字经济新动能高峰论坛上,腾讯副总裁马斌发表演讲。马斌认为,中国未来的机会是从人口红利转向数据红利。4...

1天前 admin

今日头条SEO1.0,头条站长 上线啦
今日头条SEO1.0,头条站长 上线啦

1提交站点验证:跟百度类似,为了省事,我就用官方的截图了a、下载验证文件b、添加到进行验证的网站域名(如:www.toutiao.com)根目录下。c、验证...

2天前 admin

中国联通:新增3182.6万4G用户!
中国联通:新增3182.6万4G用户!

今日有媒体爆料,中国联通公告称,2019年1至10月,公司移动出账用户累计净增708.3万户,达到3.22亿户;其中4G用户累计净增3182.6万户,达到2.5...

2天前 admin

刘强东喊出的京东下一个二十年战略图谱曝光
  • 刘强东喊出的京东下一个二十年战略图谱曝光
  • 刘强东喊出的京东下一个二十年战略图谱曝光
  • 刘强东喊出的京东下一个二十年战略图谱曝光
  • 刘强东喊出的京东下一个二十年战略图谱曝光
王思聪被取消限制消费令
王思聪被取消限制消费令

11月20日晚间,经查询中国执行信息公开网发现,王思聪已经不在限制消费人员名单之列。此前的10月12日,上海市嘉定区人民法院发布了案件号为(2019)沪0114...

2天前 admin

国内如何访问国外谷歌网站
  • 国内如何访问国外谷歌网站
  • 国内如何访问国外谷歌网站
  • 国内如何访问国外谷歌网站
  • 国内如何访问国外谷歌网站
高通预测2021年全球5G手机出货量将达4.5亿部
高通预测2021年全球5G手机出货量将达4.5亿部

北京时间11月20日早间消息,高通公司周二表示,预计全球智能手机制造商2021年的5G手机出货量将达4.5亿部,2022年出货量则将进一步增长至7.5亿部。  ...

3天前 admin

警察偷拍同事获刑入狱6年!
警察偷拍同事获刑入狱6年!

警察偷拍同事获刑怎么回事?据俄罗斯卫星网18日报道,据《纽约邮报》报道,美国加州长滩警察局一名警察因偷拍同事使用洗手间等私密视频而被判入狱6年。据报道,这名警察...

3天前 admin

乐视总部大楼被中止拍卖 曾经千亿市值今付不起612万
乐视总部大楼被中止拍卖 曾经千亿市值今付不起612万

原标题:贾跃亭的烦恼:曾经千亿市值的乐视被612万元难倒如今总部大楼还被中止拍卖  来源:每日经济新闻  每经记者陈梦妤   ...

3天前 admin

金立新增被执行超1.8亿 新品能否自救?
金立新增被执行超1.8亿 新品能否自救?

新京报讯(记者陈维城)记者11月19日获悉,天眼查工商信息显示,11月18日,深圳市金立通信设备有限公司新增两条被执行人信息,累计执行标的超1.8亿元。  深...

3天前 admin

全球最环保的搜索引擎:每搜索45次就种一棵树
全球最环保的搜索引擎:每搜索45次就种一棵树

  新浪科技讯北京时间11月19日晚间消息,据国外媒体报道,德国搜索引擎Ecosia被誉为是“全球最环保”的搜索引擎,因为用户的每一次浏览都相当于在种树。  ...

3天前 admin

欢迎 发表评论: