什么是数据科学、机器学习和AI?它们有何区别? 点击:98 | 回复:1



wayaj

    
  • 精华:30帖
  • 求助:95帖
  • 帖子:5269帖 | 8770回
  • 年度积分:0
  • 历史总积分:28783
  • 注册:2020年5月25日
发表于:2018-02-02 10:12:04
楼主

 什么是数据科学、机器学习和AI?它们有何区别?

数据科学和机器学习有什么区别?这是不是意味着人工智能?

 

注:因文章有新词;采用跟帖发。望理解!

1分不嫌少!


楼主最近还看过



wayaj

  • 精华:30帖
  • 求助:95帖
  • 帖子:5269帖 | 8770回
  • 年度积分:0
  • 历史总积分:28783
  • 注册:2020年5月25日
发表于:2018-02-02 10:16:01
1楼

这些领域确实有很多重叠的地方,但它们并不是一个领域:即使很难用语言表达,这些领域的大多数专家也都能直观的理解特定的工作是如何被分类为数据科学、机器学习或人工智能的。

  

显然,这不是一个充分条件:不是所有符合该定义的东西都是该领域的一部分。算命先生做出预言,但我们不会说他们在做机器学习!这也不是一个确定某人角色或者职位头衔的好方法。

  

但是我认为这个定义对区分这三种工作是非常有效方法,并且可以避免你谈论它的时候听起来很傻。

  

数据科学生成洞察力

  

数据科学与其他两个领域非常不同,因为它的目标同时也是人类的一个目标:获得洞察力和理解能力。Jeff Leek对数据科学能够达到的洞察类型有一个很好的定义,包括描述性(“平均客户端更新的几率为70%)、探索性(不同的销售人员有不同的更新率)和因果关系。

 

 

  

同样,并不是所有产生洞察力的都有资格成为数据科学,数据科学的经典定义是它涉及了统计学,软件工程和领域专业知识的组合。但是我们可以利用这个定义来区分它和MLAI

 

它们最主要的区别在于,在数据科学循环过程中总需要人参与:由人理解洞察结果,了解大体轮廓,或者从结论中获益。所以像“下棋算法使用数据科学来选择下一步”或者“谷歌地图使用数据科学来推荐驾驶方向”这些说法都是毫无意义的。

  

因此,数据科学的定义强调:统计推断、数据可视化、实验设计、领域知识、通讯。

  

数据科学家可以使用一些非常简单的工具:他们可以获得百分比,并根据SQL查询结果绘制线形图。也可以使用非常复杂的方法:他们能够与分散的数据仓库合作,分析数以万亿计的记录,从而开发最前沿的统计技术,建立交互式可视化。但是不管他们使用什么,目的都是为了更好地理解他们的数据。

  

机器学习做出预测

  

我认为机器学习属于预测领域:“给出具有特定特征的实例X,推测Y”。这些预测可能是关于未来的(预测这个病人是否会进入败血症),也可能是关于预测对计算机来说不那么明显的特性(预测这个图像是否会有鸟)

 

几乎所有的Kaggle竞赛都可以被认为是机器学习相关的问题:他们提供一些训练数据,然后看看竞赛者能否对新的例子做出准确的预测。

 

 

  

数据科学和机器学习有很多的重叠之处。例如,都可以用逻辑回归来获取对有关关系的见解(越富裕的人越有可能购买我们的产品,所以我们应该改变我们的营销策略)并且可以做出预测(该用户有53%的几率购买我们的产品,所以我们应该多向他们推销)

  

像随机森林(random forests)这样的模型,其可解释性稍差,所以更适合“机器学习”的描述,而深度学习等方法则是难以解释的。如果你的目标是获取真知灼见,而不是做出预测,那么这可能会妨碍你。

 

因此,我们可以想象一个数据科学和机器学习的“光谱”,有更多的可解释模型倾向于数据科学方面,而更多的是机器学习方面的“黑匣子”模型。

    

 

  

大多数的从业者能够非常自在的在两个领域之间来回切换。我在工作中就同时使用了机器学习和数据学习:我可以在Stack Overflow流量数据上安装一个模型,以确定哪些用户可能正在寻找工作(机器学习),然后构建总结和可视化来检验模型的工作原理(数据科学)

 

这是发现模型缺陷的一个重要方法,也是解决算法偏差的重要方法。这是数据科学家常常负责开发产品的机器学习组件的原因之一。

  

人工智能生成行为

  

人工智能是迄今为止这三种标识中最古老也是最广为人知的,因此定义它最具有挑战性。这个术语已经被炒作泛滥,这要归功于研究人员,记者以及寻求金钱或者关注的创业公司。

  

当你筹备资金时,这是人工智能;

当你招聘时,就是ML

当你正在执行时,这就是线性回归;

当你调试时,就是printf()

  

让我沮丧的是这引起了强烈的反弹,因为这意味着一些应该被称为人工智能的工作却没有得到相应的描述。一些研究人员甚至还抱怨人工智能的影响:“人工智能是我们目前还做不到的”。那么我们可以用AI来描述什么工作呢?

  

“人工智能”定义中的一个共同点是自主代理人执行或推荐操作,一些我认为应该描述为AI的系统包括:游戏规则(深蓝,AlphaGo)、机器人与控制理论(运动规划,行走两足机器人)、优化(谷歌地图选择路线)、自然语言处理(bots2)、强化学习。

 

 

  

同样,我们可以看到它与其他领域有很多重叠之处。而深度学习横跨了MLAI两个领域,这非常有趣。典型的用例是对数据进行训练,然后生成预测,但在AlphaGo这样的博弈算法中却取得了巨大的成功。(这与早期的游戏系统不同,比如深蓝,它更专注于探索和优化未来的解决方案空间)

  

但也有区别。如果我分析一些销售数据并发现某个特定行业的客户比其他行业的客户更新的更多,那么输出的是一些数字和图形,而不是指定操作。

  

请不要将那些训练算法的人描述为“利用了人工智能的力量”。

  

人工智能和机器学习之间的区别更加微妙,历史上的ML经常被认为是人工智能的一个分支(特别是计算机视觉,其实它是一个典型的人工智能问题)

 

但我认为,ML领域很大程度上是由人工智能“中断”的,部分原因是上面描述的反弹:大多数从事预测问题的人不喜欢把自己描述为人工智能研究员。

 

它能通过统计数据帮助许多ML实现重大突破,而这些数据在人工智能的其他领域却没有那么大的影响力。这意味着如果你可以用“Y预测X”来描述一个问题,那么我建议你避免使用AI这个词。



热门招聘
相关主题

官方公众号

智造工程师