签到
EN

AI时代的中层支柱:统计学

48浏览
2022/05/07 10:02发布
苗浩然
中南财经政法大学
学生
这篇文章来看下统计、AI、算法——AI时代的中层支柱:统计学

01

AI不过是统计学

 

Thomas J. Sargent :人工智能只是统计学的延伸

2011年诺贝尔经济学奖取得者Thomas J. Sargent在题为“共享全球智慧 引领将来科技”的世界科技创新论坛上表示:
计算机是非常擅长计算,它们可以非常快速地完成计算人算不了的东西,但最终必须由人来组织和分析这些计算。你可以看一些非常成功的人工智能应用,它不仅是机器在「思考」,也是科学家在思考。像 AlphaGo 的算法看上去是第一次出现,但其实有很多非常聪明的数学,并且是由人设置教学内容。人工智能是由机器和人分饰两角的,非常有趣。

任正非:人工智能就是统计学

华为创始人兼CEO任正非在接受央视《面对面》采访,当谈到人工智能是,任正非表示:
中国没有人工智能这门课,计算机与统计学,审计学与审计学,你说我们要进入大数据时代,大数据时代做啥?统计。说明我们国家在数学上重视不够,第二个在数学中的统计学重视不够。

金榕:统计学是人工智能若干重要基础之一,但远不是全部

阿里巴巴达摩院机器智能技术实验室主任金榕:
除了统计,AI中的“学习”“推理”和“决策”中还使用了代数、逻辑、最优化等许多其他学科知识与方法。此外,有了算法后如何有效实现也非常重要。所以,单纯说AI就是统计学,或者说“所有的AI都是利用统计学来解决问题的”都是片面和不准确的。
关于AI与统计学的关系,尽管众说纷纭,各位大佬持有不同意见,但是,我们仍然不难发现统计学在AI发展中占有非常重要的位置。

图片

 

02

统计学vs人工智能发展史

为了分析统计学和AI的关系,我们同时追溯他们的发展史,找出其中的交叉部分。

1. 统计学发展史

人类的统计实践是随着计数活动而产生的,统计发展史可以追溯到距今足有五千多年的原始社会,而使统计学开始成为一门系统的学科却是距今三百余年的事情。

图片

从统计学三个大的发展阶段可以看出,统计学经历了实践→理论→检验三个时期,当前统计学主要是通过对数据的描述与分析来进行对未来的推断,这与AI的定义十分相似。

2. AI发展史

AI发展史可以追溯到计算机诞生时代。

图片

在经历过二十年黄金时代的发展后,人们开始意识到计算类的功能可以被机器很好的完成。但是,对于感知类的功能却很难达到模拟人类的要求。人们对人工智能的理解也从幻想中的智能转变到重视人工技术。
Thomas J. Sargent :人工智能是由机器和人分饰两角的,非常有趣。
现在人们对于人工智能的期待,不再像科幻电影里那样不切实际。技术人员意识到当下可以实现的AI技术是基于人的“思考”,让机器来实施,AI应该着眼于解放生产力而不是“完全替换人类”。

3. 统计学和AI的交叉点

1988年,美国科学家朱迪亚·皮尔将概率统计方法引入人工智能的推理过程中。
后来,IBM的沃森研究中心把概率统计方法引入到Candide项目——一个基于200多万条语句实现了英语和法语之间的自动翻译。
1992年,华人李开复使用统计学的方法设计开发了Siri最早的原型。从将统计学引入AI研究后,直至近期大家所熟知的阿尔法go,AI的侧重之一就是机器学习。基于由人类产生的大量数据,使用人类思维去分析标记,然后引入机器进行学习,最终让机器掌握规则和规律进行工作。
我们不难发现:统计学和AI有了一个共同的研究对象——数据。

图片

 

03

统计学概念在AI中的应用

统计学作为交叉学科之一推动着人工智能的发展,在发展中逐渐被应用于各行各业。不论以后从事AI产品经理,还是AI工程师,只有具备良好的统计学基础才能对数据分析具有准确、深入的理解。

图片

1. 应用于调查数据

以机器学习为例:其核心是“使用算法解析数据,从中学习,然后对世界上的某件事情做出决定或预测”。
在学习之前就要进行数据分析,而机器学习需要庞大的数据集作为支撑才能保证其学习效果。
对于婴儿来说,即使只有三岁,也观看过数亿张图像,拥有庞大的数据库。要想让AI“靠谱”,就要有靠谱的数据。统计学的数据获取方法与处理方法是机器学习建立数据集必需要使用的。

图片

图片来自:https://www.jianshu.com/p/0fed5efab3e5
统计学上的数据来源:

图片

统计学常见数据的处理:

图片

2. 应用于建造模型

面对没有标准定义的数据:
比如:电商平台希望把数据中会恶意退货的那些人给找出来,但数据并未指明哪些人恶意退货。
对这个具体数据,没有教科书或文献给出任何的方法。这就要有独特的处理方法,你必须考虑基于什么样的恶意退货机理和背景来建立模型,不能单一的就把有过几次退货操作的用户找出来,你就要了解用户退货方面的思维方式。
对于人类来讲,这种推断与判断的行为并没有复杂的数学运算。但对于机器来说,这一切都要基于数学运算。有效的运算模型是AI推断的基础。
面对没有模型的统计需求:
比如:运营团队希望可以预测一个新营销活动可带来的流量有多少,这并不能简单靠一些公式、几个模型解决。
现有的模型一般比较固定,例子也简单,不符合复杂的实际数据。经典统计上确定模型的优劣方法严重依赖于对数据的无法证明的众多数学假定。那么,如果想在众多统计模型中要挑一个真正满足实际需求的,就需要把数据拿过来做交叉验证。交叉验证,就是用一部分数据来建立一个模型,然后用另外一块数据来验证这个模型。交叉验证是判断AI是否能做出有效预测的重要手段。

 

04

统计学是AI发展的基础之一

通过以上对于统计学在AI领域应用的简短分析,我们不难看出统计学的确是AI不可缺少的一部分,但是仅有统计学并不能实现真正的AI。
Thomas J. Sargent与任正非对于统计学重要性的肯定是正确的,金榕对于多技术支持的观点也是正确的。统计学作为传统的经典学科,支撑起了AI发展的基础。但AI不应被定性为一门全新的技术,而应是已有技术的延伸与发展。没有哪项新技术是凭空诞生的,未来将传统学科应用于新领域是高等教育的一个转折点。
本篇文章仅是作者在学习统计学时的做的一些思考,希望能抛砖引玉。随着大数据时代的来临,未来将有更多PM投身于数据分析,设计出优秀的数据分析、预测工具。
*文章来源:量化研究方法
*侵权必删
苗浩然
中南财经政法大学
学生
文章137
·
总浏览量62893
最新文章
更多
【IEEE Communications Society主办】第三届智能计算与下一代网络国际会议(ICNGN 2024)
杜金桐
4
浏览
【征稿-EI检索】第五届新型功能材料国际会议(ICNFM 2024)
杜金桐
14
浏览
智领未来 元启新篇|南京江宁AIGC与元宇宙产业发展论坛暨元宇宙供需对接大会成功举办
杨展
2238
浏览
前沿科技盛会:南京AIGC与元宇宙论坛引爆行业新风向!
杨展
33355
浏览
顶刊JDE | 外资冲击波下的质量危机!中国出口产品质量下滑是为哪般?
经济学前沿问题研究
48
浏览
【EI检索】2024年第一届先进能源材料、能源器件与能源系统国际会议(AEMDS 2024)
杜金桐
15
浏览
热门用户
学术前沿速递
学术前沿速递
文章
300
学说观点
学说观点
文章
300
AIGC交流社区
学说官方
文章
240
未央网
未央网
文章
233
毕宣
中央财经大学
文章
185
王凯
T. Rowe Price
文章
181
热门文章
更多
经济学入门必读书籍有哪些值得推荐?
楚健
·
1185
浏览
绿色信贷能否提高商业银行的核心竞争力?基于中国的准自然实验
创新研究
·
879
浏览
最新综述!AIGC到底是什么?都有哪些应用?一文尽览!
AIGC交流社区
·
766
浏览
研究方法 | 文献资料分析方法大全!收藏
周舟
·
762
浏览
数电票的26个问题,税局统一回复!
张俊熙
·
759
浏览
如果经济学家连股都不炒,那他们都在干什么呢?
李博
·
682
浏览
“特斯拉”打败了“星巴克”
张子瑞
·
670
浏览
研究方法:文献资料分析方法
周舟
·
660
浏览
银行纷纷入局数字藏品赛道,什么信号?
李杨杨
·
629
浏览
会议预告|清华五道口绿色金融讲座第一期,邀您探讨“碳达峰碳中和——中国发展转型的机遇和挑战”
学术会议动态
·
3320
浏览