周志华与「深度森林」

article/2025/9/25 18:40:17
640?wx_fmt=gif

关注网易智能,聚焦AI大事件,读懂下一个大时代!


640?wx_fmt=png


近日于深圳举办的2018中国人工智能大会上,AI领域的顶级大牛、南京大学人工智能学院院长、ACM/AAAI/IEEE Fellow周志华发表了演讲,并在会后接受了网易智能等媒体的采访,不仅对其最新研究的深度森林模型进行了详细的阐述,还透露了南京大学新成立的AI学院招生情况和人才培养计划。


出品 | 网易智能(smartman163)

期号 | AI英雄总第93期

作者 | 小羿


“机器学习是智能化时代的关键,它将赋予这个时代‘芯’和‘魂’”。”


在近日于深圳举办的2018中国人工智能大会上,周志华教授这样表述机器学习在新时代的重要性。他呼吁国内关注研发新的机器学习模型算法、芯片和平台,以避免未来在AI领域造成GPU、TensorFlow等国外平台独大的局面,再次酿出第二个“中兴事件"。


640?wx_fmt=png

研发首个非神经网络模型“深度森林”

640?wx_fmt=png


第三波人工智能浪潮兴起之后,深度学习技术大火,深度神经网络模型成为产业界和学界追捧的对象。但是,目前的深度神经网络也有诸多缺陷,比如太多超参数、需要大量训练数据、理论分析难、黑箱模型,以及模型一旦选定复杂度即确定,通常远大于任务“所需”复杂度等等问题。


正因为如此,周志华教授开始了非神经网络模型“深度森林”的研究。他向网易智能介绍,“深度森林”并不是要替代深度学习,它本身就是一种深度学习,是首个不使用BP算法来训练的深度学习模型,这本身在学术上很值得探索。


另外,从应用价值的角度讲,周志华表示,在图像、视频、语音之外的很多任务上,深度神经网络往往并非最佳选择,不少时候甚至表现不佳,比如符号建模、混合建模、离散建模等问题上。“深度森林”在这些任务上可能有更好的表现。目前,深度森林模型已经有大型企业应用并取得了很好的效果。


周志华表示,对于“深度森林”的研究才刚刚开始,“创新技术从新生萌芽到发展成熟往往要经过长期探索、积累,甚至曲折反复。”周志华称,深度神经网络经过二十多年无数研究者添砖加瓦才有今天的成效,“深度森林”还有很长的路要走。GPU、TensorFlow等都是基于深度神经网络的芯片和平台,研发非神经网络的深度学习模型有助于降低被垄断的风险。


640?wx_fmt=png

南大AI学院本科生9月入学,分两个专业方向

640?wx_fmt=png


在人才培养方面,南京大学在今年3月正式设立人工智能学院,由周志华负责领导和建设。


周志华向网易智能透露,南京大学人工智能学院今年已经开始招生,第一批本科生招生规模80人,其中70人从高考填报志愿的考生中选拔,10人通过综合评价选拔,这些学生将于9月入学。周志华还透露,目前这批本科的生源质量非常好,有很多高分考生报考南京大学人工智能学院。


据悉,目前南大AI学院入学的本科生有两个方向,一个是机器学习与数据挖掘,一个是智能系统与应用。周志华表示,未来可能会根据学院发展增设新的方向。


至于硕士和博士招生方面,周志华称将面向全国进行招生,硕士研究生和博士研究生将于2019年9月入学。在师资方面,周志华称学院将持续面向海内外公开招聘高水平教师。


640?wx_fmt=png

AI学科需要新的人才培养体系

640?wx_fmt=png


对于南大AI学院即将入学的第一批学生,周志华表示将采用全新的人才培养机制。


周志华透露,南京大学在两年前已经开始酝酿人工智能学生培养体系,不仅在课程设置上是全新的,而且非常重视基本功、重视实践,今年9月份入学的本科新生就会进入新的培养体系。


据悉,周志华所说的新的培养体系,其中很重要的一点是学院与大型企业合作来给学生创造更好的实训条件。今年4月,京东在南京大学人工智能学院附近建立京东南京人工智能研究院,并与南京大学签订合作协议。周志华称,南大AI学院与京东的合作一方面使学生在培养过程中可以接触企业真实案例,在企业实习期间也能得到老师的指导;另一方面,京东早期介入人才培养,不仅有助于加强其人工智能人才队伍,还可望与南大人工智能学院的高水平教师合作开展研究解决问题。


这样的新探索将使得高校人才培养与业界加强互动,培养出理论与应用实践能力兼备的优秀人才。周志华透露,除了与京东合作外,目前科沃斯、旷视科技都在南京大学附近建立了研究院,与之开展学生实训合作。


以下为周志华教授对其他几个问题的回答(经网易智能整理):


问:对于想要转型学习人工智能的人来说,您有什么建议?


周志华:现在机器学习很火,很多人都在学习,虽然现在这方面的人才很缺乏,但不能保证大量人才涌入这个领域以后会不会造成人才供应过饱和问题。


如果一定想转型学习人工智能,一定要知道这几点。第一,人工智能对数学的要求比计算机学科的大部分分支要高;第二,计算机科学本身的核心专业知识必须具备;第三,与数学不一样的是,人工智能技术要解决现实问题,而且这些问题通常事先没有定义清楚,所以很重要的是对现实问题进行有效的分析和建模,理解和沟通能力非常重要。


问:您如何看待自然语言处理的发展?


周志华:最近今年,在自然语言处理上面,大家也更多的开始使用深度学习,虽然也获得了一些进步,目前最成功的是机器翻译,但机器翻译实际上并不是典型的自然语言处理任务。


综合来看,深度学习在自然语言处理上的应用没有在视频、图像、语音上那么成功,主要原因可能是现在的深度神经网络主要功用是进行表示学习,而人类自然语言是在几千年中发展的,有很多关于语法、句法、词法的知识,而这些知识不该扔掉,不能只用深度学习技术。最好是把这些知识与机器学习结合起来,但这会涉及到一个很重要的问题,就是如何把学习与推理结合,这是一个很大的技术挑战。


问:在数据驱动的人工智能时代下,您如何看待数据隐私问题,如何解决AI应用引发的一些伦理和道德问题?


周志华:任何一个技术都有它的两面,一方面我们需要探索和发展技术本身,另一方面要防止它被滥用。我们主要在关注前者,对于后者的研究也很多,例如社会学、伦理学都在关注。这就像核武器引发争议一样。这两方面的事情都很重要,需要有相关的人去思考解决。

640?wx_fmt=gif

- 加入社群吧 -

网易智能AI社群(AI专家群、AI黑板报)火热招募中,对AI感兴趣的小伙伴,添加智能菌微信 kaiwu_club,说明身份即可加入。

640?wx_fmt=jpeg

http://chatgpt.dhexx.cn/article/C13ygYHd.shtml

相关文章

深度森林:探索深度神经网络以外的方法

挑战深度学习 《深度森林:探索深度神经网络以外的方法》 阅读量: 1306 收藏本文 深度神经网络的巨大成功掀起了一股深度学习热潮。 或许,这股热潮有些“太热”了。 就在这周,南京大学机器学习与数据挖掘研究所(LAMDA&a…

【深度森林算法实践】分类与回归

1 Review💖 不可否认,深度森林的提出很大程度是受深度学习算法启发。现如今,深度学习算法在诸多领域都展示出了傲人的实力,周志华教授作为国内集成学习领域的先驱,则在借鉴了深度学习算法结构的基础上,提出…

深度——强化学习、深度森林

Sutton’sTD(0)算法:考虑当前回报和下一状态的估计值,它的更新公式 : • Q-learing算法:它和Sutton’sTD(0)算法类似,只是将动作集A也考虑进来。 定义动作价值函数Q(s,a)…

周志华团队和蚂蚁金服合作:用分布式深度森林算法检测套现欺诈

翻译 | 林椿眄 出品 | AI科技大本营(公众号ID:rgznai100) 【AI科技大本营导读】 互联网公司每天都面临着处理大规模机器学习应用程序的问题,因此我们需要一个可以处理这种超大规模的日常任务的分布式系统。最近,以…

在Python 3中使用深度森林(Deep Forest)进行分类

深度森林(Deep Forest)是周志华教授和冯霁博士在2017年2月28日发表的论文《Deep Forest: Towards An Alternative to Deep Neural Networks》中提出来的一种新的可以与深度神经网络相媲美的基于树的模型,其结构如图所示。 gcForest.png 文中提出的多粒度级联森林(Mu…

9大数据集6大度量指标完胜,周志华等提出深度森林处理多标签学习

2019-11-25 11:01:57 选自arXiv 机器之心编译参与:路雪、一鸣 近日,南大周志华等人首次提出使用深度森林方法解决多标签学习任务。该方法在 9 个基准数据集、6 个多标签度量指标上实现了最优性能。 在多标签学习中,每个实例都有多个标签&am…

深度森林DF21、deep forest、gcForest

文章目录 DF21的优势DF21的可以用来干什么对标算法[^1] DF21的优势 DF21是周志华团队于2021年2月1日推出的深度森林开源库,其优势在于超参少、训练效率高1。 DF21的可以用来干什么 DF21可以用来进行分类和回归2。 对标算法2 搜狐自媒体网文:周志华团…

如何评价周志华深度森林模型

这篇文章背后的思路实际上是这样的: DNN(或者说 MLP)其实就是堆起来的广义线性模型(比如 logistic,但也有其他激活函数)。它能够自动发现特征与标签之间的非线性关系,当决策边界非线性&#xf…

gcForest分布式深度森林及其在套现欺诈自动检测中的应用

分布式深度森林及其在套现欺诈自动检测中的应用 摘要 互联网企业每天面对处理大规模机器学习应用的请求,需要一个能够处理超大数据任务的分布式系统.深度森林是最近提出的一个利用树作为组件深度学习框架,在各种领域取得不错的结果.然而并没有在超大规模数据任务上测试.在这项…

【论文解读】关于深度森林的一点理解

2017年年初,南京大学周志华老师上传了一篇名为:Deep Forest:Towards An Alternative to Deep Neural Networks的论文,一石激起千层浪,各大媒体纷纷讨论着,这似乎意味着机器学习的天色要变,实则不…

随机森林算法的扩展-深度森林(deep forest)

深度学习最大的贡献,个人认为就是表征学习(representation learning),通过端到端的训练,发现更好的features,而后面用于分类(或其他任务)的输出function,往往也只是普通的…

多标签学习与深度森林学习笔记

周志华老师团队Multi-Label Learning with Deep Forest (MLDF)报道很多,各大机器学习平台也都就这篇文章的亮点给出了分析。近日在准备组会报告时较为详细地拜读了一下,也由此简单了解了一下多标签学习的相关内容。 正如论文作者所述,MLDF的…

论文阅读:Deep forest/深度森林/gcForest

最近组会汇报了这篇文章,简单把思想梳理下来了,对了搜索深度森林的时候可能会看到Deep Forest: Towards an Alternative to Deep Neural Networks,这两篇文章的内容基本上是一致的,只在叙述方面有一些很小的不同。 下面是我做的p…

【冰糖Python】深度森林 DeepForest

此文为记录DeepForest的简单使用 原文《Deep Forest: Towards an Alternative to Deep Neural Networks》 “A key advantage of deep forest is its adaptive model complexity depending on the dataset. The default setting on hyper-parameters enables it to perform r…

使用深度森林(Deep Forest)进行分类-Python

一、什么是深度森林? 传统DNN的不足: 1、需要大量的数据集来训练; 2、DNN的模型太复杂; 3、DNN有着太多的超参数 gcForest的优势: 1、更容易训练; 2、性能更佳; 3、效率高且可扩展、支持…

深度森林浅析

深度森林 深度学习最大的贡献是表征学习(representation learning),通过端到端的训练,发现更好的features,而后面用于分类(或其他任务)的输出function,往往也只是普通的softmax&…

深度森林原理及实现

目录 背景 级联森林 多粒度扫描 代码 总结 背景 深度森林(Deep Forest)是周志华教授和冯霁博士在2017年2月28日发表的论文《Deep Forest: Towards An Alternative to Deep Neural Networks》中提出来的一种新的可以与深度神经网络相媲美的基于树的模型,其结构…

论文阅读:深度森林

论文地址:https://arxiv.org/pdf/1702.08835.pdf 相关代码:https://github.com/kingfengji/gcForest 深度森林是南大周志华老师前两年提出的一种基于随机森林的深度学习模型。 当前的深度学习模型大多基于深度学习神经网络(DNN)…

Deep Forest(gcforest)通俗易懂理解

DeepForest(gcforest)深度森林介绍 1.背景介绍 当前的深度学习模型主要建立在神经网络上,即可以通过反向传播训练的多层参数化可微分非线性模块,周志华老师希望探索深度学习模型的新模式,探索不可微模块构建深度模型的可能性。从而提出了一…

【深度学习】Deep Forest:gcForest算法理解

一、相关理论 本篇博文主要介绍南京大学周志华教授在2017年提出的一种深度森林结构——gcForest(多粒度级联森林)。近年来,深度神经网络在图像和声音处理领域取得了很大的进展。关于深度神经网络,我们可以把它简单的理解为多层非…