什么是深度学习?它能解决什么问题?

深度学习是什么?

深度学习既指深度神经网络,也指机器学习的其他分支,如深度强化学习。一般来说,它通常指的是深度神经网络。

神经网络是一组算法,大致模仿人脑,旨在识别模式。他们通过一种机器感知,标记或聚类原始的输入来解释感官数据。它们识别的模式是数字的,包含在矢量中。所有现实世界的数据,无论是图像、声音、文本还是时间序列,都必须转换成矢量。

神经网络可以帮助我们聚类和分类。您可以将它们看作是存储和管理数据之上的群集和分类层。它们依据与输入样例之间的相似性,对未标记的数据进行分组。当有足够的标记好的数据集时,它们可以根据这些数据集对未标记的数据进行分类。(更准确地说,神经网络提取的特征被馈送给其他算法进行聚类和分类,所以你可以把深度神经网络看作是大型机器学习应用程序的组成部分,包括强化学习、分类和回归算法。)

“深层”指的是具有多个隐藏层的神经网络。

神经网络的深度允许它构建一个越来越抽象的特征层次结构,每个后续层都充当一个过滤器,过滤越来越多的复杂特征,这些特征结合了前一层的特征。当深度网络学会重构无监督数据时,这种特征层次结构和对数据重要性建模的过滤器会自动创建。由于深度网络可以处理非监督数据,而非监督数据构成了世界上的大部分数据,因此它可以比传统的ML算法更加精确,因为传统的ML算法无法处理非监督数据。也就是说,能够访问更多数据的算法胜出。

深度学习可以将输入映射到输出,然后发现其相关性。

这种方式被称为“通用近似器”,因为它可以学习在任意输入x和任意输出y之间近似函数f(x) = y,假设它们之间存在相关性或因果关系,深度学习可以找到它,从而根据这种因果关系,给定输入后预测出结果。

什么是深度学习?它能解决什么问题?

深度神经网络原理

在机器学习和认知科学中,人工神经网络(ann)是一组受生物神经网络(动物的中枢神经系统,特别是大脑)启发的模型,它依赖于大量的输入数据,以此预估未知的事物。

人工神经网络通常表现为相互连接的“神经元”系统,它们在彼此之间交换信息。这些连接具有数字权重,可以根据经验进行调整,使神经网络能够适应输入并具有学习能力。

为什么“深度学习”被称为深度?这是因为人工神经网络的结构。

早在40年前,神经网络只有2层深度,因为在计算上无法构建更大的网络。现在有10层以上的神经网络,甚至100层以上的人工神经网络正在被尝试。

你可以把神经元层层叠加在一起。最低层接收原始数据,如图像、文本、声音等,然后每个神经元存储它们遇到的数据的一些信息。这一层的每一个神经元都将信息发送到下一层的神经元,这些神经元学习下一层数据的更抽象的版本。所以你爬得越高,你学到的抽象特征就越多。你可以在下图中看到有5个层,其中3个是隐藏层。

什么是深度学习?它能解决什么问题?

深度学习能解决什么问题?

深度学习可以解决机器学习必须人工开发特征工程的痛点!

在我们以往的文章中,一直强调一个事实:让机器自我学习,是通往人工智能的必经之路。

“机器学习”正是由此而来。传统的机器学习需要大量人工参与,如果你是一名数据科学家,在使用传统的机器学习方法处理工作时,你大量的时间都会花费在开发特征工程上。

例如,你首先需要将数据转换成计算机能够理解的形式,为此,你会使用R语言或Python或Excel软件来将数据量化,转换成包含样例和特征的行和列的大型数字电子表格。然后你把这些数据输入机器学习算法,它会尝试从这些数据中学习。

这时你主要的工作内容是设计特征,以便改进机器学习模型,但一方面这是一项耗时的任务,一方面,在您训练或改进测试模型之前,您并不知道这些特性的有效性,您就陷入了开发新特性、重建模型、度量结果和重复直到您对结果满意的恶性循环中。

这是一项非常耗时的任务,会占用你大量的时间。而深度学习恰恰可以解决这个问题!

深度学习可以自动提取特征

在深度学习中,人工神经网络自动提取特征,而不是特征工程中的人工提取。仅从这一点来看,就能为您节省大量时间。

以图像作为输入为例。传统的机器学习需要我们获取一张图像并手工计算颜色分布、图像直方图、不同颜色计数等特征。

但在深度学习中,我们只需要在人工神经网络中输入原始图像即可。

近几年,人工神经网络在处理图像方面已经证明了它们的价值,现在它们正被应用于所有其他类型的数据集,如原始的文本、数字等。这有助于数据科学家摒弃低效率的工作内容,更专注于构建深度学习算法。

深度学习依赖大数据

很快,特征工程可能会过时,但深度学习算法将需要大量数据来输入我们的模型。幸运的是,我们现在有20年前没有的大数据来源——facebook、twitter、维基百科、古腾堡计划等。然而,瓶颈仍然在于清理并将这些数据处理成机器学习模型所需的格式。在不久的将来,将有越来越多的大数据供公众消费。

可以从哪里学习深度学习的知识?

深度学习领域的知识,大多数都是开源的。Tensorflow、Torch、keras、Big Sur硬件、DIGITS和Caffe都是大规模深度学习项目中的一部分。

在学术研究中,有很多论文都有算法的源代码,以及他们的新发现。Arvix.org已经开放了超过100万篇关于深度学习的论文。

通过这些途径,您可以深入学习深度学习相关的知识,并保证您的知识一直在流行趋势的最前沿。

学习深度学习是否需要计算机专业知识?

学习深度学习并不需要严格的计算机专业知识。

如果你学过任意的数据科学相关的语言,如“R”或“Python”,或者电子表格,如“Excel”或任何其他基础编程,并学习过“STEM”,那么你就精通深入学习。

深度学习的优势是什么?

我们已经解释过的一个优点是,您不必提前弄清楚功能细节。另一个优点是我们可以使用相同的神经网络方法来解决许多不同的问题,如支持向量机、线性分类器、回归、贝叶斯、决策树、聚类和关联规则。它具有容错性和伸缩性。许多感知任务都是在cnn的帮助下完成的。

如何将使用特征工程的经典ML与使用CNN的深度学习进行比较?通过这些图片就能看出来。

什么是深度学习?它能解决什么问题?

什么是深度学习?它能解决什么问题?

从这些图片中,你可以看到深度学习在生活各个方面的广泛适用性。我认为这足以激励你开始深度学习,并在数据科学和机器学习技能方面表现出色。

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:什么是深度学习?它能解决什么问题? - Python技术站

(0)
上一篇 2023年4月13日
下一篇 2022年11月10日

相关文章

  • 深度学习–项目提炼1

    1、处理数据:避免原数据被感染,将原数据copy,标记缺失值,用热力图,去掉多余的字段 2、清洗数据:copy处理的数据,然后进行删除字段和删除重复的字段 3、划分测试、训练集:copy 测试集和训练集,再给缺失的值里面填充中位数、众数 处理数据 1 #求补集(对应索引不一致的数据) 2 ls = [“tom”,”name”,3] 3 ls2 = [7,”n…

    2023年4月10日
    00
  • 图像处理之基础—卷积及其快速算法的C++实现

    头文件:   /* * Copyright (c) 2008-2011 Zhang Ming (M. Zhang), zmjerry@163.com * * This program is free software; you can redistribute it and/or modify it * under the terms of the GNU …

    卷积神经网络 2023年4月8日
    00
  • 如何成为人工智能工程师?一文规划职业路线图!

    众所周知,人工智能是一种新兴的技术趋势。根据 Gartner 报告,到2023 年,人工智能将创造260 万个工作岗位,取代它将消除的200 万个工作岗位。就业增长已经席卷了整个行业,因为在过去几年中,对具有 AI 技能的人才需求已经翻了一番。 2022年末,到2023年以来,国内外互联网大厂掀起裁员潮,大量传统开发技术人员被裁,但在人工智能领域,并未出现裁…

    2022年12月4日
    00
  • 循环神经网络-Recurrent neural network

    1.序列数据:                   自然语言                   连续视频帧                   股票走势                   机器翻译 2.循环神经网络与传统神经网络的区别:                 传统神经网络如多层感知机,每个隐藏层的节点之间是无连接的,而RNN则不然。有连接意味着…

    2023年4月6日
    00
  • coursera机器学习-支持向量机SVM

    #对coursera上Andrew Ng老师开的机器学习课程的笔记和心得; #注:此笔记是我自己认为本节课里比较重要、难理解或容易忘记的内容并做了些补充,并非是课堂详细笔记和要点; #标记为<补充>的是我自己加的内容而非课堂内容,参考文献列于文末。博主能力有限,若有错误,恳请指正; #——————————-…

    2023年4月9日
    00
  • 线性逻辑回归与非线性逻辑回归pytorch+sklearn

    1 import matplotlib.pyplot as plt 2 import numpy as np 3 from sklearn.metrics import classification_report 4 from sklearn import preprocessing 5 6 # 载入数据 7 data = np.genfromtxt(“LR…

    2023年4月6日
    00
  • win10下安装TensorFlow(CPU only)

    TensorFlow安装过程 1 环境 我的安装环境:win10 + 64位 +miniconda2+miniconda创建的python3.5.5环境+pip 由于目前TensorFlow在windows下不支持python2.7的环境,而我机器原来的python版本就是miniconda2的2.7版本,所以一直无法安装TensorFlow,每次用pip安…

    tensorflow 2023年4月8日
    00
  • Chinese-Text-Classification,用卷积神经网络基于 Tensorflow 实现的中文文本分类。

    项目地址:https://github.com/fendouai/Chinese-Text-Classification欢迎提问:http://tensorflow123.com/ 这个项目是基于以下项目改写:cnn-text-classification-tf 主要的改动: 兼容 tensorflow 1.2 以上 增加了中文数据集 增加了中文处理流程 特…

    2023年4月7日
    00

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注

评论列表(1条)

合作推广
合作推广
分享本页
返回顶部