使用机器学习前，企业需要做的10项准备工作

并非每一个问题都可以通过机器学习来解决，也并不是每个企业都为AI的应用做好了准备。

比如，企业要确定具体的应用场景、是否有足够的数据进行分析、要建立预测模型、要有定义模型和训练模型的人员和工具......等等。

为此，本文将具体阐述使用人工智能、深度学习和机器学习时，企业需要做的10项准备工作。

那么，企业到底需要多少数据？无论是进行普通的统计预测，还是机器学习或者深度学习，要考虑的因素越多，所需的数据就越多。总的来说，机器学习比统计预测需要更多的数据，而深度学习所需的数据更是成倍的。

-2- 数据科学家

当然，企业必须要有一个能够建立上面提到的所有模型的人。他需要足够的经验、直觉、编程能力和统计学背景。

即便当前很多机器学习的产品和服务提供商都表示，“任何人”或“任何商业角色”都可以使用他们预先训练好的应用机器学习模型。但现实情况是，企业的数据可能并不适用现有模型。因此，还需要数据分析师和数据科学家来指导和帮助对模型进行训练。

-3- 追踪和采集重要的相关变量数据

此外，企业还需要具有相关变量的数据，从多个维度采集和使用数据，从而避免统计上所说的“不明原因的方差”。

当然，某些独立变量（如天气观测）的测量和采集是很难、不切实际或者高成本的。以化学领域为例，当你将铅电镀到铜上时，就可以测量氟硼酸电镀液的温度和浓度，并记录正极上的电压。但这要求溶液中含有的肽是适量的，从而获得良好的粘附性。否则，你无法知道这关键催化剂的数量，也无法使用其他变量解释电极板质量的变化。

-4- 找到清理和转换数据的方法

通常情况下，数据都非常复杂，其质量也常常参差不齐。比如，在采集过程中，可能缺少一个或多个值，个别值也可能超出范围或与其他值不一致，回答问题的人可能不了解问题或者会编造答案等等。

而这，则意味着分析过程中的数据过滤需要花费最多的精力，这甚至可能占到总分析时间的80％到90％。如果在ETL（提取、转换和加载）过程中将所有数据保留在数据仓库或数据湖中，就可能让无关的或者质量不高的数据也被保存下来。

当然，即使是经过精确过滤的数据也可能需要进一步转换，才能对其进行良好的分析。与统计方法类似，当每个可能状态的参数相似时，即当所有变量的范围都归一化时，机器学习模型的效果最好。因此，企业必须找到能够更好地清理和转换数据的方法。

-5- 重新审视所有变量数据及其相关性

下一步，我们需要退后一步，再看看所有的变量及其相关性。

探索式数据分析可以快速显示所有变量的范围和分布，不管相关变量之间是相互依赖的还是独立的、集群在哪里、哪里可能有异常值。当企业拥有高度相关的变量时，通常从分析中删除一个或者多个变量是有用的。企业还可以执行类似于逐步多元线性回归的方法来确定最佳的变量选择。

然而，这一并不意味着最终模型是线性的，只是在引入更多复杂因素之前，需要尝试一下简单线性模型；如果企业的模型中有太多的专业术语，最终得到的将会是一个由多种因素决定的系统模型。

-6- 通过反复尝试寻找最佳模型

-7- 拥有训练深度学习模型所需的计算能力

数据集越大，深度学习模型中的层就越多，训练神经网络所需的时间也就越长。

关于训练时间的问题，有一个方法就是使用通用图形处理单元（GPU）来解决。一个K80 GPU配合CPU，其训练速度通常可以达到仅使用CPU的5到10倍。如果企业可以将网络的整个“内核”整合到GPU的本地内存中，那么训练速度甚至可以达到仅使用CPU的100倍。

除了单个GPU之外，企业还可以设置协调的CPU和GPU网络，以便在更短的时间内解决更大的问题。除非你愿意花一整年时间来训练深度学习模型，并拥有庞大的预算，否则你会发现，在云上租用GPU是最具成本效益的选择。包括CNTK、MXNet和TensorFlow在内的几种深度学习框架都支持CPU和GPU的并行计算，并且具有合理的缩放系数，可用于支持GPU的超大型虚拟机（VM）实例网络。

-8- 学会调整或者尝试不同的方法

简单的统计模型考验通过机器学习和深度学习为企业的模型等运作制定标准。但如果你不能用给定的模型来提高分析水平，就应该调整或者尝试一种不同的方法，比如，可以在超参数调整算法的控制下并行设置多个模型训练，并使用最佳结果指导下一个阶段。

-9- 部署预测模型

最终，训练好的模型可以部署和运行在服务器上、云中、个人计算机上或者手机上，以供企业实时地应用。深度学习框架提供了将模型嵌入到Web和移动应用中的各种选择。亚马逊、谷歌和微软也都展示了自己在这方面的实践，甚至有可以通过语音识别操作的消费电子设备和智能手机应用。

-10- 定期更新模型

当然，你可能还会发现，即便是训练好的模型，由于数据会随着时间的推移而变化，因此模型的错误率也会随着时间的推移而增加。比如，企业的销售模式会发生变化，竞争对手会发生变化，款式会发生变化，经济形势会发生变化……

为此，大多数深度学习框架都可以选择对旧数据进行再训练，并用新模型替换原来的预测服务。如果你每月都能定期更新的话，基本上就能够保持与时俱进。否则，最终你的模型就会变得太过时而不可靠。