• 作者在探索深度学习训练过程中激活函数的作用时,使用平面图和动画展示了特征空间的变化,而结果很好的展示了训练过程中的一些变化情况,于是就有了DeepReplay这个Python包。本文具体介绍了它的详细使用方法。
  • 处理文本数据或者类别数据时,要将这些数据转换为矢量,才可以让模型进行处理。比较流行的方法是在网络结构上添加一个嵌入层,将类别特征转换为矢量,但这种方法在有些情况下会失败,本文对此进行了介绍,并提供了一个新的方法来解决这个问题,即使用Category2Vec。
  • 李沐大神对MXNet的入门介绍,面向的是PyTorch用户,介绍了MXNet的安装、数据读取、模型创建、损失函数和优化算法以及训练的方法。