深度学习工程模板-低调大师

深度学习工程模板

2018-10-24 618

使用方式

下载工程

git clone https://github.com/SpikeKing/DL-Project-Template

创建和激活虚拟环境

virtualenv venv

source venv/bin/activate

安装Python依赖库

pip install -r requirements.txt

开发流程

●  定义自己的数据加载类，继承DataLoaderBase；
●  定义自己的网络结构类，继承ModelBase；
●  定义自己的模型训练类，继承TrainerBase；
●  定义自己的样本预测类，继承InferBase；
●  定义自己的配置文件，写入实验的相关参数；

执行训练模型和预测样本操作。

示例工程

识别MNIST库中手写数字，工程simple_mnist

训练：

python main_train.py -c configs/simple_mnist_config.json

预测：

python main_test.py -c configs/simple_mnist_config.json -m simple_m

nist.weights.10-0.24.hdf5

TensorBoard

工程架构

主要组件

DataLoader

操作步骤：

● 创建自己的加载数据类，继承DataLoaderBase基类；
● 覆写 get_train_data() 和 get_test_data() ，返回训练和测试数据；

Model

操作步骤：

●  创建自己的网络结构类，继承ModelBase基类；
●  覆写 build_model() ，创建网络结构；
●  在构造器中，调用 build_model() ；

注意：plot_model()支持绘制网络结构；

Trainer

操作步骤：

●  创建自己的训练类，继承TrainerBase基类；
●  参数：网络结构model、训练数据data；
●  覆写 train() ，fit数据，训练网络结构；

注意：支持在训练中调用callbacks，额外添加模型存储、TensorBoard、FPR度量等。

Infer

操作步骤：

● 创建自己的预测类，继承InferBase基类；
● 覆写 load_model() ，提供模型加载功能；

● 覆写predict()，提供样本预测功能；

Config

定义在模型训练过程中所需的参数，JSON格式，支持：学习率、Epoch、Batch等参数。

Main

训练：

●  创建配置文件config；
●  创建数据加载类dataloader；
●  创建网络结构类model；
●  创建训练类trainer，参数是训练和测试数据、模型；
●  执行训练类trainer的train()；

预测：

●  创建配置文件config；
●  处理预测样本test；
●  创建预测类infer；

● 执行预测类infer的predict()；

原文发布时间为：2018-10-24

本文来自云栖社区合作伙伴“大数据挖掘DT机器学习”，了解相关信息可以关注“大数据挖掘DT机器学习”。

微信关注我们

原文链接：https://yq.aliyun.com/articles/657279

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

利用深度学习建立流失模型

客户流失分析失去一个老用户会带来巨大的损失，大概需要公司拉新10个新用户才能予以弥补。如何预测客户即将流失，让公司采取合适的挽回措施，是每个公司都要关注的重点问题。目标利用类神经网络构建用户流失分析模型，以预测用户是否有流失的可能。工具 Jupyter Notebook ：一个对于数据分析师来说特别合适的Python编辑器，强烈推荐大家去使用。 Python：在机器学习时代，Python是最受欢迎的机器学习语言。有很多机器学习的库，可以方便高效的去实现机器学习。主要用到的Python包 pandas：是基于 Numpy 构建的含有更高级数据结构和工具的数据分析包。能很方便的进行各种数据清洗。是每个数据分析师必学的Python包之一。 sklearn：是机器学习中一个常用的第三方包，里面对一些常用那个的机器学习方法进行了封装，使得大家能够更

2018-10-25

487

原文: 在WPF设计工具Blend2中制作立方体图片效果 --------------------------------------------------------------------------------引用时请保留以下信息：大可山[MSN:a3news(AT)hotmail.com] http://www.zpxp.com萝卜鼠在线图形图像处理-------------------------------------------------------------------------------- 还是先看效果:制作步骤:(1)在项目菜单下按增加已存在项(Project -> Add Existing Item),在对话框中选择你的图片,此时在右边Project项目中将新增一个文件项显示;(2)你可以将它直接拖入设计视图内部,之后,在选中图片的情况下,你需要根据你的要求调整图片的大小,调整方法:a.在右边属性选项卡(Properties)中,输入宽度和高度(默认为Auto,自动)b.在设计视图中直接拖动四周的操作方块"把柄"以改变图片的大小和位置.提醒:(i)...

2018-10-25

561

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。