智能计算系统第四章编程框架使用(可下载使用).pdf

智能计算系统 第四章 编程框架使用 中国科学院计算技术研究所 陈云霁 研究员 cyj@ Driving Example 输入 建模 实现 运行 输出 编程框架 Bang 第四章将学习到实现深度学习算法所使用的编程框架的简单用法 陈云霁 李玲 李威 et al /aics 2020年春季 2 提纲  深度学习编程框架的概念  TensorFlow概述  TensorFlow编程模型及基本用法  基于TensorFlow的训练及预测实现 陈云霁 李玲 李威 et al /aics 2020年春季 3 为什么需要编程框架？ 深度学习算法得到广泛关注，越来越多的公司、程序员需要使用深度学习算法 陈云霁 李玲 李威 et al /aics 2020年春季 4 为什么需要编程框架？ 有必要将算法中的常用操作封装成组件提供给程序员，以提高深度学习算法开 发效率 算法理论复杂 代码实现工作量大 陈云霁 李玲 李威 et al /aics 2020年春季 5 为什么需要编程框架？  深度学习算法具有多层结构 ，每层的运算由一些基本操作构 成  这些基本操作中存在大量共性运算 ，如卷积、池化、激活等。 将这些共性运算操作封装起来 ，可以提高编程实现效率  面向这些封装起来的操作 ，硬件程序员可以基于硬件特征 ， 有针对性的进行充分优化 ，使其能充分发挥硬件的效率 陈云霁 李玲 李威 et al /aics 2020年春季 6 定义  随着深度学习研究的深入 ，深度学习算法变得愈加复杂 ，研究人员 需要花更多的时间和精力在算法的实现上  深度学习编程框架：将深度学习算法中的基本操作封装成一系列组 件 ，这一系列深度学习组件 ，即构成一套深度学习框架  编程框架能够帮助算法开发人员更简单的实现已有算法 ，或设计新 的算法。也有助于硬件程序员更有针对性的对关键操作进行优化 ， 使其能充分发挥硬件效率 陈云霁 李玲 李威 et al /aics 2020年春季 7 Driving example-VGGNET19 神经网络 TensorFlow实现 __mlu_entry__ void Proposal(...) { ... __nram__ half scores[…]; __nramset_half(scores, …); ... __bang_maxpool(…);