2019年宁波大学智能数据处理考博真题3809.pdf0页

2019年宁波大学智能数据处理考博真题3809.pdf宁 波 大 学 2 0 1 9 年 博 士 研 究 生 招 生 考 试 初 试 试 题 ( B 卷 ) ( 答案必须写在考点提供的答题纸上) 第 1 页 共 4 页 科 目 代 码 ： 3 8 0 9 总 分 值 ： 1 0 0 科 目 名 称 ： 智 能 数 据 处 理 1 . 自 编 码 器 A u t oE n c od e r 是 一 种 无 监 督 学 习 模 型 ， 一 般 具 有 如 图 所 示 的 典 型 腰 鼓 型 结 构 ， 它 的 输出 与 输 入具 有 相 同 的维 数 ， 输 入 数据 经 过 相对 较 低 维 度的 中 间 层 后 ， 要 求 输 出 尽 量 与 输 入 接 近 ， 其 处 理 数 据 的 效 果 非 常 类 似 于 P C A 分 析 ， 请为 A u t oE n c od e r 设计 一个 合理的 学习 算法 （ 建议 采用 梯度下 降法 ） 。 ( 1 2 分 ) 2 . 假设 一个 含 M 单元 的 R B F 网络 的输 出为 0 ( ) ( | | | | ) M j j F w ? ? ? ? ? j x x x ， 对 于 N 个 不同 的 学 习样 本 , 1 , ..., i t i N ? ， 如 果 N M ? ， 要 实现 精 确 的插 值 ， 即 满 足 ( ) , 1 , ..., i i F t d f or i N ? ? ， 显 然 是不 切 实 际的 ， 在 这 种情 况 下 ， 请 给 出一 个合 理的解 决方 案，并 设计具 体的 学习算 法。 ( 1 3 分 ) 3 . B ol t z m an n 机 是 一 个 全 相 联 的 随 机 型 神 经 网 络 ， 如 果 将 其 简 化 处 理 ， 限 定 为 只 含 一 个可 见 层 和一 个 隐 单 元层 ， 取 消 层内 连 接 ， 仅 保 留层 间 的 加权 连 接 ， 这 种 简 化 模 型 称 为 R e str ic ted B ol tzm an n Ma ch ine s ( RBM s) 。 对 于 其 可 见 单 元 v 和隐 单元 h ，如 给定 层间网 络参 数 W，联 合概 率计算 公式 如下： e x p ( E ( , ; ) ) ( , ; ) p Z ? ? v h W v h W ， 其中 e xp( E ( , ; ) ) v h Z ? ? ? ? v h W ， E ( , ; ) v h W 为能 量函 数。 请为 其推 导一个 快速 学习算 法 ， 如果 将其 用于深 度学 习 ， 请设 计一 个合理 的方 案 。 ( 1 3 分 )