Pelhans Blog

Practice makes perfect
本站总访问量 本站访客数人次

深度学习笔记(三)

牛顿法与BFGS

眼睛看过只是别人的,整理出来并反复学习才是自己的。 概览 牛顿法 拟牛顿法 BFGS 参考 概览 与一阶的相比,二阶梯度方法使用二阶导数改进了优化。最广泛使用的二阶方法是牛顿法。 牛顿法 牛顿法是给予二阶泰勒级数展开在某点 $\theta_{0}$附近来近似 $J(\theta)$的方法,它忽略了高于二阶的导数: 对上式两侧同时求梯度,得到函数...

深度学习笔记(二)

拉格朗日乘数法与KKT条件

眼睛看过只是别人的,整理出来并反复学习才是自己的。 概览 无约束条件 等式约束条件 一道练习题 不等式约束 例子 参考 概览 通常情况下,最优化问题会答题可分为三种情况:无约束条件、等式约束条件、不等式约束条件,对应的算法为费马定理、拉格朗日乘数法、KKT条件。 无约束条件 最简...

深度学习笔记(一)

常见优化器

系统整理 tensorflow 相关技术,并随着学习随时更新。本篇包含深度学习中常用的优化器。 概览 梯度下降 梯度下降的变种 批梯度下降(Batch gradient descent) 单样本随机梯度下降 随机梯度下降 梯度...

Numpy 笔记

Numpy 常用操作

本笔记来自于菜鸟教程,整理自己用到的部分,并更新一些例子。 Numpy 基本知识 安装 Ndarray ndarray 的属性 创建数组 实例 numpy.asarray numpy...

<语义网基础教程>笔记(四)

本体工程

本部分将介绍手工构建本体、本体复用和使用半自动化方法等技术。其实原计划后面还应有一个逻辑与推理:规则部分,但是我自己也没太理解,因此等以后再补。 手工构建本体 确定范围 考虑复用 枚举术语 定义分类 定义属性 定义刻面 定义实例 检测异常 复用已有本体 ...

<语义网基础教程>笔记(三)

万维网本体语言:OWL2

首先描述 OWL2 的动机以及它与 RDF 和 RDFS 的关系。接下来将介绍 OWL2 的各种语言元素及 OWL2 概要。 简介 本体语言的需求 推理支持 OWL2 和 RDF/RDFS 的兼容性 两种语义 OWL2 Full:基于 RDF 的语义 OWL2 DL:直接语义 ...

<语义网基础教程>笔记(二)

查询语义网:SPARQL

本章将介绍SPARQL 查询得以执行的基础设施,之后讨论SPARQL的基础知识并逐步介绍其更复杂的部分。 简介 SPARQL 基础设施 基础知识:匹配模式 过滤器 处理一个开放世界的构造子 组织结果集 其他形式的 SPARQL 查询 通过 SPARQL 更新来增加信息 总结 简介 SPARQL 能够让我们通...

语义网基础教程笔记(一)

资源描述框架:RDF

看书不记笔记的下场就是还得看一遍。。。 RDF 是一种勇于表达有关对象(资源) 的生命的语言;它是一个标准的数据模型以提供机器可处理的语义。RDF模式提供了一组用于将RDF词汇表组织成带类型的层次结构的建模原语。 简介 RDF:数据模型 资源 属性 声明 图 指向声明和图 RDF 语法...

从零开始构建知识图谱(十三)

百科知识图谱构建(七)基于 Silk 的批量知识融合

目前为止我们已经从百度百科获取了三元组 62,857,364个,互动百科 65,738,654个。使用 Silk 工具将他们在实体层次进行融合并给出 关系时发现,在使用全部数据进行融合时,会导致内存爆掉。因此这里介绍通过使用命令行进行批量融合。 项目链接 简介 准备工作 加载数据到 tdb 知识融合 简介 前面使用 Silk 工具进行知识融合。但实际操作...

从零开始构建知识图谱(十二)

百科知识图谱构建(六)基于Silk的知识融合

目前为止我们已经从百度百科获取了三元组 62,857,364个,互动百科 65,738,654个,词条每个都是400多万个。由于都是百科类,因此有大量的重复词条。现在我们使用 Silk 工具将他们在实体层次进行融合并给出 关系。 简介 Silk 的安装 运行 Silk Workbench Silk 的使用说明 Workbench 概览 ...