代码仓库: [https://github.com/brandonlyg/cute-dl][https_github.com_brandonlyg_cute-dl] 目标 上阶段cute-dl已经可以构建基础的RNN模型。但对文本相模型的支持不够友好, 这个阶段的目标是, 让框架能够友好...

2020-06-15 11:00:02 阅读数:100 评论数:0 作者:自带buff

目标 这个阶段会给cute-dl添加循环层，使之能够支持RNN--循环神经网络. 具体目标包括: 1. 添加激活函数sigmoid, tanh. 2. 添加GRU(Gate Recurrent Unit)实现. 3. 添加LSTM(Long Short-term Memory)实现...

2020-06-08 15:30:42 阅读数:85 评论数:0 作者:自带buff

代码仓库: [https://github.com/brandonlyg/cute-dl][https_github.com_brandonlyg_cute-dl] (转载请注明出处!) 目标 上个阶段使用MLP模型在在MNIST数据集上实现了92%左右的准确率，达到了tensorf...

2020-05-18 18:08:20 阅读数:89 评论数:0 作者:自带buff

代码仓库: [https://github.com/brandonlyg/cute-dl][https_github.com_brandonlyg_cute-dl] (转载请注明出处!) 目标 1. 增加学习率优化器, 加快模型在小学习率下模型的训练速度。 2. 使用MNIST数...

2020-04-27 17:20:40 阅读数:97 评论数:0 作者:自带buff

代码仓库: [https://github.com/brandonlyg/cute-dl][https_github.com_brandonlyg_cute-dl] 目标 1. 增加交叉熵损失函数，使框架能够支持分类任务的模型。 2. 构建一个MLP模型, 在mnist数据集上执行分...

2020-04-21 17:08:41 阅读数:106 评论数:0 作者:自带buff

代码仓库: [https://github.com/brandonlyg/cute-dl][https_github.com_brandonlyg_cute-dl] 目标 1. 为Session类增加自动分批训练模型的功能, 使框架更好用。 2. 新增缓解过拟合的算法: L2...

2020-04-16 12:26:21 阅读数:144 评论数:0 作者:自带buff

目标 完成框架设计文档中列出的基础类和需要在基础类中实现的接口。使用最简的单多层感知机(Multi-Layer Perceptron)模型对框架进行初步验证, 因此, 除了框架的核心部分外, 还要实现一个全连接层，一个激活函数，一个优化器和一个损失函数。 框架代码简介 我把这...

2020-04-13 12:02:21 阅读数:90 评论数:0 作者:自带buff

目录 前言 核心概念 整体架构 主要功能 核心类 架构图 设计约束 LayerParam 属性: Layer ...

2020-04-10 17:31:13 阅读数:77 评论数:0 作者:自带buff

准备工作 html示例: ＜?xml version='1.0' encoding='UTF-8'?＞ ＜html ＜head＞ ＜title＞text＜/title＞ ＜/head＞ ＜body＞ ...

2020-04-07 17:05:41 阅读数:73 评论数:0 作者:自带buff

在使用scrapy抓取网页时, 如果遇到使用js动态渲染的页面, 将无法提取到在浏览器中看到的内容. 针对这个问题scrapy官方给出的方案是scrapy-selenium, 这是一个把selenium集成到scrapy的开源项目, 它使用selenium抓取已经渲染好(js代码已经执行完成)的动态...

2020-03-31 22:23:44 阅读数:78 评论数:0 作者:自带buff

matplotlib.pyplot 是命令行风格的函数集，让matplotlib看起来像MATLAB.Each一样工作。pyplot函数能够对画布(figure)进行一些改变,例如：创建一个画布(figure), 在画布中创建一个绘图区域，在绘图区域中画图，使用文字标签修饰图形。;;matplotl...

2019-12-17 15:33:23 阅读数:123 评论数:0 作者:自带buff

Matplotlib是一个用Python实现的绘图库。现在很多机器学习，深度学习教学资料中都用它来绘制函数图形。在学习算法过程中，Matplotlib是一个非常趁手的工具。;; 一般概念 ;;图形(figure) ;类似于画布，它包含一个或多个子坐标系(axes)。至少有一个坐标系才能有用。;;下...

2019-11-27 14:37:17 阅读数:103 评论数:0 作者:自带buff

Future模式是一个重要的异步并发模式，在JDK有实现。但JDK实现的Future模式功能比较简单，使用起来比较复杂。Netty在JDK Future基础上，加强了Future的能力，具体体现在:;;1. 更加简单的结果返回方式。在JDK中，需要用户自己实现Future对象的执行及返回结果。...

2019-11-20 15:13:32 阅读数:126 评论数:0 作者:自带buff

 ;; PooledByteBufAllocator负责初始化PoolArena(PA)和PoolThreadCache(PTC)。它提供了一系列的接口，用来创建使用堆内存或直接内存的PooledByteBuf对象，这些接口只是一张皮，内部完全使用了PA和PTC的能力。初始化过程分两个步骤，首先初...

2019-11-12 14:22:37 阅读数:108 评论数:0 作者:自带buff

PoolChunk用来分配大于或等于一个page的内存，如果需要小于一个page的内存，需要先从PoolChunk中分配一个page，然后再把一个page切割成多个子页-subpage，最后把内存以subpage为单位分配出去。PoolSubpage就是用来管理subpage的。;; 一个pa...

2019-10-29 15:29:06 阅读数:121 评论数:0 作者:自带buff

PoolArena实现了用于高效分配和释放内存，并尽可能减少内存碎片的内存池，这个内存管理实现使用PageRun/PoolSubpage算法。分析代码之前，先熟悉一些重要的概念:;; page: 页，一个页是可分配的最小的内存块单元，页的大小:pageSize = 1 ＜＜ n (n ＜= ...

2019-10-22 16:12:14 阅读数:117 评论数:0 作者:自带buff

io.netty.buffer.PooledByteBuf＜T＞使用内存池中的一块内存作为自己的数据内存，这个块内存是PoolChunk＜T＞的一部分。PooledByteBuf＜T＞是一个抽象类型，它有4个派生类:;; PooledHeapByteBuf, PooledUnsafeHeapB...

2019-10-16 09:39:36 阅读数:117 评论数:0 作者:自带buff

ByteBuf内存分配和释放由具体实现负责，抽象类型只定义的内存分配和释放的时机。;; ;; 内存分配分两个阶段: 第一阶段，初始化时分配内存。第二阶段: 内存不够用时分配新的内存。ByteBuf抽象层没有定义第一阶段的行为，但定义了第二阶段的方法：;; public abstract By...

2019-10-09 15:08:09 阅读数:128 评论数:0 作者:自带buff

    ByteBuf的I/O主要解决的问题有两个:;; 管理readerIndex和writerIndex。这个在在AbstractByteBuf中解决。; 从内存中读写数据。ByteBuf的不同实现主要使用两种内存：堆内存表示为byte\[\]；直接内，可能是DirectByteBuff...

2019-09-24 14:51:37 阅读数:94 评论数:0 作者:自带buff

    io.netty.buffer包中是netty ByteBuf的实现。ByteBuf是一个二进制缓冲区的抽象接口，它的功能有:;; 可以随机访问、顺序访问。; 支持基本数据类型(byte, short, int, long, float, double)的序列化和反序列化。; 不...

2019-09-21 14:00:37 阅读数:125 评论数:0 作者:自带buff

本章不会直接分析Netty源码，而是通过使用Netty的能力实现一个自定义协议的服务器和客户端。通过这样的实践，可以更深刻地理解Netty的相关代码，同时可以了解，在设计实现自定义协议的过程中需要解决的一些关键问题。;; 本周章涉及到的代码可以从github上下载: [https://gith...

2019-09-03 16:58:25 阅读数:134 评论数:0 作者:自带buff

数据包编解码过程中主要的工作就是：在编码过程中进行序列化，在解码过程中从Byte流中分离出数据包然后反序列化。在MessageToByteEncoder中，已经解决了序列化之后的问题，ByteToMessageDecoder中已经部分第解决了从Byte流中分离出数据包的问题。实现具体的数据包编解...

2019-08-29 16:04:36 阅读数:187 评论数:0 作者:自带buff