2019年01月_rosefun96的博客_rosefunR

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 Pytorch入门及常用函数查询

背景适合现在pytorch比较流行，趁有空学学。首先，，pytorch是介入TensorFlow和Keras之间，比较灵活，有不那么难懂。1.常见问题

2019-01-26 15:52:38 564

原创 A*算法及python实现

1 理论A*算法会有一个开放集，一个封闭集。开放集是做决策时，从里边选一个作为下一步，封闭集是不再考虑的操作。通过定义F，每次沿着F最小的路径。2 理论# -*- coding: utf-8 -*-import math#地图tm = ['############################################################','#.........

2019-01-15 16:11:55 195 2

原创均匀分布叠加与正态分布叠加

1 理论2 实践均匀分布生成一个标准正态分布import numpy as npimport matplotlib.pyplot as plt#-1~1 uniformu = 2*np.random.uniform(size=30000)-1normal_rv = [300 * np.mean(2*np.random.uniform(size=30000)-1) for i in r...

2019-01-13 20:40:55 13500 3

原创 RBF径向基函数简介

1 理论RBF网络就是使用一组径向基进行拟合。有了这个思想，我们可以看这个网络的细节部分。1.1 径向基是什么？wiki给出好几种定义。其中rrr代表是范数，xi\mathbf x_ixi可以看做中心点，x\mathbf xx是每个训练样本。1.2 径向基选几个来进行拟合函数？一般是训练样本的个数。1.3 拟合误差怎么算？一般神经网络是，通过拟合误差来训练得到权值矩阵W。R...

2019-01-13 17:18:39 1654

原创 Transformer-XL

reference：谷歌、CMU重磅论文：Transformer升级版

2019-01-12 19:13:03 7446

原创 matplotlib 图片复制到Word的几种方法

matplotlib 图片复制到Word的几种方法1.savefig()方法支持存储为eps格式的矢量图；还可以保存为svg格式，再用其它工具转换为emf；如果只需要一般的清晰度，也可以在保存png格式时设定dpi参数。fig.savefig(‘test.png’,dpi=600)fig.savefig(‘test.svg’)svg格式，可以用Visio打开，然后复制到Word中；还有一...

2019-01-12 12:04:23 2597

原创判别模型与生成模型的区别

比较判别模型求解的思路是：条件分布------>模型参数后验概率最大------->（似然函数⋅\cdot⋅ 参数先验）最大------->最大似然生成模型的求解思路是：联合分布------->求解类别先验概率和类别条件概率reference:zhihu 判别模型与生成模型区别...

2019-01-11 22:04:39 207

原创 Visio图片插入word

方法直接Visio 全选（Ctrl A），然后粘贴到word就行了，发现，保留的就是矢量图片，不失真。之前尝试保存为eps等矢量格式，但很麻烦，不如用这个。

2019-01-11 09:54:14 1798

1 模拟退火模拟退火(SA,Simulated Annealing)思想爬山法是完完全全的贪心法，每次都鼠目寸光的选择一个当前最优解，因此只能搜索到局部的最优值。模拟退火其实也是一种贪心算法，但是它的搜索过程引入了随机因素。模拟退火算法以一定的概率来接受一个比当前解要差的解，因此有可能会跳出这个局部的最优解，达到全局的最优解。以图1为例，模拟退火算法在搜索到局部最优解A后，会以一定的概率接受到...

2019-01-10 20:57:35 602

原创算法比赛答辩收集

reference：【天池大赛】历届比赛资料；

2019-01-08 21:07:30 619

原创基于池的主动学习文本分类

Pool-Based Active Learning for Text Classification这篇文章是Kamal在1999年的文章，比较老，但拿来看看。1.介绍在标记的训练数据稀疏时使用大量未标记文档进行文本分类，通过对整个未标记文档池中选择标记请求来增强QBC（Query-by-Committee）主动学习算法，并明确地使用池来估计区域文档密度，将主动学习和期望最大化（EM）结合，...

2019-01-07 14:36:59 5062

原创分层注意网络HAN介绍

背景HAN是微软提出的一个网络，试图从句子的单词，文档的句子分层次构建网络。1 模型1.1 GRU序列编码GRU两个门，重置门rtr_trt和更新门ztz_tzt，一起控制信息的流动。1.2 层次注意力机制1.2.1 词编码与解码编码过程词的注意力机制：1.2.2句子的编码与注意力机制句子编码也是GRU，并且应用注意力机制。2. 实践参看链接2。3....

2019-01-05 21:12:27 6515 1

原创 keras GlobalAveragePooling函数的理解

背景Keras上面提供很多封装的函数，我们只需要调用就行，但是内部原理和实现，我们往往不是很清楚。1 GlobalAveragePoolingGlobalAveragePooling 和平时我们的average pooling区别在于，GlobalAveragePooling对每个feature map内部取平均。reference：GobalAveragePool 理解；...

2019-01-05 17:10:06 1053

原创基于TamperMonkey自动让CSDN文章自动展开的方法

背景有的文章过长，CSDN会默认折叠起来，但我比较喜欢文章自动展开的状态。方法TamperMonkey新建脚本，输入：// ==UserScript==// @name CSDN// @namespace http://tampermonkey.net/// @version 0.1// @description CSDN 博客解除阅读更多限制/...

2019-01-05 15:37:39 1097

原创一种无监督模型（one model to learn them all）

背景这是Google17年的论文，提出了nlp领域的无监督模型。之前针对图像识别、语音识别、翻译等不同的工作，需要不同的模型，谷歌提出这个模型来，一口气搞定了图像识别、图像分类和多语言翻译。1 模型MultiModel由三部分组成：模式网络，编码器，自回归编码器。编码和解码使用了卷积、注意层、稀疏门控层等计算模块。（1）卷积层可以检测局部模式特征；（2）注意力机制层可以关注特定元...

2019-01-05 11:23:32 4878

原创 FastText介绍(word2vec,层次softmax,负采样)

背景fastText是Facebook2016年提出的文本分类工具，是一种高效的浅层网络。1 基本知识1.1 softmax回归有m个样本{(x(1),y(1)),...}\left\{ {(x^{(1)},y^{(1)}),...}\right\}{(x(1),y(1)),...}, y(i)∈{0,1}y^{(i)}\in \left\{ {0,1} \right\}y(i)∈{0,1...

2019-01-03 12:35:25 6533

生成对抗网络画猫python

使用对抗神经网络来画猫.pptx；以及对应的生成对抗网络代码。使用对抗神经网络来画猫.pptx；以及对应的生成对抗网络代码。使用对抗神经网络来画猫.pptx；以及对应的生成对抗网络代码。

2018-12-25

python程序设计(浙江大学).rar

python程序设计PPT（浙江大学python课件）对应慕课该课程PPT。包含9章内容： python语言介绍；语句；字符串，列表，元组；集合，字典；函数，命名空间和作用域；文件读写操作； Web应用；网络爬虫；等

2020-10-22

深度卷积生成对抗网络TensorFlow代码实现

Tensorflow implementation of [Deep Convolutional Generative Adversarial Networks](http://arxiv.org/abs/1511.06434) which is a stabilize Generative Adversarial Networks.

2018-12-25