- 博客(70)
- 收藏
- 关注
转载 KafkaManager
kafka-manager是kafka集群管理工具,由雅虎开源,用户可以在Web界面执行一些简单的集群管理操作。具体支持以下内容(从githup上kafka-manag...
2020-02-02 14:11:26
551
1
原创 @RequestBody @Parameter 普通的接受请求
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声...
2019-11-23 21:39:29
1311
1
原创 idea 2019 1.2 创建 maven web项目
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...
2019-11-13 15:15:35
1623
原创 CSDN-markdown编辑器
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...
2019-11-13 15:14:42
113
原创 @tf.function
将python的函数编译成tensorflow的图结构,所以可以方便的直接使用python的语法去写深度学习的一些函数代码易于将模型导出为GraphDef+checkpoint和saveModel使得eager exection默认打开。如果不使用@tf.function,虽然可以使用eager exection去写代码,但是模型的中间结果无法保存,所以无法进行预测tf1.0的代码可以经过...
2019-10-22 16:16:02
6456
原创 attention all you need源码
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...
2019-10-03 09:43:49
228
原创 transofrm
The Illustrated Transformer Discussions:Hacker News (65 points, 4 comments), Reddit r/MachineLearning (29 points, 3 comments)Translations: Chinese (Simplified), KoreanWatch: MIT’s Deep...
2019-10-02 20:46:19
255
原创 tf.nn.embedding_lookup
import tensorflow as tfimport numpy as nptf.enable_eager_execution()emb = [ [1, 1, 1], [2, 2, 2], [3, 3, 3],]emb = np.array(emb)ids = [ [1, 1], [2, 2],]ids = np.array(i...
2019-09-25 17:16:39
105
原创 python读取大文件
with open(filename, 'rb') as f: for line in f: <do something with the line>
2019-09-25 09:02:09
103
原创 tf.reshape
tf.enable_eager_execution()zeros = tf.zeros(shape=[2, 3, 4])print(zeros)tf.Tensor([[[0. 0. 0. 0.] [0. 0. 0. 0.] [0. 0. 0. 0.]] [[0. 0. 0. 0.] [0. 0. 0. 0.] [0. 0. 0. 0.]]], shape=(2, 3,...
2019-09-17 15:24:20
92
原创 tf.concat
import tensorflow as tftf.enable_eager_execution()embedding = []embedding.append([ [1, 1], [2, 2]])embedding.append([ [3, 3, 3], [4, 4, 4]])print(embedding)[[[1, 1], [2, 2]]...
2019-09-17 14:31:13
152
转载 pickle.dump和pickle.load
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...
2019-09-15 17:52:29
166
原创 np.random.choice
# 从3个数a,b,c里面随机的选择1个。每个字母被选择的概率是pchoice = np.random.choice(['a', 'b', 'c'], size=1, p=[0.1, 0.3, 0.6])print(choice)结果为'c'
2019-09-15 15:15:01
282
原创 tf.split
import tensorflow as tftf.enable_eager_execution()x = tf.random_normal(shape=[1, 3, 1])print(x)print('"""""""""')x = tf.reshape(x, shape=(-1, 3))print(x)print('"""""""""')# 用于得到一個tensor的lis...
2019-09-15 10:26:05
213
1
原创 collections.Counter
快速的统计一个字典里面每个元素出现的次数import collectionsmost_common = collections.Counter(['a', 'a', 'b' ]).most_common()print(most_common)[('a', 2), ('b', 1)]注意上面的参数必须是list类型的,不能是二维的,或者其他维度的比如下面的代码因为维度不对,就会报错...
2019-09-14 21:57:16
1589
原创 tf.assign更新变量
# 实现阶乘import tensorflow as tffinally_sum = tf.Variable(initial_value=1, dtype=tf.int64, name='finally_sum')i = tf.placeholder(dtype=tf.int64, name='i')tmp_sum = finally_sum * iassign = tf.as...
2019-09-12 14:35:01
222
原创 name_scope / variable_scope
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...
2019-09-12 11:29:54
147
原创 Word2vec
<div class="rich_media_area_primary_inner"> <div id="img-content"> <h2 class="rich_media_tit...
2019-09-07 09:11:54
276
转载 LDA降维
在主成分分析(PCA)原理总结中,我们对降维算法PCA做了总结。这里我们就对另外一种经典的降维方法线性判别分析(Linear Discriminant Analysis, 以下简称LDA)做一个总结。LDA在模式识别领域(比如人脸识别,舰艇识别等图形图像识别领域)中有非常广泛的应用,因此我们有必要了解下它的算法原理。 在学习LDA之前,有必要将其自然语言处理领域的LDA区...
2019-08-27 21:05:08
8550
原创 啊啊
PCA(Principal Component Analysis)是一种常用的数据分析方法。PCA通过线性变换将原始数据变换为一组各维度线性无关的表示,可用于提取数据的主要特征分量,常用于高维数据的降维。网上关于PCA的文章有很多,但是大多数只描述了PCA的分析过程,而没有讲述其中的原理。这篇文章的目的是介绍PCA的基本数学原理,帮助读者了解PCA的工作机制是什么。当然...
2019-08-27 17:54:46
150
原创 BIRCH算法
在K-Means聚类算法原理中,我们讲到了K-Means和Mini Batch K-Means的聚类原理。这里我们再来看看另外一种常见的聚类算法BIRCH。BIRCH算法比较适合于数据量大,类别数K也比较多的情况。它运行速度很快,只需要单遍扫描数据集就能进行聚类,当然需要用到一些技巧,下面我们就对BIRCH算法做一个总结。1. BIRCH概述 BIRCH的全称是利用层次...
2019-08-24 16:33:42
798
原创 StandardScaler和Normalizer和MinMaxScaler使用情况
#数据标准化#StandardScaler (基于特征矩阵的列,将属性值转换至服从正态分布)#标准化是依照特征矩阵的列处理数据,其通过求z-score的方法,将样本的特征值转换到同一量纲下#常用与基于正态分布的算法,比如回归#数据归一化#MinMaxScaler (区间缩放,基于最大最小值,将数据转换到0,1区间上的)#提升模型收敛速度,提升模型精度。因为以前在描述梯度下降的时候,如果...
2019-08-22 20:27:39
2592
原创 np.meshgrid
xv, yv = np.meshgrid([1,2],[3,4,5])xv""" array([[1, 2], [1, 2], [1, 2]])"""yv"""array([[3, 3], [4, 4], [5, 5]])"""# 类似于zipnp.c_[xv.ravel(), yv.ravel()]"""array...
2019-08-22 12:00:17
371
1
转载 sklearn.metrics中的评估方法介绍(accuracy_score, recall_score, roc_curve, roc_auc_score, confusion_matrix)
版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。 ...
2019-08-22 11:15:07
1212
原创 sklearn使用OneHotEncoder
data = ['cold', 'cold', 'warm', 'cold', 'hot', 'hot', 'warm', 'cold', 'warm', 'hot']values = np.array(data)values.shape # (10,)# 必须转换为二维得矩阵values_reshape = values.reshape((-1,1)) # (10, 1) onehot...
2019-08-20 14:56:15
2724
原创 keras处理图片
(x_train, y_train), (x_test, y_test) = keras.datasets.fashion_mnist.load_data()y_train = keras.utils.to_categorical(y_train, num_classes=10)y_test = keras.utils.to_categorical(y_test, num_classes=1...
2019-08-14 22:25:50
315
原创 将手写数字画到一副图里面
import matplotlib.pyplot as plt from tensorflow import keras(x_train, y_train), (x_test, y_test) = keras.datasets.fashion_mnist.load_data()for i in range(9): plt.subplot(3,3,i+1) plt.im...
2019-08-14 21:56:11
164
原创 在tensorflow里面使用sklearn得到召回率等指标
#%%import numpy as npimport pandas as pdimport sklearnfrom sklearn.model_selection import train_test_splitfrom sklearn.preprocessing import LabelEncoderfrom tensorflow import keras#%%seed = 7...
2019-08-14 21:55:02
1634
原创 keras里面调用sklearn
#%%import numpy as npimport pandas as pdfrom tensorflow import kerasimport sklearnfrom sklearn.model_selection import cross_val_scorefrom sklearn.preprocessing import LabelEncoderfrom sklearn.p...
2019-08-14 21:00:12
332
原创 Sklearn-LogisticRegression逻辑回归
版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。 ...
2019-08-14 19:44:18
780
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人