分类目录归档：学习笔记

2019
05-13

UNSW-NB15

在入侵检测领域，KDDCUP99或NSL-KDD是经常使用的基准数据集用来评估模型。但是由于这两个数据集产生时间久远（99年和09年）并具有一定的缺陷性，在学术论文中只使用它已经无法满足实验充实性的需要。而UNSW-NB 15是近些年产生的数据并已经开始评估在入侵模型上。 UNSW-NB 15数据集的原始网络数据包是由澳大利亚网络安全中心（ACCS）的网络范围实验室中的IXIA Perfec.... Read More >

2019
02-19

Python 爬虫实例

需求：爬取页面的固定数据写入excel文档。 页面形式：主页面为文件目录（点击页数跳页，此时主页面url不变，并且点击目录进入详情页面），每个目录有单独的url,爬取的信息在每个目录的详情页面，且形式大部分固定。 使用工具：python、内置库（requests、urllib、re、bs4、json、openpyml、time、random等） 构思：在主页面先爬取每个目录的ur.... Read More >

2018
09-21

python 读取文件数据的方式 HOT

在进行实验时，需要从文件中读取数据，本文涉及到的是csv、xlsx格式的文件。 1.csv  两种方式： ①含有空值、或者数据类型不一致（有str、int等） [crayon-5ce5691399bad132294960/] ②全部为数值类型的，比如将数据全都处理完成后 [crayon-5ce5691399bb9350564881/] 总结来说：用①中的方法将数据进行预处理后，.... Read More >

2018
09-19

windows10下安装tensorflow GPU版本 HOT

1.安装python的集成环境anaconda，下载 2.安装完成后，新建一个python环境，新建的目的是为了方便管理，直接在anaconda界面新建环境并命名即可（可选择python的版本，新环境的目录）。如下图所示：3.安装tensorflow的gpu版本： ①打开anaconda.... Read More >

2018
07-26

决策树 HOT

笔记放在有道云笔记上：决策树模型 Java实现代码.... Read More >

2018
07-25

感知机模型 HOT

笔记放在有道云笔记上：感知机模型.... Read More >

2018
07-22

机器学习库sklearn的使用 HOT

sklearn官网：http://scikit-learn.org/stable/ sklearn库结构 导入数据 数据预处理 定义模型 评估 附： sklearn库速览 sklearn的快速使用  .... Read More >

2018
07-21

线性模型 HOT

笔记放在有道云笔记上：线性模型 使用机器学习库：python+sklearn 实现代码： [crayon-5ce569139adec785007965/]        .... Read More >

2018
07-19

统计机器学习（一）基本概念 HOT

统计学习：计算机基于数据构建概率统计模型并运用模型对数据进行分析和预测的一门学科。 几个空间：输入空间、特征空间、输出空间、假设空间 输入空间（X）、输出空间(Y)：将输入与输出所有可能取值的集合成为输入、输出空间。可以是有限集合，也可以是整个空间（欧式）。一般来说输.... Read More >

2018
07-19

损失函数（loss）和代价函数(cost) HOT

1.损失函数(Loss function)是定义在单个训练样本上的，是真实值和预测值的非负值函数。也就是就算一个样本的误差。比如我们想要分类，就是预测的类别和实际类别的区别，是一个样本的，用L表示。 2.代价函数(Cost function)是定义在整个训练集上面的，也就是所有样本的误差的总和的平均，也就是损失函数的总和的平均，有没有这个平均其实不会影响最后的参数的求解结果。 注意：定.... Read More >