基础知识： （1）np.nan表示该值不是一个数，比如数据中收入、年龄的缺失值；np.inf表示无穷大 （2）np.nan == np.nan 的结果为False （3）nan与任何数的操作结果均为nan,例如sum((np.nan,4)) 的结...

最近在做数据处理的时候，遇到个让我欲仙欲死的问题，那就是数据中的空值该如何获取。 我的目的本来是获取数据中的所有非零且非空值，然后再计算获得到的所有数据计算均值，再...

在本文中，我挑选了15个最有用的软件包，介绍它们的功能和特点 1. Dash Dash 是比较新的软件包，它是用纯 Python 构建数据可视化 app 的理想选择，因此特别适合处理数据的任何人。Dash...

目录 一、需求描述 二、逻辑梳理 2.1 翻译 API 2.2 格式修改 2.2.1 页面样式 2.2.2 段落样式 2.2.3 文字块样式修改 2.3整体实现步骤 三、代码实现 一、需求描述 手上有大量外文文档（本案例...

对shuffle=True的理解： 之前不了解shuffle的实际效果，假设有数据a,b,c,d，不知道batch_size=2后打乱，具体是如下哪一种情况： 1.先按顺序取batch，对batch内打乱，即先取a,b，a,b进行打乱； 2...

在通过scrapy框架进行某些网站数据爬取的时候，往往会碰到页面动态数据加载的情况发生，如果直接使用scrapy对其url发请求，是绝对获取不到那部分动态加载出来的数据值。但是通过观...

本文研究Keras自带的几个常用的Loss Function。 1. categorical_crossentropy VS. sparse_categorical_crossentropy 注意到二者的主要差别在于输入是否为integer tensor。在文档中，我们还可以找到关于二者如何...

目录 一、常用的python内置对象 二、变量的定义与使用 三、整数 四、浮点数 五、布尔类型 六、字符串类型 七、注释 一、常用的python内置对象 对象类型 类型名称 示例 简要说明 数字...

目录 一、为什么要用线程池 二、线程池练习 演示例子1:使用submit方法 演示例子2:使用map方法 三、线上数据库测试 总结: 一、为什么要用线程池 1.多线程比单线程运行要快很多，比如在...

pytorch实现变长输入的rnn分类 输入数据是长度不固定的序列数据，主要讲解两个部分 1、Data.DataLoader的collate_fn用法，以及按batch进行padding数据 2、pack_padded_sequence和pad_packed_sequence来处理变...

问题 最近用pytorch做实验时，遇到加载大量数据的问题。实验数据大小在400Gb，而本身机器的memory只有256Gb，显然无法将数据一次全部load到memory。 解决方法 首先自定义一个MyDataset继承...

很多时候，我们需要实时的绘制曲线，如实时的绘制串口接收到的数据。最先想到的解决策略是类似于Matlab种的drawnow函数。 在python中Matplotlib库有着和Matlan绘图库相似的功能，但是并没...

目录 一、安装 二、导入模块 三、柱状图 四、饼状图 五、折线图 六、散点图 七、图表合并 八、词云 九、地图 十、总结 一、安装 首先我们需要安装下pyecharts，通过pip指令直接安装即...

目录 一、实现划词功能 二、运行错误 三、解决问题 一、实现划词功能 说是划词翻译，实际上我们是通过获取用户的剪切板内容，通过一系列的操作得到的。首先呢，我们就先实现如...

1.找到配置文件 -打开“开始菜单--Anaconda3文件夹--Anaconda Prompt” -输入命令： jupyter notebook --generate-config -根据展示的路径打开配置文件（记事本即可），我的路径是“ C:\Users\HUAWEI\.jupy...

目录 一、前言 二、添加标题 三、为坐标轴添加标签 四、添加文本说明 五、文本的对齐方式 六、文本边界框 七、添加箭头 八、添加图例 九、使用LaTex风格的符号 十、LaTex简介 十一、...

目录 一、前言 二、数据爬取 三、数据清洗 四、数据可视化 一、前言 本文就从 数据爬取 、 数据清洗 、 数据可视化 ，这三个方面入手，但你简单完成一个小型的数据分析项目，让你...

一、图的定义 图是一种比树更复杂的一种数据结构，在图结构中，结点之间的关系是任意的，任意两个元素之间都可能相关，因此，它的应用极广。图中的数据元素通常被称为顶点 (...

目录 一、循环语句介绍 二、循环语句的分类 三、循环控制语句 四、while循环 五、break和continue 六、for循环 七、pass语句的使用 一、循环语句介绍 1.循环语句理解 循环语句允许我们执行...

制作NBA数据爬虫 捋顺思路 我们在这里选择的是百度体育带来的数据，我们在百度当中直接搜索NBA跳转到网页，我们可以看到，百度已经为我们提供了相关的数据 我们点击进去后，可以...

目录 一、前言 二、配置使用 定义与触发任务 扩展 三、Django中使用定时任务 二次开发 一、前言 Celery是一个基于python开发的分布式任务队列，而做python WEB开发最为流行的框架莫属Dja...

前言 本文结构如下： 1、爬取某东畅销商品数据 2、清洗数据并并进行简单分析 3、将数据进行可视化展示 数据的字段如下： 一共爬取了243条某东畅销商品数据 一、获取数据 1. 分析网...

数值运算 代码： # -*- coding=GBK -*-import cv2 as cv # 数值运算：加减乘除def shu_image(src11, src22): src = cv.add(src11, src22) # 加 : 图像对应像素值相加， 255 时取255 cv.namedWindow("add",0) cv.resizeWindow("a...

前言，因为经常使用Excel处理数据，像表格内的筛选，表格间数据的复制，都是简单重复的操作，十分枯燥无聊，为了提高效率，主要是自己懒，特地研究openpyxl，发现能够简化个人劳动...

运行原理 1、不同线程中所包含的栈帧是不允许存在相互引用的。 2、如果当前方法调用了其他方法，方法返回之际，当前栈帧会传回此方法的执行结果给当前一个栈针，并且虚拟机会丢...

一、成员 1.1 变量 实例变量，属于对象，每个对象中各自维护自己的数据。 类变量，属于类，可以被所有对象共享，一般用于给对象提供公共数据（类似于全局变量）。 class Person(obj...

一、场景描述 这里有以四张发票为例（辰哥网上搜的），将发票图片放到pic文件夹下。 随便打开一张发票 提取目标：金额、名称、纳税人识别号、开票人。 最后将每一张发票的这四个...

一、前言 二、爬取观影数据 https://movie.douban.com/ 在『豆瓣』平台爬取用户观影数据。 爬取用户列表 网页分析 为了获取用户，我选择了其中一部电影的影评，这样可以根据评论的用户去...

python实现12306余票查询 我们说先在浏览器中打开开发者工具(F12)，尝试一次余票的查询，通过开发者工具查看发出请求的包 余票查询界面 可以看到红框框中的URL就是我们向12306服务器发...

目录 一、技术背景 二、MindSpore内置的损失函数 三、自定义损失函数 四、自定义其他算子 五、多层算子的应用 六、重定义reduction 一、技术背景 损失函数是机器学习中直接决定训练结...

目录 一、环境介绍 二、 搭建python开发环境 2.1 Python版本介绍 2.2 在windows下安装Python环境 2.3 windows下安装VSCode代码编辑器 一、环境介绍 操作系统: win10 64位 python版本: 3.8 IDE: 采用vscode 用...

制作NBA数据爬虫 捋顺思路 我们在这里选择的是百度体育带来的数据，我们在百度当中直接搜索NBA跳转到网页，我们可以看到，百度已经为我们提供了相关的数据 我们点击进去后，可以...

目录 使用if…elif…elif…else 实现switch/case 使用字典 实现switch/case 在类中可使用调度方法实现switch/case 总结 使用if…elif…elif…else 实现switch/case 可以使用if…elif…elif..else序列来代替sw...

目录 前言 什么是pip 再说 pip， 它就像应用宝 下面给我们的手机安装应用宝 Centos 安装pip for python2 试用pip来安装库 配置国内的Pypi镜像仓库 安装virtualenv 玩转深度学习框架tensorflow 总结...

目录 1.安装 2.操作一个简单的Excel文档 3. 操作简单Excel文档并添加数据格式 4.Excel中添加不同类型的数据 5.Excel中添加数据图表 最后：可能给予你助力的教程 总结 1.安装 2.操作一个简单...

目录 一、介绍 二、方法 三、示例 windows平台 1、编写搭建动态库c函数 2、python导入库 3、结果 linux平台 1、编写c程序 2、编译成so动态库 3、编写python导入库 4、执行 总结 一、介绍 pyth...

目录 前言 开发工具 环境搭建 实战记录 一. 验证码简介 二.破解滑块验证码 2.1 计算滑块到缺口的距离 2.2 将滑块拖到缺口位置 前言 记录一次利用Python+Selenium破解滑块验证码的实战过程...

目录 一、PyCharm 2021.2 (Professional) 的安装与激活 二、PyCharm 2021.2 (Professional) 调试远程服务器程序 1、在 PyCharm 中导入项目或者选择新建项目 2、在服务器端与该项目对应的目录下面创建同...

导语 幼儿园升小学，小学升中学，中学升高中.......... 每个人都要经历的九年义务教育：伴随的都是作业、随堂考、以及每个科目的大大小小的考试。当然小编被考试支配的恐惧以及过...

目录 tensorflow是非常强的工具，生态庞大 tensorflow提供了Keras的分支 Define tensor constants. Linear Regression 分类模型 本例使用MNIST手写数字 Model prediction: 7 Model prediction: 2 Model prediction: 1 Model...

目录 1. Qt 的用法 2. Pycharm 设置 2.1 安装 Pyqt5 和 pyinstaller 包 2.2 Pycharm pyqt工具配置 3 UDP图形界面设计 3.1 GUI设计 3.2 将GUI文件转换为py文件 3.3 widget窗体提升，整合matplotlib的功能 3.4 GUI 设计...

目录 一、深度学习为什么要搭建GPU运算环境？ 什么是CUDA？ 什么是Cudnn 二、搭建GPU运算环境 CUDA的下载 Cudnn的下载 三、Ananconda3的安装 什么是Anaconda？ 下载Anaconda3 四、Anaconda虚拟环境的...

目录 导语 正文 总结 导语 现在每一次出门，女友就喜欢拍照！BUT嫌弃我给拍的照片角度不对，采光不好....... 总之一大堆理由，啥时候让我拍照的水平能有美颜相机三分之一的效果就好...

目录 概述 词向量 词向量维度 Word2Vec CBOW 模型 Skip-Gram 模型 负采样模型 词向量的训练过程 1. 初始化词向量矩阵 2. 神经网络反向传播 词向量模型实战 训练模型 使用模型 概述 从今天开...

目录 1. Pandas的两种数据类型 2. Series类型 通过numpy array 通过Python字典 通过标量值（Scalar） name属性 3. DataFrame类型 通过包含列表的Python List 通过包含Python 字典的Python List 通过Series 在网络...

目录 1. 文章重点和项目介绍 2. 数据集研究和图表准备 2.1 导入数据集 2.2 绘制图表 图表1：2019年上海，北京，深圳三地的每天AQI变化曲线 图表2：2019年上海，北京，深圳三地的每月平均...

目录 前言 第一步：文本内容的确定 第二步：微信端发送消息的实现 第三步：定时任务的设置 总结 前言 事件背景是经常有很多琐碎的事情需要在某个时间点去做，光靠人力去记，容易...

目录 元组 集合 字符串 1、字符串的驻留机制 2、常用操作 函数 1、函数的优点： 2、函数的创建：def 函数名（[输入参数]) 3、函数的参数传递： 4、函数的返回值： 5、函数的参数定义：...

目录 1. fixture的作用域 1.1 scope 1.function： 2.class： 3.module： 4.package: 5.session: 1.2 动态作用域(Dynamic scope) 1.带参数-k运行 2.无参数-k运行 2. fixture的实例化顺序 2.1 作用域级别高的fixture先执行...

目录 一、容器 1.什么是容器？ 二、可迭代对象 1.什么是可迭代对象？ 三、迭代器 四、序列 五、列表推导式 六、生成器 1.生成器的第一种创建方法：生成器表达式 2.生成器的第二种创...