分类：Python

2021
08-23

Python爬虫必备之XPath解析库

目录一、简介二、安装三、节点3.1选取节点3.2选取未知节点3.3节点关系四、XPath实例一、简介XPath是一门在XML文档中查找信息的语言。XPath可用来在XML文档中对元素和属性进行遍历。XPath是W3CXSLT标准的主要元素，并且XQuery和XPointer都构建于XPath表达之上。Xpath解析库介绍：数据解析的过程中使用过正则表达式,但正则表达式想要进准匹配难度较高,一旦正则表达式书写错误,匹配的数据也会出错。网页由三部... 继续阅读 >

2021
08-23

Python和Pycharm 环境部署详细步骤

一、python下载安装下载安装python最新版本https://www.python.org/downloads/windows/这里勾选添加到环境变量cmd中运行一下看是否安装成功二、pycharm安装下载安装社区免费版本下载：https://www.jetbrains.com/pycharm/安装更改安装路径看自己需求勾选，相关解释如下（1）创建快捷方式：根据你当前系统是32位还是64位进行选择；（2）将pycharm的启动目录添加到环境变量（需要重启），如果需要使用命令行操作pycharm，则勾选该... 继续阅读 >

2021
08-23

python关键字传递参数实例分析

1、说明关键词传递以“形参变量名=实参”的形式参与实参关联，根据形参的名称进行参数传递，使实参和形参的顺序不一致。不用担心定义函数时参数的顺序，直接在传参时指定相应的名称即可。2、两种形式makeup_url(protocal='http',address='www.baidu.com')makeup_url(address='www.baidu.com',protocal='http')3、实例defmakeup_url(protocal,address):print("URL={}://{}".format(protocal,address))内容扩展：python-关键... 继续阅读 >

2021
08-23

python mysql项目实战及框架搭建过程

前言python+mysql.connector，demo实战框架搭建说实话，其实没有使用到框架，只是用了，python+mysql.connector模块首先在开始虚拟环境：(vega-j-vI5SDr)(vega)D:\test\python-mysql\python-mysql\vega>pipinstallmysql.connectorProcessingc:\users\administrator\appdata\local\pip\cache\wheels\7b\14\39\5aad423666e827dfe9a1fbcd111ac17171e7c9865d570780ce\mysql_connector-2.2.9-cp39-cp39-win_amd64.whlInstallingc... 继续阅读 >

2021
08-22

Python合并多张图片成PDF

目录前言过程拍照用到的Python操作库Python遍历文件夹获取图片旋转图片展示方向并压缩像素整体代码将脚本打包成exe安装 PyInstaller打包脚本总结前言最近需要将记的笔记整理成一个pdf进行保存，所以就研究了一下如何利用Python代码将拍下来的照片整个合并成一个pdf过程拿到一个需求最重要的就是将大块任务拆分成一个个小模块，逐个击破。拍照这一步首先是将所有的书页拍好，需要注意的是要按照书的页码来拍，因为后面的... 继续阅读 >

2021
08-20

python缺失值的解决方法总结

1、解决方法（1）忽视元组。缺少类别标签时，通常这样做(假设挖掘任务与分类有关)，除非元组有多个属性缺失值，否则该方法不太有效。当个属性缺值的百分比变化很大时，其性能特别差。（2）人工填写缺失值。一般来说，这种方法需要很长时间，当数据集大且缺少很多值时，这种方法可能无法实现。（3）使用全局常量填充缺失值。将缺失的属性值用同一常数(如Unknown或负无限)替换。如果缺失值都是用unknown替换的话，挖掘程序可能会认为... 继续阅读 >

2021
08-20

Python激活Anaconda环境变量的详细步骤

简洁版Windows10系统下，按Win+R键启动运行，输入cmd，进入命令窗口输入condainfo--envs，查看conda环境变量的路径，base后边就是环境变量的路径。接着输入condaactivate+上述查到的环境变量路径，激活环境变量。如果想停止激活AnacondaPython的环境变量，可以使用condadeactivate命令进行停止激活详细版第一，Windows10系统下，按Win+R键启动运行，输入cmd，进入命令窗口，输入condainit，对conda进行初始化，如果之前做... 继续阅读 >

2021
08-12

python图像处理基本操作总结（PIL库、Matplotlib及Numpy）

一、PIL库对图像的基本操作1、读取图片PIL网上有很多介绍，这里不再讲解。直接操作，读取一张图片，将其转换为灰度图像，并打印出来。fromPILimportImageimportmatplotlib.pyplotaspltpil_im=Image.open("empire.jpeg")pil_image=pil_im.convert("L")plt.gray()plt.imshow(pil_image)plt.show()输出如下所示：2、转换图片格式PIL可以将图像保存为多种格式，下面将PNG格式文件保存为JPG格式：fromPILimportImageimpo... 继续阅读 >

2021
08-12

python字符串的多行输出的实例详解

1、字符串的每行末尾使用\续行以多行的形式书写字符串，每行的末尾使用\续行。需要注意输出内容为一行。>>>string='第一行\…第二行\…第三行'>>>print(string)‘第一行第二行第三行'2、使用三个单引号或三个双引号来表示字符串在Python中字符串也可以使用三个单引号或三个双引号来表示字符串，这样字符串中的内容就可以多行书写，并且被多行输出。使用三引号的方式，字符串可被多行书写，且被多行输出，其中不需要显... 继续阅读 >

2021
08-12

Python机器学习之基于Pytorch实现猫狗分类

目录一、环境配置二、数据集的准备三、猫狗分类的实例四、实现分类预测测试五、参考资料一、环境配置安装Anaconda具体安装过程，请点击本文配置Pytorchpipinstall-ihttps://pypi.tuna.tsinghua.edu.cn/simpletorchpipinstall-ihttps://pypi.tuna.tsinghua.edu.cn/simpletorchvision二、数据集的准备1.数据集的下载kaggle网站的数据集下载地址：https://www.kaggle.com/lizhensheng/-20002.数据集的分类将下载的数据集进行... 继续阅读 >

2021
08-12

Python中json.load()和json.loads()有哪些区别

目录一、图解二、json.loads()用法三、json.load()用法四、此外还有一种json.dumps语法实例一、图解json.loads()：解析一个有效的JSON字符串并将其转换为Python字典json.load()：从一个文件读取JSON类型的数据，然后转转换成Python字典二、json.loads()用法1、例子importjsondata={"name":"Satyamkumar","place":"patna","skills":["Raspberrypi","MachineLearning","WebDevelopment"],"email":"xyz@gmail.com","projec... 继续阅读 >

2021
08-12

python 爬取哔哩哔哩up主信息和投稿视频

项目地址：https://github.com/cgDeepLearn/BilibiliCrawler 项目特点采取了一定的反反爬策略。Bilibili更改了用户页面的api,用户抓取解析程序需要重构。快速开始拉取项目,gitclonehttps://github.com/cgDeepLearn/BilibiliCrawler.git进入项目主目录，安装虚拟环境crawlenv(请参考使用说明里的虚拟环境安装)。激活环境并在主目录运行crawl,爬取结果将保存在data目录csv文件中。ourceactivatecrawl... 继续阅读 >

2021
08-12

Python实现拼音转换

什么是拼音转换在我们学习语言之前，我们一般会学习拼音来认识汉字，并学会如何读汉字。所以，拼音在对于我们语言的重要性不言而喻。而拼音转换指的是将汉字转为拼音的过程。但是，我们中文博大精深，一般来说某个字并不仅仅只有一个读音，比如“翟”，它作为姓氏可以读作zhái，作为其他可读作di。这是就需要结合上下文，或者说结合与其组合的词汇进行转换拼音。不仅如此，拼音还有音调，比如一二三四声表示的意义有时候也是不一... 继续阅读 >

2021
08-12

Python实现简繁体转换

简体繁体转换如今，世界上存在两种中文，一种是中文简体，一种是中文繁体。如果要完全掌握中文语言的自然语言处理，那么简繁都不可避免。所以，掌握了简体与繁体的转换，往往能够事半功倍。而HanLP也提供了简繁转换的类：CharTable，用它来执行字符正规化。比如简体转换繁体，全角转换半角，大写转换小写，都可以使用该类来实现。使用CharTable进行简繁体转换下面，我们来直接使用CharTable进行一段诗词的繁体到简单的转换。具体代... 继续阅读 >

2021
08-12

Python实现简繁体转换

简体繁体转换如今，世界上存在两种中文，一种是中文简体，一种是中文繁体。如果要完全掌握中文语言的自然语言处理，那么简繁都不可避免。所以，掌握了简体与繁体的转换，往往能够事半功倍。而HanLP也提供了简繁转换的类：CharTable，用它来执行字符正规化。比如简体转换繁体，全角转换半角，大写转换小写，都可以使用该类来实现。使用CharTable进行简繁体转换下面，我们来直接使用CharTable进行一段诗词的繁体到简单的转换。具体代... 继续阅读 >

2021
08-12

在Python中如何使用yield

一、生成器如果在一个方法内，包含了yield关键字，那么这个函数就是一个「生成器」。生成器其实就是一个特殊的迭代器，它可以像迭代器那样，迭代输出方法内的每个元素。我们来看一个包含yield关键字的方法：#coding:utf8#生成器defgen(n):foriinrange(n):yieldig=gen(5)#创建一个生成器print(g)#<generatorobjectgenat0x10bb46f50>print(type(g))#<type'generator'>#迭代生成... 继续阅读 >