分类：Python

2020
11-22

Python如何批量生成和调用变量

这几天写代码中遇到的一个常见问题，在Python中如何批量的生成一些变量，如生成变量X1,X2,X3，并在后续的方法中调用，完成赋值、取值等操作。这个问题也算是常见的吧，之前遇到过，也不了了之了。而这次遇到了同样的问题，虽然是创建三个变量数量较少，但从代码维护和易读性的角度考虑，需要使用一些恰当的手段，来避免重复写三次同样代码带来的弊端。一百次，一万次？总不能复制这么多次吧。（为何不复制？详情参考软件工程中的... 继续阅读 >
2020
11-22

在终端启动Python时报错的解决方案

最近，在终端启动Python时，报了一个错误：Failedcallingsys.__interactivehook__Traceback(mostrecentcalllast):File"d:\ProgramData\Anaconda3\lib\site.py",line439,inregister_readlinereadline.read_history_file(history)File"d:\ProgramData\Anaconda3\lib\site-packages\pyreadline\rlmain.py",line165,inread_history_fileself.mode._history.read_history_file(filename)File"d:\ProgramData\An... 继续阅读 >
2020
11-22

python 批量下载bilibili视频的gui程序

运行效果：完整代码：#!/usr/bin/python#-*-coding:utf-8-*-#time:2019/07/02--08:12__author__='Henry''''项目:B站视频下载-GUI版本版本1:加密API版,不需要加入cookie,直接即可下载1080p视频20190422-增加多P视频单独下载其中一集的功能20190702-增加视频多线程下载速度大幅提升20190711-增加GUI版本,可视化界面,操作更加友好'''importrequests,time,hashlib,urllib.request,re,jsonimportimageioimage... 继续阅读 >
2020
11-22

Python ellipsis 的用法详解

背景在Python的基本类型中单例模式的值有三个None类型的None,NotImplemented类型的NotImplemented,Ellipsis类型的...。None已经用的烂大街了，NotImplemented也比较常用，唯独...在江湖上只知它是三巨头之一，但不知其用法。EllipsisEllipsis在python中代表“省略”，用现在的流形语来表达就是“老铁，不要在意这些细节！”。哪什么时候要告诉别人不要在意这些细节呢？其中的一个场景就是随机值。用于文档测试... 继续阅读 >
2020
11-22

python 动态渲染 mysql 配置文件的示例

背景前段时间写了一个自动化安装MySQL的程序，其中有一个环节就是动态的渲染my.cnf文件；总的解决方案就是像Django渲染html页面一样，用渲染模板的方式来解决。[mysqld]basedir={{basedir}}datadir={{datadir}}port={{port}}user={{user}}代码实现我在渲染引擎的选择上使用了jinja2这个模板引擎，去掉其它逻辑一个最小化的代码如下。#!/usr/bin/envpython3fromjinja2importEnvironment,FileSystemLoaderde... 继续阅读 >
2020
11-22

Python paramiko使用方法代码汇总

1、用户名、密码登陆方式importparamikoparamiko.util.log_to_file('paramiko.log')#记录日志文件ssh=paramiko.SSHClient()try:ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())ssh.connect('139.xx.xx.xx',username='work',password='***')cmd='ls'#需要执行的Linux命名stdin,stdout,stderr=ssh.exec_command(cmd)#执行命令后的结构print(stdout.readlines())print(stdout.read().decode(... 继续阅读 >
2020
11-22

python使用requests库爬取拉勾网招聘信息的实现

python使用requests库爬取拉勾网招聘信息的实现 按F12打开开发者工具抓包，可以定位到招聘信息的接口在请求中可以获取到接口的url和formdata，表单中pn为请求的页数，kd为关请求职位的关键字使用python构建post请求data={'first':'true','pn':'1','kd':'python'}headers={'referer':'https://www.lagou.com/jobs/list_python/p-city_0?&cl=false&fromSearch=true&labelWords=&suginput=','user-agent':'Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleW... 继续阅读 >
2020
11-22

Python getsizeof()和getsize()区分详解

sys.getsizeof()获取程序中声明的一个整数，存储在变量中的大小，以字节（Byte）为单位importsysprint(sys.getsizeof(''))print(sys.getsizeof('a'))print(sys.getsizeof('1'))print(sys.getsizeof('a1'))25262627os.path.getsize(path)获取指定路径path下的文件的大小，以字节（Byte）为单位计算机中的单位换算：字节→1024-K→1024-M→1024-G→1024-T…importosprint(os.path.getsize(r'D:\desktop\20180902220822202.jpg'))... 继续阅读 >
2020
11-22

Python request post上传文件常见要点

Python request post上传文件常见要点 通用用法但上图的字段名，类型需要根据不同接口填写，如某服务接口：因而对应的上传代码如下：#输出参数：请求响应报文importrequestsrequest_url='https://XXXXX/file-upload'head={#"Content-Type":"multipart/form-data;boundary=alamofire.boundary.3c7024a080e6a27f",#注意，此处不要写Content-Type"apiVersion":"v1.0.0","appVersion":"v1.0.0","OS":"iOS","OSVersion":"11.4.1","languag... 继续阅读 >
2020
11-22

基于Python的图像阈值化分割(迭代法)

基于Python的图像阈值化分割(迭代法) 1.阈值化分割原理通过对图像的灰度直方图进行数学统计，选择一个或多个阈值将像素划分为若干类。一般情况下，当图像由灰度值相差较大的目标和背景组成时，如果目标区域内部像素灰度分布均匀一致，背景区域像素在另一个灰度级上也分布均匀，这时图像的灰度直方图会呈现出双峰特性。在这种情况下，选取位于这两个峰值中间的谷底对应的灰度值T作为灰度阈值，将图像中各个像素的灰度值与这个阈值进行比较，根据比较的结果将图像中的像... 继续阅读 >
2020
11-22

Python爬虫Scrapy框架CrawlSpider原理及使用案例

提问：如果想要通过爬虫程序去爬取”糗百“全站数据新闻数据的话，有几种实现方法？方法一：基于Scrapy框架中的Spider的递归爬去进行实现的(Request模块回调)方法二：基于CrawlSpider的自动爬去进行实现(更加简洁和高效)一、简单介绍CrawlSpiderCrawlSpider其实是Spider的一个子类，除了继承到Spider的特性和功能外，还派生除了其自己独有的更加强大的特性和功能。其中最显著的功能就是”LinkExtractors链接提取器“。Spider是... 继续阅读 >
2020
11-22

python IP地址转整数

背景今天有人问我“为什么数据库中有人推荐使用int类型来保存IP地址？”。现在(2020年)来看这个东西已经有点过时了，一方面是磁盘空间不在那么贵，另一方面是IPv6与这条法则不兼容。下面我们就来看一下把IPv4地址转换成整数的原理和收益各是什么。转换的原理一个IPv4类的地址共分为四个部分0.0.0.0然而每一个部分的取值范围都在0~255；也就是说每一个部分都可以用一个字节来保存，总共写个字节就够了，4个字节不... 继续阅读 >
2020
11-22

Python django框架 web端视频加密的实例详解

Python django框架 web端视频加密的实例详解 视频加密流程图:后端获取保利威的视频播放授权token,提供接口api给前端参考文档:http://dev.polyv.net/2019/videoproduct/v-api/v-api-play/create-playsafe-token/在utils下创建polyv.py,编写token生成工具函数，path:utils/polyv.pyutils是多个模块的公共函数库的文件夹里面存放自己开发的组件fromdjango.confimportsettingsimporttimeimportrequests#pipinstallrequestsimporthashlibclassPolyvPlayer(object):def... 继续阅读 >
2020
11-22

总结python 三种常见的内存泄漏场景

概要不要以为Python有自动垃圾回收就不会内存泄漏，本着它有“垃圾回收”我有“垃圾代码”的精神，现在总结一下三种常见的内存泄漏场景。无穷大导致内存泄漏如果把内存泄漏定义成只申请不释放，那么借着Python中整数可以无穷大的这个特点，我们一行代码就可以完成内存泄漏了。i=1024**1024**1024循环引用导致内存泄漏引用记数器是Python垃圾回收机制的基础，如果一个对象的引用数量不为0那么是不会被垃圾回收的，我... 继续阅读 >
2020
11-22

Python偏函数实现原理及应用

Python偏函数实现原理及应用 摘要：python的设计核心原则就是简洁——在这种原则的指导下，诞生了lambda表达式和偏函数：二者都让函数调用变得简洁。本文主要为你介绍偏函数的应用。1.为什么要使用偏函数如果我们定义了一个函数，比如说将四个数相加add(one,two,three,four)，上层有很多函数需要调用这个函数。在这些调用中，80%的调用传递的参数都是one=1，two=20，如果我们每都输入相同的参数，这样乏味而且浪费，固然，我们可以通过默认参数来解决这个问题... 继续阅读 >