分类：提取

2020
10-08

PHP xpath提取网页数据内容代码解析

想要使用xpath来解析html内容,PHP自带两个对象DOMDocument，DOMXpath，其中初始化loadHtml一般都会报很多警告，但是并不影响使用，用@屏蔽错误。/***初始化DOMXpath对象**@param[type]$content网页内容*@param[array]$pathinfo匹配信息**@returnvoid*/privatefunction_createXpathObj($content,$patinfo){//如果没有xpath配置项，不初始化xpathif(!$this->_existsXpathParse... 继续阅读 >

2020
10-01

opencv 实现特定颜色线条提取与定位操作

本篇文章通过调用opencv里的函数简单的实现了对图像里特定颜色提取与定位，以此为基础，我们可以实现对特定颜色物体的前景分割与定位，或者特定颜色线条的提取与定位主要步骤:将RGB图像转化为HSV，H表示色调（度数表示0-180），S表示饱和度（取值0-255），V表示亮度（取值0-255），不同的颜色有着不同的取值范围，一般给出如下：设定待提取颜色的HSV范围值，然后调用inRange函数实现对颜色空间的提取，该函数会将除目标颜色外的其... 继续阅读 >

2020
09-30

基于linux命令提取文件夹内特定文件路径

最近需要实现自动化搜寻特定文件夹下的特定文件，并且需要分别保存文件路径与文件名。算然使用python的walk能够实现，但是感觉复杂了些。于是想看看linux自带的命令是否能完成这项工作。环境需要查找的目录结构如下.|____test||____test2.txt||____test.py||____test.txt||____regex.py|____MongoDB||____.gitignore||____cnt_fail.py||____db目标一：获取所有py文件名如果只使用find.-name'*.py'进行查找，得... 继续阅读 >

2020
09-29

python如何解析复杂sql,实现数据库和表的提取的实例剖析

需求：公司的数据分析师，提交一个sql,一般都三四百行。由于数据安全的需要，不能开放所有的数据库和数据表给数据分析师查询，所以需要解析sql中的数据库和表，与权限管理系统中记录的数据库和表权限信息比对，实现非法查询的拦截。解决办法：在解决这个问题前，现在github找了一下轮子，发现python下面除了sqlparse没什么好的解析数据库和表的轮轮。到是在java里面找到presto-parser解析的比较准。于是自己结合sqlparse源码写... 继续阅读 >