• 有了这个库,以后再也不用写正则表达式了!


    这是「进击的Coder」的第 715 篇技术分享

    作者:崔庆才

    4a865bbd3ee5263b5ba50b578613008e.png

    正则表达式大家应该有了解过吧?它功能很强大,但有一个痛点就是不太容易读写,我们需要了解正则的很多语法规则才能写出一个健壮的正则表达式,很多朋友估计听到正则表达式估计都焦头烂额了。

    就没有解决办法吗?

    有的,今天给大家介绍一个可以让我们用“人类”的方式来写正则表达式的库。

    Humre

    没错,这个库就是 Humre,就是 Human(人类) + re(正则表达式) 的组合,单看这个名字还是很有来头啊。

    GitHub 地址:https://github.com/asweigart/humre

    PyPi:https://pypi.org/project/Humre/

    这个库其实很新,第一次 commit 是在 2022/7/21,作者是 Al Sweigart,就是写 pyautogui 库(已有 7.1k star)的那个人,所以还是有一定可信赖度的。

    这个库解决的问题就是让我们可以用更“人类”,也就是更语义化的方式编写正则表达式。

    注意:当前时间(2022/9/4)这个库还没有发布 1.0 版本,所以相关 API 可能会更改,具体的最新 API 请参考原 GitHub 仓库的最新说明。

    基本体验

    OK,我们先来一个例子看看,比如我们我们现在要从一段文字中提取出一个电话号码,比如原文本如下:

    Call 415-555-1234 today!

    我们需要提取出其中的电话号码,那么用常规的正则表达式就是这么写的:

    \d{3}-\d{3}-\d{4}

    意思就是匹配“三个数字-三个数字-四个数字”,那么用 Python 就可以这么写:

    1. from re import *
    2. text = 'Call 415-555-1234 today!'
    3. regexStr = '\d{3}-\d{3}-\d{4}'
    4. result = compile(regexStr).search(text)
    5. print(result.group())

    那么用 Humre 就可以写成这样:

    1. from humre import *
    2. text = 'Call 415-555-1234 today!'
    3. regexStr = exactly(3, DIGIT) + '-' + exactly(3, DIGIT) + '-' + exactly(4, DIGIT)
    4. result = compile(regexStr).search(text)
    5. print(result.group())

    可以看到整个正则表达式就变得语义化了,exactly 指的就是精确匹配,DIGIT 指的就是数字,exactly(3, DIGIT) 就是精确匹配三个数字,也就是 \d{3}的意思。

    运行结果都是一样的:

    415-555-1234

    我们观察可以发现,这里我们仅仅是把 re 这个库换成了 humre,然后修改了下 regexStr 就可以实现正则表达式的语义化表示了,是不是还挺简单的?

    这时候有人说,我现在也没感觉出这个库有什么优势啊,反而写得更长了。

    那好,咱们再来一个例子,找出所有十六进制数字,这个十六进制数字可能带前缀 0x 或者 0X,普通正则怎么写?

    1. import re
    2. re.compile('(?:(?:0x|0X)[0-9a-f]+)|(?:(?:0x|0X)[0-9A-F]+)|(?:[0-9a-f]+)|(?:[0-9A-F]+)')

    感觉可读性怎么样?

    那如果这时候换成 Humre 呢?就可以这样写:

    1. from humre import *
    2. compile(
    3.     either(
    4.         noncap_group(noncap_group(either('0x''0X')), one_or_more(chars('0-9a-f'))),
    5.         noncap_group(noncap_group(either('0x''0X')), one_or_more(chars('0-9A-F'))),
    6.         noncap_group(one_or_more(chars('0-9a-f'))),
    7.         noncap_group(one_or_more(chars('0-9A-F')))
    8.     )
    9. )

    是不是清晰多了?either 指的就是其中某一个符合条件就可以,然后传入了四个参数,noncap_group 指的就是将内容看作一个整体来匹配,one_or_more 指的就是一个或更多,这样我们就可以清晰地知道这个正则表达式什么含义了。

    再来一个例子,匹配一个带或不带逗号的数字,并且可以匹配小数点,那么普通正则就这样写:

    1. import re
    2. re.compile(r'(?:\+|-)?(?:(?:\d{1,3}(?:,\d{3})+)|\d+)(?:\.\d+)?')

    颤抖吧!估计正则专家都不一定一眼读出来这是啥意思,有没有错误。

    那用 Humre 怎么写呢?

    1. from humre import *
    2. compile(
    3.     # optional negative or positive sign:
    4.     optional(noncap_group(either(PLUS_SIGN, '-'))),
    5.     # whole number section:
    6.     noncap_group(either(
    7.         # number with commas:
    8.         noncap_group(between(13, DIGIT), one_or_more(noncap_group(',', exactly(3, DIGIT)))),
    9.         # number without commas:
    10.         one_or_more(DIGIT)
    11.     )),
    12.     # fractional number section (optional)
    13.     optional(noncap_group(PERIOD, one_or_more(DIGIT)))
    14.     )

    是不是又清晰了?

    这里一共拆分为了三部分,正负号、数字、小数点,其中正负号和小数点都是可选的,所以可以加一个 optionalnoncap_group 照例还是整体匹配,然后有一些常量 PLUS_SIGN 就可以代表加号,between 就可代表从几到几。整体这么一拆分,并添加注释和分级,是不是可读性就大大增强了?

    OK,到这里,体会到 Humre 的便捷之处了吧~

    Humre 真的有必要吗?

    在我看来,使用正则的人可能有两种:一种是刚不怎么会刚入门的,另一种是精通正则的。

    如果是刚入门的,那有了 Humre,我们其实可以不用过多关心正则的很多语法,上手起来就会快很多。

    如果是精通正则了,那么其实可以很快写出来某个功能需求的正则表达式,这个没问题。

    但写出来之后,如果遇到问题了想要排查,那其实还得费点功夫,

    当然排查过程也可以借助于很多优秀的正则表达式辅助工具,比如:

    • https://regexr.com/

    • https://regex101.com/

    所以排查问题还好。

    但到了维护阶段,或者项目被别人来维护了,不管是自己还是别人,看到这个正则表达式想看出是什么意思,那其实就不太好办了。

    所以,这种语义化的正则不论对于正则小白还是专家,都是有一定帮助的。

    语义化表

    了解了 Humre 的基本功能之后,如果我们想要使用它的话,其实就是找到它的一些 API 功能就好了,比如 optional, nocap_group 等等都什么意思,对应正则表达式的什么功能,这里总结了一些常用的方法和含义:

    8e0e03db4dd01533a9bafa524d8fca7c.png

    另外还有一些常量表示如下:

    9749a0be872fdb245226091302403a2a.png

    另外 Humre 还提供了一些常用的表达,比如十六进制 HEXADECIMAL,参考如下:

    cebc4ad29d3c2a7ca2e01e20ec90c3cd.png

    这里简单列一下,但最新的 API 建议还是参考官方文档:https://github.com/asweigart/humre#quick-reference

    后面需要做什么?用这个库上手写几个,感受一下,练上几个就熟练了。

    提示

    当然,这个库好用是好用的,但距离成熟可能还有一点时间哈,在 1.0 版本之前,其中的 API 可能还会迭代,所以还不建议直接上生产环境。

    如果真的要上生产环境,建议锁死版本号,避免带来潜在的问题。

    总结

    好了,这里主要就是给大家介绍下这个正则库,有了它,我们的正则表达式就可以变得更加清晰易读,希望对大家有帮助~

    c7c725e2cf5e4e10a7ec37f00e8cea34.png

    End

    崔庆才的新书《Python3网络爬虫开发实战(第二版)》已经正式上市了!书中详细介绍了零基础用 Python 开发爬虫的各方面知识,同时相比第一版新增了 JavaScript 逆向、Android 逆向、异步爬虫、深度学习、Kubernetes 相关内容,‍同时本书已经获得 Python 之父 Guido 的推荐,目前本书正在七折促销中!

    内容介绍:《Python3网络爬虫开发实战(第二版)》内容介绍

    8d9af9f018ff14b796464d3cc9f1af2a.jpeg

    扫码购买

    12bfeecab6789c8eff3aab9533a467e3.png

    好文和朋友一起看~

  • 相关阅读:
    杰理之音频解码的使用流程【篇】
    Mybatis配置文件(mybatis-config.xml)和Mapper映射文件(XXXMapper.xml)模板
    编程参考 - 编程中给变量起名时如何选择前缀,以及匈牙利命名法等
    使用flash_download_tool工具烧录esp8266的固件但无法烧录成功
    [CISCN2019 华北赛区 Day1 Web2]ikun
    强化学习代码实战(3) --- 寻找真我
    GEO生信数据挖掘(五)提取临床信息构建分组,分组数据可视化(绘制层次聚类图,绘制PCA图)
    部署Envoy
    Pandas 掉包侠刷题实战--条件筛选
    我的 Kafka 旅程 - 文件存储机制
  • 原文地址:https://blog.csdn.net/u010467643/article/details/126696987