Python 正则表达式和版权符号

Posted 2023-02-23

【中文标题】Python 正则表达式和版权符号

【英文标题】：Python Regex and the Copyright Symbol

【发布时间】：2013-02-14 01:11:19

【问题描述】：

编辑

有趣的故事，我在搜索之前清理了文本，我清理过程的一部分是删除所有这些符号。因此，我使用的正则表达式工作得很好:) 无论如何，谢谢大家的帮助！

原创

我正在尝试使用 python 和正则表达式检测 UTF8 文本文档中的版权符号 ©。我遇到的问题是我不知道如何在正则表达式中表示版权符号。

我还将寻找 TM 和 (R)，因此它们也将不胜感激，尽管我怀疑一旦我拥有 (C)，确定其他的会很简单。

我一直在谷歌上勇敢地寻找答案，但还没有找到任何可行的方法。

如果有明亮的火花能告诉我，将不胜感激！

谢谢！

【问题讨论】：

呃...© 怎么样？只需在正则表达式中插入字符就可以了。 Python 支持（实际上是鼓励）UTF-8 编码的脚本。然后只需使用 unicode 字符串（在 3.x 中是字符串）。

+1 到 Lattyware。这就是它的全部。 （如果您不知道在哪里可以找到所有这些符号，请参阅 ***.com/questions/15102222/… 和其他半打相关问题。）

【参考方案1】：

您可以将文本转换为 unicode 并使用 unicode 正则表达式模式。

这是你提到的三个符号：

In [213]: print(u'\NCOPYRIGHT SIGN \NTRADE MARK SIGN \NREGISTERED SIGN')
© ™ ®

这里是一些 utf-8 编码字符串：

In [223]: content = u'\NTRADE MARK SIGN'.encode('utf-8')

这里我们将其转换为 unicode：

In [224]: text = content.decode('utf-8')

这是对三个符号中任何一个的正则表达式搜索：

In [225]: re.search(u'(\NCOPYRIGHT SIGN|\NTRADE MARK SIGN|\NREGISTERED SIGN)', text)
Out[225]: <_sre.SRE_Match at 0x9a1ebe0>

---

每个 unicode 字符都有 webpages which catalog。但是分配的unicode码位有几十万个，所以手动浏览搜索字符是不可行的。

所以，我编写了下面的程序来按名称搜索 unicode。

import sys
import unicodedata as ud
import re
import argparse
import functools

__usage__ = '''\
unicode_lookup.py -u '\d'    # Shows all unicode symbols that regex match '\d'
unicode_lookup.py number     # Shows all unicode symbols whose name regex matches 'number'
'''


def lookup(name_pat=None, from_num=0, to_num=0x10ffff, unicode_pattern=None,
           category_pattern=None, ignore_unnamed=True,
           combining=False):
    fmt = u"symbol num cat bi w comb mir 'name'"
    print(fmt.format(
        symbol='Symbol', num='Num', name='NAME',
        cat='Category', bi='Bidirectional', w='Width',
        comb='Combining', mir='Mirrored'))
    for num in range(from_num, to_num + 1):
        s = unichr(num)
        if unicode_pattern and not unicode_pattern.match(s):
            continue
        category = ud.category(s)
        if category_pattern and not category_pattern.match(category):
            continue
        try:
            name = ud.name(s)
            if name_pat and not name_pat.search(name):
                continue
        except ValueError:
            if ignore_unnamed:
                continue
            else:
                name = '?'
        bidirectional = ud.bidirectional(s)
        combining_class = ud.combining(s)
        if combining and not combining_class:
            continue
        mirrored = ud.mirrored(s)
        width = ud.east_asian_width(s)
        data = dict(num=num, symbol=s, name=name,
                    cat=category, bi=bidirectional, w=width,
                    comb=combining_class, mir=mirrored)
        print(fmt.format(**data).encode('utf-8'))


def parse_options():
    parser = argparse.ArgumentParser(
        epilog=__usage__,
        formatter_class=argparse.RawDescriptionHelpFormatter)
    parser.add_argument('name_pat',
                        type=functools.partial(re.compile, flags=re.IGNORECASE))
    parser.add_argument('-f', '--from_num', default=0, type=int)
    parser.add_argument('-t', '--to_num', default=0x10ffff, type=int)
    parser.add_argument('-u', '--unicode_pattern',
                        type=functools.partial(re.compile, flags=re.UNICODE))
    parser.add_argument('--category_pattern', type=re.compile)
    parser.add_argument('--show_unnamed', action='store_true')
    parser.add_argument('--combining', action='store_true')
    return parser.parse_args()

if __name__ == '__main__':
    opt = parse_options()
    lookup(name_pat=opt.name_pat, from_num=opt.from_num, to_num=opt.to_num,
           unicode_pattern=opt.unicode_pattern,
           category_pattern=opt.category_pattern,
           ignore_unnamed=not opt.show_unnamed,
           combining=opt.combining)

跑步

% unicode_lookup.py "copyright|trade|registered"

产量

Symbol Num Category Bidirectional Width Combining Mirrored 'NAME'
© 169 So ON N 0 0 'COPYRIGHT SIGN'
® 174 So ON A 0 0 'REGISTERED SIGN'
℗ 8471 So ON N 0 0 'SOUND RECORDING COPYRIGHT'
™ 8482 So ON A 0 0 'TRADE MARK SIGN'

【讨论】：

嗯！我不知道 'u'\Nname' 的事情，这很好。在那里有效和无效的名称的完整列表在哪里？ these 似乎被击中了..

不错的一个。我正在为我的杂项实用程序文件夹窃取您的脚本：D

【参考方案2】：

你在寻找这样的东西吗？

import re

text = '***® © 2013 - A great place to code™'
for m in re.finditer(r"[©®™]", text):
    print '%02d-%02d: %s' % (m.start(), m.end(), m.group(0))

这个输出是：

13-14: ®
15-16: ©
45-46: ™