在ElementTree文本中插入标签
我正在使用Python的ElementTree模块来处理HTML内容。 我想强调一些特定的词语,而我现在的做法是:
for e in tree.getiterator():
for attr in 'text', 'tail':
words = (getattr(e, attr) or '').split()
change = False
for i, word in enumerate(words):
word = clean_word.sub('', word)
if word.lower() in glossary:
change = True
words[i] = word.replace(word, '<b>' + word + '</b>')
if change:
setattr(e, attr, ' '.join(words))
上面的代码会检查每个元素的文本,并强调它找到的重要词汇。 不过,它是通过在文本属性中嵌入HTML标签来实现的,但在渲染时这些标签会被转义,所以我需要用以下方式来处理:
html = etree.tostring(tree).replace('>', '>').replace('<', '<')
这样做让我觉得不太舒服,所以我想找个更合适的方法。 不过,要嵌入一个新的元素,我需要调整'text'和'tail'属性,以确保强调的文本出现在同样的位置。这样在遍历的时候会变得非常棘手。
如果有任何建议能让我更好地做到这一点,我会非常感激。我相信在API中还有我没有注意到的东西!
2 个回答
1
虽然ElementTree在处理大多数XML任务时非常简单易用,但对于混合内容来说就不太方便了。我建议使用DOM解析器:
from xml.dom import minidom
import re
ws_split = re.compile(r'\s+', re.U).split
def processNode(parent):
doc = parent.ownerDocument
for node in parent.childNodes[:]:
if node.nodeType==node.TEXT_NODE:
words = ws_split(node.nodeValue)
new_words = []
changed = False
for word in words:
if word in glossary:
text = ' '.join(new_words+[''])
parent.insertBefore(doc.createTextNode(text), node)
b = doc.createElement('b')
b.appendChild(doc.createTextNode(word))
parent.insertBefore(b, node)
new_words = ['']
changed = True
else:
new_words.append(word)
if changed:
text = ' '.join(new_words)
print text
parent.replaceChild(doc.createTextNode(text), node)
else:
processNode(node)
另外,我还使用了正则表达式来分割单词,以避免它们粘在一起:
>>> ' '.join(ws_split('a b '))
'a b '
>>> ' '.join('a b '.split())
'a b'
4
你也可以使用XSLT和自定义的XPath函数来实现这个功能。
下面是一个例子。这个例子还需要一些改进,比如清理元素末尾多余的空格和处理混合文本,但这也是一个不错的思路。
给定这个输入:
<html>
<head>
</head>
<body>
<p>here is some text to bold</p>
<p>and some more</p>
</body>
</html>
而且词汇表包含两个词:some, bold
那么示例输出是:
<?xml version="1.0"?>
<html>
<head/>
<body>
<p>here is <b>some</b> text to <b>bold</b> </p>
<p>and <b>some</b> more </p>
</body>
</html>
这是代码,我也把它发布在了http://bkc.pastebin.com/f545a8e1d上。
from lxml import etree
stylesheet = etree.XML("""
<xsl:stylesheet version="1.0"
xmlns:btest="uri:bolder"
xmlns:xsl="http://www.w3.org/1999/XSL/Transform">
<xsl:template match="@*">
<xsl:copy />
</xsl:template>
<xsl:template match="*">
<xsl:element name="{name(.)}">
<xsl:copy-of select="@*" />
<xsl:apply-templates select="text()" />
<xsl:apply-templates select="./*" />
</xsl:element>
</xsl:template>
<xsl:template match="text()">
<xsl:copy-of select="btest:bolder(.)/node()" />
</xsl:template>
</xsl:stylesheet>
""")
glossary = ['some', 'bold']
def bolder(context, s):
results = []
r = None
for word in s[0].split():
if word in glossary:
if r is not None:
results.append(r)
r = etree.Element('r')
b = etree.SubElement(r, 'b')
b.text = word
b.tail = ' '
results.append(r)
r = None
else:
if r is None:
r = etree.Element('r')
r.text = '%s%s ' % (r.text or '', word)
if r is not None:
results.append(r)
return results
def test():
ns = etree.FunctionNamespace('uri:bolder') # register global namespace
ns['bolder'] = bolder # define function in new global namespace
transform = etree.XSLT(stylesheet)
print str(transform(etree.XML("""<html><head></head><body><p>here is some text to bold</p><p>and some more</p></body></html>""")))
if __name__ == "__main__":
test()