有没有一种方法可以将令牌列表中的两个令牌组合起来？

Question

我想知道如果令牌后面有特定的令牌，我们是否可以添加令牌。例如：

This is a test token and it is a test to see if it works.

在上面的句子中，假设我们得到的代币是：

^{pr2}$

我想做的是如果有一个名为token的令牌，我希望test token是单个令牌。在

我环顾四周，尝试了所有的方法，但我没能修好。在

Answer 1

你以为你是这个意思，。在

>>> import re
>>> s = "This is a test token and it is a test to see if it works."
>>> re.findall(r'\btest token\b|\S+', s)
['This', 'is', 'a', 'test token', 'and', 'it', 'is', 'a', 'test', 'to', 'see', 'if', 'it', 'works.']