清理pandas datafram中的URL列

Question

我有csv（或dataframe），内容如下：

date          | URLs                                         | Count
-----------------------------------------------------------------------
17-mar-2014   | www.example.com/abcdef&=randstring           | 20
10-mar-2016   | www.example.com/xyzabc                       | 12
14-apr-2015   | www.example.com/abcdef                       | 11
12-mar-2016   | www.example.com/abcdef/randstring            | 30
15-mar-2016   | www.example.com/abcdef                       | 10
17-feb-2016   | www.example.com/xyzabc&=randstring           | 15
17-mar-2016   | www.example.com/abcdef&=someotherrandstring  | 12

我想清理“url”列，在这里我想将www.example.com/abcdef&=randstring或{}转换为www.example.com/abcdef，以此类推，对于所有行。在

我尝试使用urlparse库，并解析url，使其只与urlparse(url).path/query/params组合在一起。但是，由于每个URL都指向完全不同的path/query/params，所以它效率低下。在

有没有办法用熊猫来解决这个问题？如有任何提示/建议，我们将不胜感激。在

Answer 1

我认为您可以通过regex-过滤a-z和{}之间的a-z和{}创建的所有字符串，另一个字符串以/开头：

print (df.URLs.str.extract('(www.[a-zA-Z]*.com/[a-zA-Z]*)', expand=False))
0    www.example.com/abcdef
1    www.example.com/xyzabc
2    www.example.com/abcdef
3    www.example.com/abcdef
4    www.example.com/abcdef
5    www.example.com/xyzabc
6    www.example.com/abcdef
Name: URLs, dtype: object