如何使用ix索引pandas多重索引

Question

我设置了一些代码，如下所示：

import pandas as pd
import numpy as np
arrays = [['bar', 'bar', 'baz', 'baz', 'foo', 'foo', 'qux', 'qux'],
          ['one', 'two', 'one', 'two', 'one', 'two', 'one', 'two'],
          ['aaa', 'bbb', 'ccc', 'ccc', 'ddd', 'eee', 'eee', 'eee' ]]
tuples = zip(*arrays)
index = pd.MultiIndex.from_tuples(tuples, names=['A', 'B', 'C'])
df = pd.DataFrame(np.random.randn(8, 4), index=index)

df
Out[161]: 
                    0         1         2         3
A   B   C                                          
bar one aaa  0.682220 -0.598889 -0.600635 -0.488069
    two bbb -0.134557  1.614224 -0.191303  0.073813
baz one ccc -1.006877 -0.137264 -0.319274  1.465952
    two ccc  0.107222  0.358468  0.165108 -0.258715
foo one ddd  0.360562  1.759095 -1.385394 -0.646850
    two eee -1.113520  0.221483  2.226704 -0.994636
qux one eee -0.609271 -0.888330  0.824189  1.772536
    two eee -0.008346 -0.688091  0.263303  1.242485

我想根据A、B和C这几个条件的组合来找到匹配的行。

比如在SQL中可以这样写：选择所有行，条件是A的值在('foo', 'qux')中，并且C的值是'eee'。

我能用ix来实现这个吗？比如像这样：

df.ix(['foo', 'qux'],:,'eee')

对于非常大的数据集，最好的做法是什么？

（我现在使用的是pandas 0.7，但如果绝对必要的话可以升级。）

Answer 1

我将写一个函数来处理这类事情，这样可以通用：

import numpy as np
def ms(df, *args):
    idx = df.index
    for i, values in enumerate(args):
        if values is not None:
            if np.isscalar(values):
                values = [values]
            idx = idx.reindex(values, level=i)[0]
    return df.ix[idx]

这样你就可以非常简单地做到这一点：

ms(df, ['foo', 'qux'], None, "eee")

Answer 2

从Pandas 0.14版本开始，你可以把一组选择器放在一个元组里，然后传给df.loc，这样就可以对多重索引进行切片操作了：

In [782]: df.loc[(['foo','qux'], slice(None), 'eee'), :]
Out[782]: 
                    0         1         2         3
A   B   C                                          
foo two eee  1.615853 -1.327626  0.772608 -0.406398
qux one eee  0.472890  0.746417  0.095389 -1.446869
    two eee  0.711915  0.228739  1.763126  0.558106