Python - 在2D网格上对x,y,z值进行分箱

时间:2016-11-13 15:10:51

标签: python binning

我有与z对关联的x,y点列表,例如

x     y                    z
3.1   5.2                  1.3    
4.2   2.3                  9.3
5.6   9.8                  3.5

等等。 z值的总数相对较高,约为10000。 我想在以下意义上收集数据:

1)我想将xy值拆分为单元格,以便在x,y中创建一个二维网格。如果我有Nx x轴的单元格和Ny轴的y,我会在网格上有Nx*Ny个单元格。例如,x的第一个bin可以是1.到2.,第二个是2.到3.依此类推。

2)对于2维网格中的每个单元格,我需要计算落入该单元格的点数,并将所有z值相加。这给了我一个与每个细胞相关的数值。

我考虑过使用binned_statistic中的scipy.stats,但我不知道如何设置选项来完成我的任务。有什么建议?除了binned_statistic之外,其他工具也被广泛接受。

2 个答案:

答案 0 :(得分:1)

假设我明白,您可以通过利用 binned_statistic_2d expand_binnumbers 参数获得所需内容。

from scipy.stats import binned_statistic_2d
import numpy as np

x = [0.1, 0.1, 0.1, 0.6]
y = [2.1, 2.6, 2.1, 2.1]
z = [2.,3.,5.,7.]
binx = [0.0, 0.5, 1.0]
biny = [2.0, 2.5, 3.0]

ret = binned_statistic_2d(x, y, None, 'count', bins=[binx,biny], \
    expand_binnumbers=True)

print (ret.statistic)

print (ret.binnumber)

sums = np.zeros([-1+len(binx), -1+len(biny)])

for i in range(len(x)):
    m = ret.binnumber [0][i] - 1
    n = ret.binnumber [1][i] - 1
    sums[m][n] += sums[m][n] + z[i]

print (sums)

这只是其中一个例子的扩展。这是输出。

[[ 2.  1.]
 [ 1.  0.]]
[[1 1 1 2]
 [1 2 1 1]]
[[ 9.  3.]
 [ 7.  0.]]

答案 1 :(得分:1)

建立单元格的边缘,迭代单元格边缘并使用布尔索引来提取每个单元格中的z值,将总和保存在列表中,转换列表并重新整形。

import itertools
import numpy as np
x = np.array([0.1, 0.1, 0.1, 0.6, 1.2, 2.1])
y = np.array([2.1, 2.6, 2.1, 2.1, 3.4, 4.7])
z = np.array([2., 3., 5., 7., 10, 20])


def pairwise(iterable):
    "s -> (s0,s1), (s1,s2), (s2, s3), ..."
    a, b = itertools.tee(iterable)
    next(b, None)
    return itertools.izip(a, b)

minx, maxx = int(min(x)), int(max(x)) + 1
miny, maxy = int(min(y)), int(max(y)) + 1

result = []
x_edges = pairwise(xrange(minx, maxx + 1))
for xleft, xright in x_edges:
    xmask = np.logical_and(x >= xleft, x < xright)
    y_edges = pairwise(xrange(miny, maxy + 1))
    for yleft, yright in y_edges:
        ymask = np.logical_and(y >= yleft, y < yright)
        cell = z[np.logical_and(xmask, ymask)]
        result.append(cell.sum())

result = np.array(result).reshape((maxx - minx, maxy - miny))


>>> result
array([[ 17.,   0.,   0.],
       [  0.,  10.,   0.],
       [  0.,   0.,  20.]])
>>> 

不幸的是,没有numpy矢量化魔法