这个问题来自于创建crossfilter
数据集时遇到的一些困难,特别是关于如何对不同维度进行分组并计算派生值。最终目标是使用维度和组获得许多dc.js
图表。
(小提琴示例https://jsfiddle.net/raino01r/0vjtqsjL/)
在继续解释设置之前,关键问题如下:
如何创建自定义add
,remove
,init
,传入.reduce
的函数,以便前两个不会将多次相同的功能相加吗
我想说我想监控多台机器的故障率(仅举例)。我使用不同的维度:月份,机器的位置和失败类型。
例如,我有以下形式的数据:
| month | room | failureType | failCount | machineCount |
|---------|------|-------------|-----------|--------------|
| 2015-01 | 1 | A | 10 | 5 |
| 2015-01 | 1 | B | 2 | 5 |
| 2015-01 | 2 | A | 0 | 3 |
| 2015-01 | 2 | B | 1 | 3 |
| 2015-02 | . | . | . | . |
对于三个给定的维度,我应该:
基本上,此设置中的重要因素是情侣(day, room)
。即给一天和一个房间应该有一个附加费率(然后交叉过滤器应该采取行动,以考虑其他过滤器)。
因此,一种方法可以是存储已经使用过的夫妻,而不是为他们求machineCount
- 但我们仍然想要更新failCount
值。
我的尝试是创建自定义缩减功能,而不是总结已经考虑过的MachineCount
。
然而,有一些意想不到的行为。 我确定这不是要走的路 - 所以我希望对此有一些建议。 //维度是以下之一: // ndx = crossfilter(data); // ndx.dimension(function(d){return d.month;}) // ndx.dimension(function(d){return d.room;}) // ndx.dimension(function(d){return d.failureType;}) //目标:有一个通用的方法来获得给定维度的小组:
function get_group(dim){
return dim.group().reduce(add_rate, remove_rate, initial_rate);
}
// month is given as datetime object
var monthNameFormat = d3.time.format("%Y-%m");
//
function check_done(p, v){
return p.done.indexOf(v.room+'_'+monthNameFormat(v.month))==-1;
}
// The three functions needed for the custom `.reduce` block.
function add_rate(p, v){
var index = check_done(p, v);
if (index) p.done.push(v.room+'_'+monthNameFormat(v.month));
var count_to_sum = (index)? v.machineCount:0;
p.mach_count += count_to_sum;
p.fail_count += v.failCount;
p.rate = (p.mach_count==0) ? 0 : p.fail_count*1000/p.mach_count;
return p;
}
function remove_rate(p, v){
var index = check_done(p, v);
var count_to_subtract = (index)? v.machineCount:0;
if (index) p.done.push(v.room+'_'+monthNameFormat(v.month));
p.mach_count -= count_to_subtract;
p.fail_count -= v.failCount;
p.rate = (p.mach_count==0) ? 0 : p.fail_count*1000/p.mach_count;
return p;
}
function initial_rate(){
return {rate: 0, mach_count:0, fail_count:0, done: new Array()};
}
如上所述,需要使用以前的代码创建dimension, group
,使用dc.js
在三个不同的条形图中传递。
每个图表都有.valueAccessor(function(d){return d.value.rate};)
。
有关实现,请参阅jsfiddle(https://jsfiddle.net/raino01r/0vjtqsjL/)。数字不同,但数据结构是一样的。请注意,在小提琴中你期望Machine count
为18(在两个月内),但是你总是得到双倍(因为2个不同的位置)。
根据Ethan Jewett的回答,我使用reductio
来处理分组。更新的小提琴在这里https://jsfiddle.net/raino01r/dpa3vv69/
在汇总reducer
值时,我的(month, room)
对象需要两个异常machineCount
。因此它构建如下:
var reducer = reductio()
reducer.value('mach_count')
.exception(function(d) { return d.room; })
.exception(function(d) { return d.month; })
.exceptionSum(function(d) { return d.machineCount; })
reducer.value('fail_count')
.sum(function(d) { return d.failCount; })
这似乎可以在渲染图形时修复数字。
然而,过滤一个月并查看type
图表中的数字时,我确实有一种奇怪的行为。
而是双重创建两个异常,我可以在处理数据时合并两个字段。即一旦定义了数据,我就可以了:
data.foreach(function(x){
x['room_month'] = x['room'] + '_' + x['month'];
})
然后上面的缩减代码应该成为:
var reducer = reductio()
reducer.value('mach_count')
.exception(function(d) { return d.room_month; })
.exceptionSum(function(d) { return d.machineCount; })
reducer.value('fail_count')
.sum(function(d) { return d.failCount; })
此解决方案似乎有效。但是我不确定这是否是一个明智的事情:如果数据集很大,添加一个新功能可能会减慢很多东西!
答案 0 :(得分:2)
一些事情:
不要计算Crossfilter减速器的费率。计算费率的组成部分。这将保持更简单和更快。在您的值访问器中进行实际划分。
你基本上得到了正确的想法。我认为我立即看到了两个问题:
在您的p.done
中,您没有从if (index) p.done.splice(p.done.indexOf(v.room+'_'+monthNameFormat(v.month)), 1);
数组中删除密钥。你应该做index
之类的事情来删除它。
在reduce函数中,(index == -1)
是一个布尔值。 true
永远不会评估为var count_to_sum = index ? v.machineCount:0;
,IIRC。因此,您添加的计算机数量始终为0.请改用var reducer = reductio()
reducer.value('mach_count')
.exception(function(d) { return d.room; })
.exceptionSum(function(d) { return d.machineCount; })
reducer.value('fail_count')
.sum(function(d) { return d.failCount; })
var dim = ndx.dimension(...)
var grp = dim.group()
reducer(group)
。
如果你想把一个有效的例子放在一起,我或其他人会乐意为你做好准备,我确定。
您可能还想尝试Reductio。 Crossfilter Reducer很难正确有效地完成,因此使用库来提供帮助是有意义的。使用Reductio,创建一个计算机器数量和故障计数的组如下所示:
{{1}}