有什么方法可以使用readStream()方法从HashSet中读取数据作为Spark结构化流吗?

时间:2018-12-14 10:21:20

标签: apache-spark hashmap

使用Spark Structured流方法的readStream()方法从HashMap中读取数据。

1 个答案:

答案 0 :(得分:0)

不,没有

至少,您需要并行化映射,但是如果应用架构,则它将变为RDD或数据框。

Spark(和类似框架)中的流是其无限量的数据。在Hashmap或Hashset存在的任何时刻,它都有固定的$(function() { document.addEventListener('globalPasser', function(response) { if(response.detail){ // store variables } }, true); var passGlobals = document.createElement('script'); passGlobals.src = chrome.extension.getURL('injectedScript.js'); (document.head||document.documentElement).appendChild(passGlobals); passGlobals.onload = function() { passGlobals.remove(); }; } ,因此不是流