Spark：将KafkaProducer广播到Spark流媒体的最佳方式

Question

要将KafkaProducer广播到spark执行器，我创建了一个如下所示的包装器：

B(M,M)

并使用如下

DO jj=1,M
  CALL zgemm('n', 'n', 1, M, N, cone, C(:), cone, B (jj,:, : ),&
       N, czero, A(:,:), cone )
ENDDO

我只是想知道它是否是正确的方法，或者最好的方法是什么

Answer 1

我真的可以推荐这个blog post。简而言之，您应该通过传递一个＆＃39;配方来为每个分区创建一个可序列化的接收器。创建Kafka制作人。