在这种情况下,我们需要一个应用程序才能连接到两个版本的kafka(0.7.2和0.10.0+)并充当路由器。我试图在此处省略使用两个运行时,因为我们需要快速愚蠢,因此希望在运行时之间发送数据时防止其他序列化/反序列化。
为此,我尝试将旧的kafka驱动程序从软件包 kafka 重新打包为 old.kafka 像这样:
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>kafka-router</artifactId>
<groupId>org.deer</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>old-kafka</artifactId>
<version>1.0-SNAPSHOT</version>
<properties>
<kafka.version>0.7.2</kafka.version>
</properties>
<build>
<plugins>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-dependency-plugin</artifactId>
<version>3.1.1</version>
<executions>
<execution>
<id>unpack</id>
<phase>compile</phase>
<goals>
<goal>unpack</goal>
</goals>
<configuration>
<artifactItems>
<artifactItem>
<groupId>org.apache.kafka</groupId>
<artifactId>kafka_2.9.2</artifactId>
<version>${kafka.version}</version>
<type>jar</type>
<overWrite>false</overWrite>
<outputDirectory>${project.build.directory}/classes</outputDirectory>
<includes>**/*.class,**/*.xml</includes>
</artifactItem>
</artifactItems>
<includes>**/*.java</includes>
<overWriteReleases>false</overWriteReleases>
<overWriteSnapshots>true</overWriteSnapshots>
</configuration>
</execution>
</executions>
</plugin>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-shade-plugin</artifactId>
<version>2.2</version>
<executions>
<execution>
<phase>package</phase>
<goals>
<goal>shade</goal>
</goals>
<configuration>
<relocations>
<relocation>
<pattern>kafka.</pattern>
<shadedPattern>old.kafka.</shadedPattern>
</relocation>
</relocations>
</configuration>
</execution>
</executions>
</plugin>
</plugins>
</build>
</project>
我正在使用依赖插件将kafka类解压到目标/类和阴影插件以重新打包它们。原因是最终的jar应该像是kafka驱动程序jar一样工作(它没有其他可传递的依赖项,因此使用 kafka 不会导致某些不匹配>,而不是 old.kafka 。但这并不是重点,只是为了防止出现话题外的问题。
这里的主要问题是,当我查看已安装到.m2的jar时,它看起来正确(具有 old.kafka 软件包):< / p>
但是当我尝试像这样使用该jar作为依赖项时...
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>kafka-router</artifactId>
<groupId>org.deer</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>router-app</artifactId>
<version>1.0-SNAPSHOT</version>
<dependencies>
<dependency>
<groupId>org.deer</groupId>
<artifactId>old-kafka</artifactId>
<version>1.0-SNAPSHOT</version>
</dependency>
</dependencies>
</project>
...并像这样在类中引用它...
package org.deer.test;
import old.kafka.producer.ProducerData;
public class TwoKafkaDriversExample {
public static void main(String[] args) {
new ProducerData();
}
}
...自身导入无效。我怀疑带阴影的罐子缺少与Maven相关的内容,但没有发现任何东西。不过,另一种可能是,shadow plugin或asm不喜欢scala类正在生成的字节码。
答案 0 :(得分:6)
好的,所以我已经弄清楚了。导入错误是intelij的问题,由于某种原因,它看不到重新打包的类。但是行家确实做到了,通过使用正确的构造函数并添加scala-lang依赖关系(它抱怨缺少Seq类),我能够构建它。
完整示例上传到github-https://github.com/Marssmart/kafka-router