Question

我正在尝试在＆＃39; azkaban＆＃39;上构建查询图层。数据库。（使用的语言：Java）我遇到了，我认为这将是一个简单的问题（但结果令人恼火）。

这是我正在运行的查询：

select exec_id, CONVERT(log USING latin1)from execution_logs

＆＃34;登录＆＃34;是一个类型为＆＃39; longblob＆＃39;

的列

这是我阅读的Java代码＆＃34; log＆＃34; s：

try {
    Connection conn = AzkabanClient.getPhoenixConnection(conf);
    String s = " select exec_id,  log from execution_logs ";
    PreparedStatement pstmt = conn.prepareStatement(s);
    ResultSet rs = pstmt.executeQuery();
    String logString="";
    while(rs.next()){
        int i = rs.getInt("exec_id");
        InputStream inputStream = rs.getBinaryStream("log");
        java.io.BufferedReader in = new BufferedReader(new java.io.InputStreamReader(inputStream));
        String str;
        while ((str = in.readLine()) != null) {
            logString += str;
        }
        inputStream.close();
    }
    conn.close();
}catch(Exception e){
    LOGGER.error("Error =>" + e);
}

这里的问题是：在while循环结束时，我能够阅读＆＃39; log＆＃39;对于表中的一行，但字符串是不可读的（编码？）

例如：

logString = "‹Å\]Ç•}^ÿ>°]ÕÕÝUzY‰”Uà8Žììbg¦¥..."

我试图像这样修改查询：

＆＃34;从execution_logs＆＃34;

中选择exec_id，CONVERT（使用latin1登录）

但仍然是同一个问题。

我试过＆＃34; utf8＆＃34;，但是当我这样做时，我在列中得到NULL＆＃34; log＆＃34;结果集。

如果有人有经验或知道如何解决这个问题，请帮助吗？

与此同时，我会继续尝试。

由于

仍在尝试：我现在正在使用xampp（只是为了进行快速原型设计）。

在phpmyadmin用户界面中，当我点击blob时，它会下载一个＆＃39; .bin＆＃39;文件。在Mac上，我可以打开这个文件并查看正确的＆＃34;英语＆＃34;正如所料，单词（或英文日志）。

但是如何以编程方式执行此操作？

Answer 1

所以在经过大量挖掘azkaban之后，我发现这是人们应该在azkaban中查询LongBlobs的方法 - 数据库：

public String getErrorLog(){
    String returnString = "";
            try {
                Connection conn = AzkabanClient.getPhoenixConnection(conf);
                String s = " select exec_id, enc_type,  log from execution_logs where exec_id = 3964 and name = 'http-time-series-hourly' ";
                PreparedStatement pstmt = conn.prepareStatement(s);
                ResultSet rs = pstmt.executeQuery();
                while (rs.next()) {
                    int i = rs.getInt("exec_id");
                    ByteArrayOutputStream byteStream = new ByteArrayOutputStream();
                    EncodingType encType = EncodingType.fromInteger(rs.getInt("enc_type"));
                    int debug = 0;
                    byte[] data = rs.getBytes("log");
                    try {
                        byte[] buffer = data;
                        ByteArrayOutputStream byteArrayOutputStream = null;
                        if (encType == EncodingType.GZIP) {
                            byteArrayOutputStream = GZIPUtils.unGzipBytesOutputStream(data);
                        }

                        returnString = new String(byteArrayOutputStream.toByteArray(), "UTF-8");
                    } catch (IOException e) {
                        throw new SQLException(e);
                    }
                }
                conn.close();
            } catch (Exception e) {
                LOGGER.error("Error =>" + e);
            }

            return returnString;
}

其中：

GZIPUtils是：

public class GZIPUtils {

    public static ByteArrayOutputStream unGzipBytesOutputStream(byte[] bytes) throws IOException {
        ByteArrayInputStream byteInputStream = new ByteArrayInputStream(bytes);
        GZIPInputStream gzipInputStream = new GZIPInputStream(byteInputStream);

        ByteArrayOutputStream byteOutputStream = new ByteArrayOutputStream();
        IOUtils.copy(gzipInputStream, byteOutputStream);

        return byteOutputStream;
}
}

和EncodingType：

public static enum EncodingType {
    PLAIN(1), GZIP(2);

    private int numVal;

    EncodingType(int numVal) {
        this.numVal = numVal;
    }

    public int getNumVal() {
        return numVal;
    }

    public static EncodingType fromInteger(int x) {
        switch (x) {
            case 1:
                return PLAIN;
            case 2:
                return GZIP;
            default:
                return PLAIN;
        }
    }
}

mysql + Azkaban：阅读＆＃34; LongBlob＆＃34;

1 个答案: