TLS 握手失败,错误远程错误:tls: bad certificate server=Orderer using Raft and Intermediate certs

时间:2021-03-24 00:13:25

标签: hyperledger-fabric tls1.2

我看到有很多关于这个错误的问题,我看过这个解决方案 Raft bad format,但我仔细检查了一下,文件夹是正确的,证书也在那里,我也看了 Sans problem但据我所知,我在使用 Raft 时不需要 Sans(我可能错了)。我认为我的问题是因为我没有正确处理中间证书,而且我在创建频道和 Raft 共识中都遇到了错误。

这是我到目前为止所做的:

我使用 configtx.yaml 和这个 msp 文件夹结构创建了我的创世区块:

configtx.yaml

    Organizations:
    - &ordererOrg
        Name: orderer
        ID: orderer
        MSPDir: /crypto/msp
        Policies:
            Readers:
                Type: Signature
                Rule: "OR('orderer.member')"
            Writers:
                Type: Signature
                Rule: "OR('orderer.member')"
            Admins:
                Type: Signature
                Rule: "OR('orderer.admin')" 
    Capabilities:
        Channel: &ChannelCapabilities
            V1_4_3: true
        Orderer: &OrdererCapabilities
            V1_4_2: true
        Application: &ApplicationCapabilities
            V1_4_2: true
    Application: &ApplicationDefaults
        Organizations:
        Policies:
            Readers:
                Type: ImplicitMeta
                Rule: "ANY Readers"
            Writers:
                Type: ImplicitMeta
                Rule: "ANY Writers"
            Admins:
                Type: ImplicitMeta
                Rule: "MAJORITY Admins"
        Capabilities:
            <<: *ApplicationCapabilities
    Orderer: &OrdererDefaults
        OrdererType: solo
        BatchTimeout: 2s
        BatchSize:
            MaxMessageCount: 10
            AbsoluteMaxBytes: 99 MB
            PreferredMaxBytes: 512 KB
        Kafka:
            Brokers:
                - 127.0.0.1:9092
        Organizations:
        Policies:
            Readers:
                Type: ImplicitMeta
                Rule: "ANY Readers"
            Writers:
                Type: ImplicitMeta
                Rule: "ANY Writers"
            Admins:
                Type: ImplicitMeta
                Rule: "MAJORITY Admins"
            BlockValidation:
                Type: ImplicitMeta
                Rule: "ANY Writers"
    Channel: &ChannelDefaults
        Policies:
            Readers:
                Type: ImplicitMeta
                Rule: "ANY Readers"
            Writers:
                Type: ImplicitMeta
                Rule: "ANY Writers"
            Admins:
                Type: ImplicitMeta
                Rule: "MAJORITY Admins"
        Capabilities:
            <<: *ChannelCapabilities
    Profiles:
    SampleEtcdRaftProfile:
        <<: *ChannelDefaults
        Capabilities:
            <<: *ChannelCapabilities
        Orderer:
            <<: *OrdererDefaults
            OrdererType: etcdraft
            Addresses:
                - orderer1.xxxx.eastus.aksapp.io:443
                - orderer2.xxxx.eastus.aksapp.io:443
            Organizations:
            - *ordererOrg
            EtcdRaft:
                Consenters:
                    - Host: orderer1
                    Port: 7050
                    ClientTLSCert: /crypto/orderers/orderer1/tls/server.crt
                    ServerTLSCert: /crypto/orderers/orderer1/tls/server.crt
                    - Host: orderer2
                    Port: 7050
                    ClientTLSCert: /crypto/orderers/orderer2/tls/server.crt
                    ServerTLSCert: /crypto/orderers/orderer2/tls/server.crt
            Capabilities:
                <<: *OrdererCapabilities
        Application:
            <<: *ApplicationDefaults
            Organizations:
                - <<: *ordererOrg
        Consortiums:
        SampleConsortium:
            Organizations:
                - *ordererOrg

MSP 文件夹结构:

+ /crypto
  configtx.yaml
  + msp
    + cacerts > ca.crt
    + tlscacerts > ca.crt
    + intermediatecerts > intermediate.crt
    + tlsintermediatecerts > intermediate.crt
    + admincerts > admin.crt
  + orderers
    + orderer1/tls > server.crt
    + orderer2/tls > server.crt

我用这个创建了我的创世区块:

configtxgen -profile SampleEtcdRaftProfile -outputBlock genesis.block -channelID mychannel

现在我怀疑我的订购者内部的 msp 结构是这样的:

+ /var/hyperledger/orderer
  genesis.block
  + msp
    + cacerts > ca.crt
    + intermediatecerts > intermediate.crt
    + admincerts > admin.crt
    + signcerts > cert.pem
    + keystore > key.pem
  + tls
    server.crt
    server.key
    ca.crt
    intermediate.crt

这些是我的环境变量:

ORDERER_GENERAL_TLS_ENABLED=true
ORDERER_GENERAL_TLS_PRIVATEKEY=/var/hyperledger/orderer/tls/server.key
ORDERER_GENERAL_TLS_CERTIFICATE=/var/hyperledger/orderer/tls/server.crt
ORDERER_GENERAL_TLS_CLIENTROOTCAS=/var/hyperledger/orderer/tls/ca.crt
ORDERER_GENERAL_TLS_CLIENTAUTHREQUIRED=false
ORDERER_GENERAL_CLUSTER_CLIENTPRIVATEKEY=/var/hyperledger/orderer/tls/server.key
ORDERER_GENERAL_CLUSTER_CLIENTCERTIFICATE=/var/hyperledger/orderer/tls/server.crt
ORDERER_GENERAL_CLUSTER_ROOTCAS=/var/hyperledger/orderer/tls/ca.crt

我不确定为什么结构不同并且 tls 文件在其他地方,但我正在从我已经成功使用的 azure hyperledger template 复制配置。

现在我的订购者正在运行,但订购者 1 不断开始新的选举,订购者 2 成为候选者,最终因 TLS 握手错误而失败。

这些是 orderer2 中的错误日志:

2021-03-23 22:15:21.969 UTC [orderer.consensus.etcdraft] Step -> INFO f96 2 is starting a new election at term 1 channel=canalenergia node=2
2021-03-23 22:15:21.969 UTC [orderer.consensus.etcdraft] becomePreCandidate -> INFO f97 2 became pre-candidate at term 1 channel=canalenergia node=2
2021-03-23 22:15:21.969 UTC [orderer.consensus.etcdraft] poll -> INFO f98 2 received MsgPreVoteResp from 2 at term 1 channel=canalenergia node=2
2021-03-23 22:15:21.969 UTC [orderer.consensus.etcdraft] campaign -> INFO f99 2 [logterm: 1, index: 2] sent MsgPreVote request to 1 at term 1 channel=canalenergia node=2
2021-03-23 22:15:26.673 UTC [core.comm] ServerHandshake -> ERRO f9a TLS handshake failed with error remote error: tls: bad certificate server=Orderer remoteaddress=x.x.x.x:45472 

我尝试删除intermediate.crt并将ca.crt和intermediate.crt混合到订购者的tls文件夹中的ca.crt中的一个文件中,如下所示:

-----BEGIN CERTIFICATE-----
ROOTCERTxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx
xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx
-----END CERTIFICATE-----
-----BEGIN CERTIFICATE-----
INTERMEDIATExxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx
xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx
-----END CERTIFICATE-----

但也没有用。

我尝试了 openssl verify -CAfile chain.crt orderer1-tls.crt 并返回 OK。

这是我尝试创建新频道时发生的情况:

peer channel create -o orderer1.xxxx.eastus.aksapp.io -c testchannel -f ./channel.tx --tls --cafile /var/hyperledger/peer/msp/tlscacerts/ca.crt --clientauth --certfile /var/hyperledger/peer/tls/cert.pem --keyfile /var/hyperledger/peer/tls/key.pem
2021-03-24 00:04:40.331 UTC [comm.tls] ClientHandshake -> ERRO 001 Client TLS handshake failed after 939.077µs with error: EOF remoteaddress=x.x.x.x:443

我用 telnet 测试了我的网址,它们没问题。

我使用 openSSL 创建了我的证书,但我没有发现它们有任何问题,唯一的区别是它们不是由 Fabric-ca 签署的,而是由一家大公司的中间 CA 签署的。

我已经仔细检查了所有值,但我想如果它们不正确,订购者甚至不会运行,并遵循 azure 中的 script 创建创世块,只添加中间信息。< /p>

任何建议都会很棒。

谢谢

更新:

我用这个变量激活了调试日志:

FABRIC_LOGGING_SPEC="grpc=debug:info"

发现问题是这样的:

传输:身份验证握手失败:x509:证书对任何名称都无效,但想要匹配 orderer1

我的证书有这个主题:

CN=orderer1-tls@blockchain.company.com,O=Company,L=CITY,ST=STATE,C=US

现在,我不明白为什么它告诉我它没有名字,我认为 CN orderer1-tls@blockchain.company.com 是名字,而且,我在哪里告诉订购者要搜索的名称是“orderer1”?

更新 2:

我将我的 TLS 证书更改为 CN=orderer.company.com 然后错误是这样的:

x509: certificate is valid for orderer1.company.com, not orderer1

正如李可以所说,orderer 需要证书 CN 中的主机名,而我的主机名是 orderer1,所以我将其更改为那个。

现在我收到一个新错误:

UTC [comm.grpc.server] 1 -> INFO 118 streaming call completed grpc.service=orderer.Cluster grpc.method=Step grpc.peer_address=x.x.x.x:39424 error="no TLS certificate sent" grpc.code=Unknown grpc.call_duration=161.713µs

我猜这是一个新错误,所以我要提出一个新问题。谢谢!

2 个答案:

答案 0 :(得分:1)

安娜

我在学习面料时遇到了同样的问题。我已经解决了,希望可以帮到你。

例如,当你在 linux 终端中执行时

export CORE_PEER_TLS_ENABLED=true
export CORE_PEER_LOCALMSPID="Org1MSP"
export CORE_PEER_TLS_ROOTCERT_FILE=/home/www/byfn-on-k8s/crypto-config/peerOrganizations/org1.example.com/peers/peer0.org1.example.com/tls/ca.crt
export CORE_PEER_MSPCONFIGPATH=/home/www/byfn-on-k8s/crypto-config/peerOrganizations/org1.example.com/users/Admin@org1.example.com/msp
export CORE_PEER_ADDRESS=peer0.org1.example.com:30011

peer channe list

你会得到正确的结果

并将 CORE_PEER_ADDRESS 更改为 exmaple.com(example.com 将相同的 ip 链接到 peer0.org1.example.com,您可以通过编辑 /etc/hosts 进行设置),

export CORE_PEER_ADDRESS=example.com:30011

peer channe list

您将在对等日志中收到错误“TLS 握手失败,错误远程错误:tls: bad certificate server=PeerServer”

但这并不是你遇到错误“tls: bad certificate”的唯一场景,

我认为这个错误是由“主机名验证”引起的

比如你想访问peer peer0.org1.example.com,这个peer启用服务器tls,你可以在peer env中找到server.crt和server.key。 >

如果你解析server.crt,你会发现这个crt的CN是“peer0.org1.example.com”

当你联系peer“peer0.org1.example.com”时,peer会发给你它的证书,你发现这个证书的CN是“peer0.org1.example.com”,所以你信任这个服务器,

但是当您联系“example.com”(指向与 peer0.org1.example.com 相同的 IP),并且对等方向您发送其证书时,您会发现证书的 CN 是“peer0.org1.example .com”,id 不等于“example.com”,因此您不信任此服务器并出现错误。

答案 1 :(得分:1)

我认为新错误“未发送 TLS 证书”是由于您在订购者环境中设置了 CORE_PEER_TLS_CLIENTAUTHREQUIRED=true。

所以我尝试在 CORE_PEER_TLS_CLIENTAUTHREQUIRED=true 时进行测试,我在选择 raft 时遇到另一个错误“tls:bad certificate”,所以我更改了 orderer env,如下所示:

 - ORDERER_GENERAL_TLS_ENABLED=true
 - ORDERER_GENERAL_TLS_PRIVATEKEY=/var/hyperledger/orderer/tls/server.key
 - ORDERER_GENERAL_TLS_CERTIFICATE=/var/hyperledger/orderer/tls/server.crt
 - ORDERER_GENERAL_TLS_ROOTCAS=[/var/hyperledger/orderer/tls/ca.crt]
 - ORDERER_KAFKA_TOPIC_REPLICATIONFACTOR=1
 - ORDERER_KAFKA_VERBOSE=true
 - ORDERER_GENERAL_TLS_CLIENTAUTHREQUIRED=true
 - ORDERER_GENERAL_TLS_CLIENTROOTCAS=/var/hyperledger/orderer/tls/ca.crt
 - ORDERER_GENERAL_CLUSTER_CLIENTCERTIFICATE=/var/hyperledger/orderer/tls/server.crt
 - ORDERER_GENERAL_CLUSTER_CLIENTPRIVATEKEY=/var/hyperledger/orderer/tls/server.key
 - ORDERER_GENERAL_CLUSTER_ROOTCAS=[/var/hyperledger/orderer/tls/ca.crt]

在elect过程中没有错误,但是当我尝试创建频道时,我没有设置authclient

peer channel create -o orderer.example.com:7050 -c mychannel -f ./channel-artifacts/channel.tx --tls true --cafile /root/go/src/github.com/hyperledger/fabric-samples/first-network/crypto-config/ordererOrganizations/example.com/orderers/orderer.example.com/msp/tlscacerts/tlsca.example.com-cert.pem

我没有设置 authclient,我遇到另一个错误

TLS handshake failed with error tls: client didn't provide a certificate server=Orderer remoteaddress=192.168.192.11:57372

所以我改变了我的命令

peer channel create -o orderer.example.com:7050 -c mychannel -f ./channel-artifacts/channel.tx --tls true --cafile /root/go/src/github.com/hyperledger/fabric-samples/first-network/crypto-config/ordererOrganizations/example.com/orderers/orderer.example.com/msp/tlscacerts/tlsca.example.com-cert.pem --clientauth --certfile /root/go/src/github.com/hyperledger/fabric-samples/first-network/crypto-config/peerOrganizations/org1.example.com/peers/peer0.org1.example.com/tls/server.crt --keyfile /root/go/src/github.com/hyperledger/fabric-samples/first-network/crypto-config/peerOrganizations/org1.example.com/peers/peer0.org1.example.com/tls/server.key

执行成功,可以看到 --certfile 值为 peer 的 server.crt,--keyfile 值为 peer 的 server key。

所以我认为您遇到的问题是由客户端 tls 引起的,您可以检查客户端 crt 和密钥是否正确。

希望这些对你有用。