s3fs获取文件引发输入/输出错误或无法从远程文件“ / mnt / s3 /”读取:失败

时间:2020-09-30 21:54:58

标签: amazon-web-services docker amazon-s3 sftp s3fs

我试图用s3fs设置sftp,但是遇到文件访问错误。

我创建了在入口点安装了S3存储桶的docker映像,我可以ssh \ sftp到其容器,并从S3存储桶查看文件和文件夹。 但我无法获取此文件:

sftp:

s     get pin
Fetching /mnt/s3/pin to pin
/mnt/s3/pin                                                                                                  0%    0     0.0KB/s - stalled -
Couldn't read from remote file "/mnt/s3/pin" : Failure

ssh:

sftpusername@1234ebc1e2e3:~/s3$ cat pin
cat: pin: Input/output error

应该是什么原因?

这是入口点:

#!/bin/bash

adduser --disabled-password --gecos "" $SFTP_USER

echo "$SFTP_USER:$SFTP_PASSWORD" | chpasswd
echo "$AWS_ACCESS_KEY_ID:$AWS_SECRET_ACCESS_KEY" > ~/.passwd-s3fs
chmod 600 ~/.passwd-s3fs
mkdir -p /mnt/s3
s3fs $S3_BUCKET /mnt/s3 -o passwd_file=~/.passwd-s3fs -o allow_other -o uid=$(id -u $SFTP_USER)

ln -s /mnt/s3 /home/$SFTP_USER

echo "SFTP user: $SFTP_USER"
echo "S3 Bucket: $S3_BUCKET"
echo "Ready to accept connections..."
exec /usr/sbin/sshd -D

Dockerfile:

FROM ubuntu:16.04

ENV DEBIAN_FRONTEND=noninteractive

RUN apt-get -y update
RUN apt-get -y install openssh-server
RUN apt-get -y install automake autotools-dev g++ git libcurl4-gnutls-dev libfuse-dev libssl-dev libxml2-dev make pkg-config
RUN git clone https://github.com/s3fs-fuse/s3fs-fuse.git && \
    cd s3fs-fuse && \
    ./autogen.sh && \
    ./configure && \
    make && \
    make install

RUN mkdir -p /var/run/sshd

COPY entrypoint /
RUN chmod +x /entrypoint

EXPOSE 22

ENTRYPOINT ["/entrypoint"]

制作图片:

docker build -t sftp/s3fs .

运行容器

docker run -p 22 --privileged --env AWS_ACCESS_KEY_ID --env AWS_SECRET_ACCESS_KEY --env SFTP_USER --env SFTP_PASSWORD --env SSH_KEY --env S3_BUCKET --env S3_KEY sftp/s3fs

之后,我可以ssh \ sftp到容器(这是从22转发的端口,可以用dokcer ps检查)

sftp -P 32775 sftpusername@localhost

在容器内,我可以看到带有已安装的s3存储桶(目录和文件)的s3存储桶。 我可以创建新目录,删除创建的目录,但无法获取文件,该文件位于存储桶中。

1 个答案:

答案 0 :(得分:0)

更改获取s3fs的方式可以解决此问题。

我开始使用apt-get:

RUN apt-get -y install s3fs

代替git clone

RUN git clone https://github.com/s3fs-fuse/s3fs-fuse.git && \
cd s3fs-fuse && \
./autogen.sh && \
./configure && \
make && \
make install