如何授权root运行gsutil?

时间:2017-08-05 23:47:39

标签: authentication authorization google-cloud-storage rsync gsutil

backup_to_gcs.sh是一个备份脚本,它使用gsutil rsync将文件复制到Google云端存储。

备份脚本在用户wolfv(安装了google-cloud-sdk)调用时运行:

$ /home/wolfv/scripts/backup_to_gcs/backup_to_gcs.sh
backup_to_gcs.sh in progress ...
backup_to_gcs.sh pass

到目前为止一切顺利。 但root需要运行gsutil,以便可以从Anacron调用备份脚本。 所以让我们让root运行脚本。

root和wolfv分享凭据是安全的,因为它是同一个人。

root如何运行gsutil?

我在Linux上运行gsutil 4.27。

UPDATE_1

感谢mhouglum,root现在可以调用备份脚本了。 只需要在root的.bashrc中设置一些参数。 详情如下。

“gsutil version -l”中的两行对于用户wolfv和root是不同的:

using cloud sdk
pass cloud sdk credentials to gsutil

备份脚本在用户wolfv调用时运行。这是wolfv数据(BOTO_CONFIG和BOTO_PATH为空):

$ gsutil version -l
gsutil version: 4.27
checksum: 522455e2d24593ff3a2d3d237eefde57 (OK)
boto version: 2.47.0
python version: 2.7.13 (default, Jun 26 2017, 10:20:05) [GCC 7.1.1 20170622 (Red Hat 7.1.1-3)]
OS: Linux 4.11.11-300.fc26.x86_64
multiprocessing available: True
using cloud sdk: True
pass cloud sdk credentials to gsutil: True
config path(s): /home/wolfv/.boto, /home/wolfv/.config/gcloud/legacy_credentials/REDACTED_EMAIL@gmail.com/.boto
gsutil path: /home/wolfv/google-cloud-sdk/platform/gsutil/gsutil
compiled crcmod: True
installed via package manager: False
editable install: False
$ echo $BOTO_CONFIG

$ echo $BOTO_PATH

$ echo $PATH
/home/wolfv/google-cloud-sdk/bin:/home/wolfv/google-cloud-sdk/bin:/usr/lib64/qt-3.3/bin:/usr/lib64/ccache:/usr/local/bin:/usr/local/sbin:/usr/bin:/usr/sbin

这是用户wolfv .bashrc:

$ cat .bashrc
# .bashrc

# after changing .bashrc, use source command to reload your .bashrc file
#   $ source "$HOME/.bashrc"
#   $ source ~/.bashrc

# Source global definitions
if [ -f /etc/bashrc ]; then
    . /etc/bashrc
fi

# User specific aliases and functions
export PATH=${PATH}:$HOME/scripts

# The next line updates PATH for the Google Cloud SDK.
if [ -f '/home/wolfv/google-cloud-sdk/path.bash.inc' ]; then source '/home/wolfv/google-cloud-sdk/path.bash.inc'; fi

# The next line enables shell command completion for gcloud.
if [ -f '/home/wolfv/google-cloud-sdk/completion.bash.inc' ]; then source '/home/wolfv/google-cloud-sdk/completion.bash.inc'; fi

备份脚本也在root用户调用时运行。这是根数据:

$ sudo -s
# gsutil version -l
gsutil version: 4.27
checksum: 522455e2d24593ff3a2d3d237eefde57 (OK)
boto version: 2.47.0
python version: 2.7.13 (default, Jun 26 2017, 10:20:05) [GCC 7.1.1 20170622 (Red Hat 7.1.1-3)]
OS: Linux 4.11.11-300.fc26.x86_64
multiprocessing available: True
using cloud sdk: False
pass cloud sdk credentials to gsutil: False
config path(s): /home/wolfv/.boto, /home/wolfv/.config/gcloud/legacy_credentials/REDACTED_EMAIL@gmail.com/.boto
gsutil path: /home/wolfv/google-cloud-sdk/platform/gsutil/gsutil
compiled crcmod: True
installed via package manager: False
editable install: False
[0 root@localhost ~]
# echo $BOTO_CONFIG

[0 root@localhost ~]
# echo $BOTO_PATH
/home/wolfv/.boto:/home/wolfv/.config/gcloud/legacy_credentials/REDACTED_EMAIL@gmail.com/.boto
[0 root@localhost ~]
# echo $PATH
/usr/lib64/ccache:/sbin:/bin:/usr/sbin:/usr/bin:/home/wolfv/google-cloud-sdk/platform/gsutil:/home/wolfv/google-cloud-sdk/bin:/home/wolfv/google-cloud-sdk/platform/gsutil:/home/wolfv/google-cloud-sdk/bin

这是根.bashrc:

# cat .bashrc
# .bashrc

# User specific aliases and functions

alias rm='rm -i'
alias cp='cp -i'
alias mv='mv -i'

# Source global definitions
if [ -f /etc/bashrc ]; then
    . /etc/bashrc
fi

# added by wolf so anacron can call backup script
export PATH=${PATH}:/home/wolfv/google-cloud-sdk/platform/gsutil:/home/wolfv/google-cloud-sdk/bin
export BOTO_PATH=/home/wolfv/.boto:/home/wolfv/.config/gcloud/legacy_credentials/REDACTED_EMAIL@gmail.com/.boto

# The next line updates PATH for the Google Cloud SDK.
#if [ -f '/home/wolfv/google-cloud-sdk/path.bash.inc' ]; then source '/home/wolfv/google-cloud-sdk/path.bash.inc'; fi

# The next line enables shell command completion for gcloud.
#if [ -f '/home/wolfv/google-cloud-sdk/completion.bash.inc' ]; then source '/home/wolfv/google-cloud-sdk/completion.bash.inc'; fi

UPDATE_2

终端和anacron上的root都可以运行备份脚本 当root运行脚本时,文件在GCS上更新;不错。
当anacron运行脚本时,它返回错误代码127;坏。

使用名为ls.sh的简单脚本

重新生成行为
#!/bin/bash

LOG_FILE="/home/wolfv/scripts/test/ls.log"

echo "I am $(whoami). date=$(date)" >> "$LOG_FILE"

gsutil ls >> "$LOG_FILE"
errorCode=$?

echo "errorCode=$errorCode" >> "$LOG_FILE"

root从终端调用脚本:

# /home/wolfv/scripts/test/ls.sh

ls.log中的结果:

I am root. date=Mon Aug 14 05:21:23 MDT 2017
gs://wolfv/
gs://wolfv2/
gs://wolfvtest/
errorCode=0

anacron调用脚本:

# anacron -n -f ls_id

ls.log中的结果:

I am root. date=Mon Aug 14 05:21:38 MDT 2017
errorCode=127

导致错误代码127的原因是什么?

UPDATE_3

我从UPDATE_2重复测试,但使用cron而不是anacron。 结果类似于cron获得相同的errorCode = 127。

wolfv从终端调用脚本:

$ /home/wolfv/scripts/test/ls.sh

ls.log中的结果:

I am wolfv. date=Fri Aug 18 20:58:57 MDT 2017
gs://wolfv/
gs://wolfv2/
gs://wolfvtest/
errorCode=0

cron调用脚本:

$ crontab -l
#test gsutil on cron
*/10 * * * * /home/wolfv/scripts/test/ls.sh

ls.log中的结果:

I am wolfv. date=Fri Aug 18 21:20:01 MDT 2017
errorCode=127

gsutil脚本可以从终端运行,但不能从cron / anacron运行 什么可能导致cron和anacron返回错误代码127?

1 个答案:

答案 0 :(得分:2)

运行sudo -s后,请检查所有内容是否都设置为您期望的值:

  • echo $BOTO_CONFIG是否显示正确的boto文件?如果没有,也许root的.bashrc没有被采购?
  • echo $PATH是否包含您添加的gsutil目录?
  • 当您运行gsutil version -l时,您应该看到:
    • config path(s)标签,后跟/home/wolfv/.boto
    • gsutil path标签,后跟/home/wolfv/google-cloud-sdk/platform/gsutil/gsutil。如果不是这种情况,可能会有一个gsutil可执行文件显示在你附加的gsutil目录之前的 之前,你可能想尝试预先 gsutil目录到你的PATH,以便首先找到它,例如export PATH=/home/wolfv/google-cloud-sdk/platform/gsutil:${PATH}

如果所有内容都以root用户身份运行,那么您可以以自己和root身份运行gsutil version -l并比较输出,让您看到这些环境之间的配置不同。

修改

TL;以下评论的DR是:如果您尝试加载超过1个boto配置文件,则应取消设置BOTO_CONFIG(仅需要1个文件路径),而是使用{{ 1}}环境变量,允许指定由系统上的BOTO_PATH评估分隔的多个文件路径(Linux上为os.pathsep,Windows上为:。)