使用python脚本通过SSH进入服务器

Question

我是一名使用大数据集的天文学系学生。我正在尝试使用python脚本处理的超级计算机上有80 TB的.fits文件。我可以通过提交作业（保留在队列中）来处理存储在超级计算机上的数据  一段时间），或者我可以在本地桌面上处理数据（而无需下载所有数据）。但是，由于存储问题，我无法将所有（80TB）数据下载到本地桌面。我想知道是否可以在本地桌面上运行处理python脚本，但是它使用安全外壳从超级计算机读取数据。

谢谢。

Answer 1

签出Perform commands over ssh with Python和Download files over SSH using Python How to list all the folders and files in the directory after connecting through sftp in python

您可以将其放入循环中并获取文件>解析>获取下一个文件，依此类推。