可以使用`S3 storage`作为HDF5文件存储并与其他服务器共享吗?

时间:2017-02-20 14:35:50

标签: python amazon-web-services amazon-s3 hdf5 pytables

我将通过Stock API(韩国股票公司)获取大量数据,并尝试使用HDF5 format将所有数据存储为Python PyTable。还有另一台运行Django Web应用程序的服务器。这个网络应用程序将使用这些HDF5数据。

但是有一些限制:

  

1。 API仅适用于Window OS

     

2。数据(pandasnumpy表单)必须以HDF5格式存储。不使用SQL数据库

这就是系统的外观:

  1. 数据生成器
    • Window OS计算机主板,例如LattePanda。(http://www.lattepanda.com/
    • AWS window EC2(?)#对此不确定。需要你的建议
  2. 数据存储:AWS S3
  3. 网络应用程序:AWS EC2
  4. 所以,LattePanda正在我的家中运行,它会定期获取库存数据。它将它们存储在AWS S3中。在EC2上运行的Django Web应用程序将获取这些数据并在模板上呈现它们。

    那些最佳系统组成?

0 个答案:

没有答案