嗨,我正在尝试找出对于大量数据而言最好的压缩类型。
我可以在本地进行的最佳压缩是什么?完成了吗?
我正在使用AWS首先登台文件。我确实看到您可以创建文件类型并指定压缩方式,但是没有找到我是否可以在本地进行压缩然后再上传或支持的压缩类型。
答案 0 :(得分:1)
最佳压缩取决于您如何测量“最佳”。我想说gzip是最好的,因为它很简单并且可以提供高达10倍的压缩,但是如果加载时间是您的最佳选择,那么答案可能会有所不同。
有些文档链接可帮助您提供更多详细信息,以回答您的问题。
https://docs.snowflake.net/manuals/user-guide/data-load-prepare.html#data-file-compression https://docs.snowflake.net/manuals/user-guide/intro-summary-loading.html#compression-of-staged-files https://docs.snowflake.net/manuals/sql-reference/sql/create-file-format.html#syntax
让我们知道您在加载文件时是否遇到任何问题。祝你好运。