我目前正在研究一个项目,并试图找出最合适的Azure选项来每天对Dark Sky(https://darksky.net/dev)进行API调用
简而言之,我们正在寻求将天气数据带入我们的数据湖存储(Azure Data Lake Store)中,并且我们每天必须向黑暗的天空拨打数十万次电话才能检索数据(不幸的是,他们没有还没有批处理)。我的问题是哪种服务最适合拨打电话,获取数据并将其写入数据湖? 提取不会是连续的,我想合并消息以最大程度地减少对数据湖的写入操作。
我一直在考虑Azure功能和Azure批处理,但是我不确定考虑给定的要求中哪一种更合适并且也更具成本效益。
谢谢您的帮助。