标签: database rest etl
我想知道收集和存储实时数据的最佳实践是什么。我构建了一些脚本,这些脚本从REST api收集数据并将其存储到关系数据库中,并每小时大约在jenkins中运行这些脚本。
如果我想更频繁地运行这些脚本,例如每5分钟甚至每分钟运行一次,该怎么办?安排jenkins作业经常运行听起来有点不合理。
你们对此有何看法?