每一篇"大调查与雪花成本"一文,我在研究这篇文章时,至少已经用了一年时间,而云定价的变化往往足以使数字已经错了.
由GitHub Actions工作支撑, 每日运行, 从每个供应商的定价API中抽取当前价格, 回到公布的收费卡上。
我不得不解决一些事情: 检测真实的价格变化和噪音。
日常工作会比照上一个数据来疏导入来的数据集,而忽略了时间戳字段,所以一个承诺只说当一个费率实际移动时"价格已经改变".
不默默地沉闷。
如果一个销售商API开始失败,该站点保留了最后确认的值,但将其标为"重新失败"而不是假装是时事.
让它有用, 不只是准确。
该网站有一个计算器来计算您自己的工作量形状,并用头到头的页面比较任意两个引擎在数据卷和工作量剖面(BI仪表板,ETL,临时分析)之间.
它完全静止,没有后端,除了一个承诺的JSON文件之外,没有数据库是数据库.
Live at https://bigdataexplained.com——乐于回答关于管道或定价模型假设的问题.