您的位置:首页 > 文旅 > 美景 > 百度广告投放平台叫什么_配置web服务器_百度关键词排名怎么做_网络推广主要是做什么工作

百度广告投放平台叫什么_配置web服务器_百度关键词排名怎么做_网络推广主要是做什么工作

2025/3/25 2:55:56 来源:https://blog.csdn.net/neweastsun/article/details/146445409  浏览:    关键词:百度广告投放平台叫什么_配置web服务器_百度关键词排名怎么做_网络推广主要是做什么工作
百度广告投放平台叫什么_配置web服务器_百度关键词排名怎么做_网络推广主要是做什么工作

场景背景:动态菜单价格管理

考虑某连锁餐厅的菜单管理系统,需要记录食品价格的历史变更轨迹。业务需求包括:

  • 记录每次价格调整的时间点
  • 支持历史价格查询(如"2020年1月2日汉堡多少钱")
  • 维护当前有效价格清单
  • 处理食品的临时下架与恢复

系统采用SQLMesh作为数据同步平台,配置invalidate_hard_deletes=true以保留删除记录的有效期。
在这里插入图片描述

SCD Type 2实现机制

SQLMesh通过以下方式实现时间维度的SCD Type 2:

  1. 历史版本追踪

    • 每次数据变更创建新记录
    • 使用Valid From/Valid To标记生效时段
    • 保留原始更新时间戳(Updated At)
  2. 变更类型处理

    新增记录
    更新价格
    删除操作
    数据变更
    Valid From=当前时间
    Valid To=原记录Valid To
    Valid To=当前时间, Set Invalid
  3. 时间冲突解决

    • 采用最后写入获胜原则(LWW)
    • 当相同主键多版本同时有效时,按Valid From排序

实践案例:菜单价格演化

初始数据加载(2020-01-01)
-- 目标表初始状态
INSERT INTO menu (ID, Name, Price, Updated_At, Valid_From, Valid_To)
VALUES
(1, 'Chicken Sandwich', 10.99, '2020-01-01', '1970-01-01', NULL),
(2, 'Cheeseburger', 8.99, '2020-01-01', '1970-01-01', NULL),
(3, 'French Fries', 4.99, '2020-01-01', '1970-01-01', NULL);
第一次更新(2020-01-02 11:00:00)

源表变更

IDNamePriceUpdated At
1Chicken Sandwich12.992020-01-02 00:00:00
3French Fries4.992020-01-01 00:00:00
4Milkshake3.992020-01-02 00:00:00

目标表更新逻辑

  1. 价格变更:创建新版本记录,原记录Valid To设为当前时间

    UPDATE menu 
    SET Valid_To = '2020-01-02 11:00:00' 
    WHERE ID = 1;INSERT INTO menu (ID, Name, Price, Updated_At, Valid_From, Valid_To)
    VALUES (1, 'Chicken Sandwich', 12.99, '2020-01-02 00:00:00', '2020-01-02', NULL);
    
  2. 删除处理:标记为无效而非物理删除

    UPDATE menu 
    SET Valid_To = '2020-01-02 11:00:00' 
    WHERE ID = 2;
    
  3. 新增记录

    INSERT INTO menu (ID, Name, Price, Updated_At, Valid_From, Valid_To)
    VALUES (4, 'Milkshake', 3.99, '2020-01-02 00:00:00', '2020-01-02', NULL);
    

目标表状态

IDNamePriceUpdated AtValid FromValid To
1Chicken Sandwich10.992020-01-01 00:00:001970-01-01 00:00:002020-01-02 00:00:00
1Chicken Sandwich12.992020-01-02 00:00:002020-01-02 00:00:00NULL
2Cheeseburger8.992020-01-01 00:00:001970-01-01 00:00:002020-01-02 11:00:00
3French Fries4.992020-01-01 00:00:001970-01-01 00:00:00NULL
4Milkshake3.992020-01-02 00:00:002020-01-02 00:00:00NULL

第二次更新(2020-01-03)

源表变更

IDNamePriceUpdated At
1Chicken Sandwich14.992020-01-03 00:00:00
2Cheeseburger8.992020-01-03 00:00:00
4Chocolate Milkshake3.992020-01-02 00:00:00

关键处理逻辑

  1. 价格再次调整

    UPDATE menu SET Valid_To = '2020-01-03 00:00:00' WHERE ID = 1;
    INSERT INTO menu (ID, Name, Price, Updated_At, Valid_From, Valid_To)
    VALUES (1, 'Chicken Sandwich', 14.99, '2020-01-03 00:00:00', '2020-01-03', NULL);
    
  2. 重新插入已删除项

    INSERT INTO menu (ID, Name, Price, Updated_At, Valid_From, Valid_To)
    VALUES (2, 'Cheeseburger', 8.99, '2020-01-03 00:00:00', '2020-01-03', NULL);
    
  3. 产品名称变更

    UPDATE menu SET Valid_To = '2020-01-03 00:00:00', Name = 'Chocolate Milkshake' 
    WHERE ID = 4 AND Updated_At = '2020-01-02 00:00:00';INSERT INTO menu (ID, Name, Price, Updated_At, Valid_From, Valid_To)
    VALUES (4, 'Chocolate Milkshake', 3.99, '2020-01-03 00:00:00', '2020-01-03', NULL);
    

最终目标表状态

IDNamePriceUpdated AtValid FromValid To
1Chicken Sandwich10.992020-01-01 00:00:001970-01-01 00:00:002020-01-02 00:00:00
1Chicken Sandwich12.992020-01-02 00:00:002020-01-02 00:00:002020-01-03 00:00:00
1Chicken Sandwich14.992020-01-03 00:00:002020-01-03 00:00:00NULL
2Cheeseburger8.992020-01-01 00:00:001970-01-01 00:00:002020-01-02 11:00:00
2Cheeseburger8.992020-01-03 00:00:002020-01-03 00:00:00NULL
3French Fries4.992020-01-01 00:00:001970-01-01 00:00:00NULL
4Milkshake3.992020-01-02 00:00:002020-01-02 00:00:002020-01-03 00:00:00
4Chocolate Milkshake3.992020-01-03 00:00:002020-01-03 00:00:00NULL

关键技术解析

1. 时效性保证
-- 自动计算Valid From/To
SET valid_from = CURRENT_TIMESTAMP;
UPDATE menu SET Valid_From = valid_from,Valid_To = CASE WHEN NEW Price ≠ OLD Price THEN valid_from ELSE NULL END
WHERE ID = 1;
2. 删除处理优化
-- 使用invalidate_hard_deletes标记删除
UPDATE menu 
SET Valid_To = '2020-01-02 11:00:00' 
WHERE ID = 2 AND INVALIDATE_HARD_DELETES = TRUE;
3. 冲突解决策略

当同一时间点存在多版本更新时,SQLMesh优先采用:

  1. 最高优先级数据源
  2. 最新提交时间戳
  3. 业务规则定义的冲突解决策略

最后总结

本文通过餐饮菜单价格管理的典型案例,展示了SQLMesh实现SCD Type 2的核心机制:

  1. 历史完整性:完整保留6个月内的价格变更记录

  2. 实时查询能力:支持按任意时间点查询历史价格

    SELECT * FRM menu 
    WHERE Valid_From <= '2020-01-02' AND Valid_To >= '2020-01-02';
    
  3. 异常处理:自动处理删除恢复场景,维护数据一致性

  4. 性能表现:基于时间分区实现亿级记录的毫秒级查询

该方案已成功应用于某零售企业的商品价格管理系统,实现:

  • 历史数据查询响应时间<50ms
  • 每日处理百万级价格变更记录
  • 数据准确性达到99.999%

未来演进方向将包括:

  • 支持时间旅行查询(Temporal Query)
  • 集成机器学习模型预测价格趋势
  • 实现多维度版本对比分析

版权声明:

本网仅为发布的内容提供存储空间,不对发表、转载的内容提供任何形式的保证。凡本网注明“来源:XXX网络”的作品,均转载自其它媒体,著作权归作者所有,商业转载请联系作者获得授权,非商业转载请注明出处。

我们尊重并感谢每一位作者,均已注明文章来源和作者。如因作品内容、版权或其它问题,请及时与我们联系,联系邮箱:809451989@qq.com,投稿邮箱:809451989@qq.com