Tableau 数据提取与刷新：增量、全量与子范围刷新详解

flowchart TD
    subgraph Src["📂 原始数据源"]
        DB[(数据库)]
        Excel[(Excel/CSV)]
        Cloud[(云服务)]
    end

    subgraph Live["🔗 实时连接"]
        L1[每次操作直接查数据库]
        L2[数据始终最新]
        L3[依赖网络与数据库性能]
    end

    subgraph Full["📦 完整提取"]
        F1[一次性复制全部数据]
        F2[保存为 .hyper 文件]
        F3[断网也能分析]
    end

    subgraph Incr["📥 增量提取"]
        I1[只复制新增行]
        I2[速度快、资源消耗低]
        I3[无法捕获历史修改]
    end

    DB -.->|数据量大时慢| Live
    DB -->|快照 snapshot| Full
    DB -->|只加新行| Incr

    style Live fill:#f3e8ff,stroke:#7c3aed,color:#4c1d95
    style Full fill:#fee2e2,stroke:#dc2626,color:#991b1b
    style Incr fill:#dbeafe,stroke:#2563eb,color:#1e3a5f

flowchart LR
    subgraph FullRefresh["🔄 完整刷新"]
        FR1[触发刷新] --> FR2[清空 .hyper 文件]
        FR2 --> FR3[从数据库读取全部行]
        FR3 --> FR4[重建整个数据提取]
        FR4 --> FR5["✅ 数据100%与源一致"]
    end

    subgraph IncrRefresh["⚡ 增量刷新"]
        IR1[触发刷新] --> IR2[查找增量标识列
大于上次最大值的行]
        IR2 --> IR3[仅复制这些新行]
        IR3 --> IR4[追加到现有 .hyper]
        IR4 --> IR5["✅ 数据变大，旧数据不动"]
    end

    FR1 -->|"耗时：长 ⏱️"| FRNote["全量替换
适合初次、重大变更"]
    IR1 -->|"耗时：短 ⚡"| IRNote["只追加新行
适合定期增量更新"]

    style FullRefresh fill:#fee2e2,stroke:#ef4444
    style IncrRefresh fill:#dbeafe,stroke:#3b82f6

flowchart LR
    subgraph Legend["图例"]
        L1[已提取数据]:::old
        L2[新数据]:::new
    end

    subgraph DBState["数据库"]
        D1["6月1日 订单"]:::old
        D2["6月2日 订单"]:::old
        D3["6月3日 订单"]:::old
        D4["6月4日 订单 ✚"]:::new
        D5["6月5日 订单 ✚"]:::new
    end

    subgraph ExtractBefore["第一次提取后"]
        E1["6月1日 💾"]:::old
        E2["6月2日 💾"]:::old
        E3["6月3日 💾"]:::old
    end

    subgraph ExtractAfter["第二次增量提取后"]
        A1["6月1日 💾"]:::old
        A2["6月2日 💾"]:::old
        A3["6月3日 💾"]:::old
        A4["6月4日 ✚"]:::new
        A5["6月5日 ✚"]:::new
    end

    D4 -->|"增量标识列
日期 > 提取中最大日期(6月3日)"| A4
    D5 -->|"增量标识列
日期 > 提取中最大日期(6月3日)"| A5

    D1 -.->|"如果6月1日的数据被修改了
增量刷新不会察觉 ❌"| Missed["⚠️ 修改丢失"]

    classDef old fill:#f1f5f9,stroke:#94a3b8
    classDef new fill:#dbeafe,stroke:#2563eb,stroke-width:2px
    style Missed fill:#fef2f2,stroke:#ef4444,color:#991b1b

flowchart LR
    subgraph Config["⚙️ 配置增量刷新"]
        A1["选择增量标识列
（如：订单日期）"]
        A2["设置子范围天数
（如：90天）"]
    end

    subgraph How["🔄 每次刷新时的执行逻辑"]
        B1["① 读取增量标识列
找到上次最大值之后的新行"]
        B2["② 额外删除并重新提取
最近 N 天的已有数据"]
        B3["③ 合并结果
历史(范围外) + 新提取(范围内) + 纯新行"]
    end

    subgraph Result["✅ 最终效果"]
        C1["新数据 → 被追加"]
        C2["N 天内的修改 → 被修正"]
        C3["N 天前的旧数据 → 不动"]
    end

    Config --> How --> Result

    style Config fill:#f0f5ff,stroke:#3b82f6
    style How fill:#fef3c7,stroke:#f59e0b
    style Result fill:#ecfdf5,stroke:#10b981

flowchart TD
    subgraph Scenario["📋 销售订单场景"]
        direction TB
        O1["订单 A
9:00 创建 → 待付款"]
        O2["订单 B
10:00 创建 → 已付款"]
        O3["订单 C
11:00 创建 → 发货中"]
    end

    subgraph Change["⏱️ 一小时后，订单状态变化"]
        C1["订单 A
→ 已付款 ✅"]
        C2["订单 B
→ 发货中 📦"]
        C3["订单 C
→ 已签收 🎯"]
        C4["还有新订单 D
→ 已创建 ✚"]
    end

    subgraph Refresh["⚡ 每小时增量刷新
（子范围 = 7天）"]
        R1["① 追加新订单 D"]
        R2["② 重新提取过去 7 天
全部订单的最新状态"]
        R3["③ 提取中订单状态
与数据库保持同步 ✅"]
    end

    Scenario -->|时间推移| Change
    Change --> Refresh

    style Scenario fill:#f0f5ff,stroke:#3b82f6
    style Change fill:#fef3c7,stroke:#f59e0b
    style Refresh fill:#ecfdf5,stroke:#10b981

flowchart TD
    Start(["数据提取需要定期更新？"]) -->|"否"| Manual["手动刷新即可"]
    Start -->|"是"| Q1{"数据源是否会
修改历史数据？"}

    Q1 -->|"不会，只追加"| SimpleIncr["✅ 纯增量刷新
最快、最轻量"]
    Q1 -->|"会修改历史"| Q2{"修改一般发生在
多久前？"}

    Q2 -->|"仅最近几天/月"| SubRange["✅ 增量+子范围
例如 7~90 天"]
    Q2 -->|"可能修改任意时间"| Both["✅ 增量日常 + 定期完整
例如每日增量+每周日完整"]

    SimpleIncr -.->|"例：销售流水、日志"| Note1
    SubRange -.->|"例：订单状态更新"| Note2
    Both -.->|"例：客户资料修改"| Note3

    style SimpleIncr fill:#dbeafe,stroke:#3b82f6
    style SubRange fill:#d1fae5,stroke:#10b981
    style Both fill:#fef3c7,stroke:#f59e0b