news 2026/6/10 12:25:56

即插即用系列(代码实践) | AMD核心模块:自适应多尺度分解框架——纯MLP架构吊打Transformer,时间序列预测新SOTA

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
即插即用系列(代码实践) | AMD核心模块:自适应多尺度分解框架——纯MLP架构吊打Transformer,时间序列预测新SOTA

论文题目:Adaptive Multi-Scale Decomposition Framework for Time Series Forecasting

中文题目:用于时间序列预测的自适应多尺度分解框架
论文出处:arXiv 2024 (清华大学深圳国际研究生院 & 同济大学)
应用任务:时间序列预测 (Time Series Forecasting)、长期预测
核心模块:AMD (Adaptive Multi-Scale Decomposition)

摘要
本文提取自2024年最新论文《Adaptive Multi-Scale Decomposition Framework for Time Series Forecasting》。针对现有的基于 Transformer 的预测方法计算复杂度高、易过拟合,而基于 MLP 的方法(如 DLinear)虽快但难以捕捉复杂的多尺度纠缠模式(Multi-Scale Entanglement)的痛点,复现了其核心架构——AMD(自适应多尺度分解框架)。该模型完全基于 MLP 构建,通过独特的分解与混合机制,在长时序预测任务上以更低的参数量和更快的速度,取得了超越主流 Transformer 的 SOTA 性能。


目录

    • 第一部分:模块原理与实战分析
      • 1. 论文背景与解决的痛点
      • 2. 核心模块原理揭秘
      • 3. 架构图解
      • 4. 适用场景与魔改建议
    • 第二部分:核心完整代码
    • 第三部分:结果验证与总结

第一部分:模块原理与实战分析

1. 论文背景与解决的痛点

在时间序列预测(TSF)领域,风向正在从复杂的 Transformer 吹回简洁的 MLP:

  • Transformer 的“富贵病”:虽然擅长捕捉长距离依赖,但计算量大(),且在数据噪声大时容易过拟合。
  • MLP 的“短板”:DLinear 等方法证明了简单的线性层也能打败 Transformer,但面对现实世界中复杂的多尺度纠缠(Multi-Scale Entanglement)——即不同时间尺度的模式混合在一起(如日周期、周趋势、突发噪声交织),简单的 MLP 往往显得力不从心,难以解耦这些特征。

痛点总结:我们需要一种既有 MLP 的高效,又能像 Transformer 一样处理复杂多尺度模式的模型。

2. 核心模块原理揭秘

为了解决上述问题,论文提出了AMD (Adaptive Multi-Scale Decomposition)框架。我已将其封装为完整的 PyTorch 模型,其核心设计包含以下“三板斧”:

  • 多尺度分解混合 (MDM Block)
    AMD 并不依赖传统的固定分解(如 STL 分解),而是提出了一种可学习
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/10 11:56:18

提示词工程vs上下文工程:AI交互方法论全解析(值得收藏)

本文探讨了从提示词工程到上下文技术的演进,分析了精简提示词设计、上下文管理的重要性及方法(压缩、结构化笔记、多智能体)。作者认为当前AI技术方案灵感源于人类认知世界的方式,强调应"回到事情本身",围绕"人"的核心需…

作者头像 李华
网站建设 2026/6/10 11:56:41

k8s最佳实践之service端口号

我们配置不同的应用,service的端口如果相同,是否会冲突?你是不是每次配置service的时候都会有这个担心,所以每次都会针对性的设计一堆的端口号进行规划。其实大可不必这样做。 是的,在 Kubernetes(K8s)中,多个 Pod 对应的 Service 的端口号(​​port​​​ 字段)完全…

作者头像 李华
网站建设 2026/6/10 11:52:23

SQL盲注:布尔盲注、时间盲注与报错盲注

第一部分:开篇明义——定义、价值与目标 定位与价值 在渗透测试与Web安全的攻防棋局中,SQL注入(SQLi) 是经久不衰的“兵家必争之地”。当应用程序未能对用户输入进行充分过滤,导致攻击者能够干涉后端数据库查询的逻辑…

作者头像 李华