回声记忆比映像记忆保持的时间长，可能与声音是随着时间展开的方式有关。例如，当你听懂一句口语的时候，声音的各个增量是一个接一个地到达你的耳朵的。回声记忆可以帮助你聚集这些增量从而形成连贯的整体。回声记忆的研究说明了感觉记忆一个重要的特征：他们容易被新的信息所替代。如果某个人给你读了一系列的单词，每个单词将会取代回声记忆中的前一个单词。研究者最初认为是声音的物理相似性决定了一个刺激是否取代回声记忆中的另一个刺激。但是，后来的研究表明听着对一个听觉刺激的归类方式也很重要。当你听得到外部世界声音的时候，你会将到达耳朵的信息流划分为单元——你会决定哪些声音相配可以形成一个整体。回声记忆依赖于你怎么样组织听觉经验。