幼年时大脑发育不成熟，刚出生的时候，有些对记忆形成需要对自身来说特别重要的事情，可能始终存留在大脑中，随着年龄的增长和大脑的持续发育，它会在生命最初的三四年里快速发育完成。

人类所有神经生理都有相应的物质基础，大脑中的神经元就是这个物质基础。幼年人神经系统发育不完全，神经元之间的环路也不断发生变化，当新的神经环路改变了旧有的神经环路时，之前存储的记忆可能被消除，幼年期神经元迅速变化且不稳定，所以导致记忆很难存储。

语言是人类思维的工具，需要借助记忆来组织语言。婴儿语言能力尚未完全发展，就是因为记忆力还未稳定，可能以非言语的方式记忆事件，即使在神经元稳定后，也无法记起混乱时间段的记忆。

从心理认知角度来讲，人的记忆需要借助一些认知来提高和发展，在某些心理发展阶段之前，孩子可没有任何概念或时间概念，导致记忆不利于存储。还有一种学说认为，人之所以记不住幼年时的事情，因幼年期发生的事情都是无关紧要的，所以一些寻常的事情不被留存在大脑中，除非有刻骨铭心的或者伤到了心灵，脑海中可能留有不完整的片段。所以，人们虽记不住幼年期的某些事情，但一些抽象行为已经形成在大脑中，形成一种抽象认知。