事实上,矮人人口的不断下降不仅出现在时期,也发生在和平年代。一个很有说服力的例子就是在第二纪元中期精灵和索伦的以后,莫瑞亚矮人的数量开始出现下降,在炎魔3000年前苏醒以前,莫瑞亚的部分区域开始变得空旷和黑暗,对于出现的这种现象,并没有一个合理的解释。
这可能和食物有关,矮人确实在莫瑞亚中种植了大量的食物,但是他们更偏向于用交易获得。后来由于凯德布里鹏的精灵王国伊瑞詹灭亡,安度因河流域的北方人逐渐抢占了与矮人的贸易。越来越多的矮人不再想将他们自己的子女带入莫瑞亚黑暗的地下世界中。也许矮人的衰落和中土世界的衰落有关。
当然还有很重要的原因就是在期间,矮人遭受了巨大的伤亡,他们的人口数量无法恢复。第三纪元的最后1000年对他们来说承受了巨大痛苦,首先他们由于唤醒了炎魔,他们失去了他们的故乡莫瑞亚,他们在与巨龙的中失去了灰山王国,由于火龙史矛革,他们失去了山下王国埃鲁博,他们随后又与兽人进行了一场代价高昂的,随后巴林殖民队损失了莫瑞亚殖民地不说,还失去了500人。他们的家园遭到了空前破坏,这些灾难也造成了不少矮人妇女死亡。因为这些女性是宝贵的资源。
不仅仅只有都林家族受苦,矮人其他族群也受到了很大损失,我们知道第一纪元末期的愤怒之战后,贝列瑞安德地区被彻底摧毁,诺德罗格和贝列戈斯特的矮人的家园也被摧毁,宽梁族和火胡子族的矮人受到了不小打击,他们中很多矮人逃了出现,选择与都林矮人居住,一部分矮人选择居住在蓝色山脉附近,他们再也没有恢复过自己的辉煌。尽管数千年过去了,他们数量还是没有恢复。