塞维安墙成功地挡住了汉尼拔，此后数百年，罗马的城区慢慢扩到城墙之外，但这时再无外敌能威胁到罗马城，所以一直没有修新城墙。到了3世纪，帝国开始衰落，北方蛮族的威胁日益严重，AD270皇帝奥勒良用三年时间修建了奥勒良墙（Aurelian Wall，上图外面的一圈），墙长20公里，有18个城门和381座塔楼。  
      就在奥勒良上台的前几年，罗马经历了一场大瘟疫，人口只剩下50万，所以奥勒良墙很可能无法体现出罗马城在鼎盛时期的规模。此后在戴克里先时代，人口又恢复到近百万，但总的来说罗马的地位和人口一直在下降，西罗马灭亡后，5世纪末的罗马大概只有5万居民，AD550剩下了2万5。  
      罗马人在建城之初的几百年，显然没有想到子孙们会建立起一个庞大的帝国，罗马城的人口会超过一百万。因此在建设时毫无长远计划，只是简单地由中心向外扩展。到了帝国时期，皇帝们想要好好规划一番时，已经太迟了，市区里挤满了杂乱无章的建筑，要造个规模大点的皇宫都没地方。AD64的那次大火后，才烧出了大片空地，于是尼禄的皇宫，后来的大竞技场、大澡堂都陆续建了起来。  
不管大火是不是尼录放的，他为灾后重建作出了重大贡献，从私人金库里掏钱清理废墟，安置灾民。尼录还制定了各项法规，保证街道宽度和建筑的可靠性。不过在AD69 争夺罗马城的内战中，又窄又滑的街道给军团的前进造成了不小的障碍，说明情况并没有很大的改善。   
    到了3世纪末，罗马城共有11个大澡堂、超过1000个喷泉、两个赛车场、两个大竞技场、36座凯旋门和2000所豪宅。