这里成了皇家产业，闲杂人等就不能进入了，想去伽蓝寺上香的人便得绕开桃林，很是影响寺庙的香火。
于是伽蓝寺又落寞了下来，更可恨的是，办事的一些人也不知是谁生了恶趣味，再种桃树的时候便把伽蓝寺给围了起来。
这下伽蓝寺的僧人没了咒念，谁也不能越过皇家桃林去伽蓝寺中上香，一时间香火断绝，寺中的一些僧人无奈逃散，寺庙眼瞅着便败落了下来。
这个时候你再跟伽蓝寺的僧人说杨广虔信神佛，他们肯定要骂人的……
等到隋末战乱期间，长安周围乱的很，也无人再管什么皇家不皇家的，很多逃难的人来到此处，便落脚在伽蓝寺，弄的这里更是不堪。
李渊登基之后情况好了些，李渊在游玩东城桃林的时候见了破败的寺庙，便让人重新修了一下，并招来僧人主持。
这个时候长安东城桃林的性质就又变了，成了长安城外的一处不错的景点，春天里贵族出城踏青，多数要来桃林看看。
伽蓝寺于是重获新生，佛前的香火又旺了起来。
当扶风郡公主李春，携阿史那天香到来此地，阿史那天香是突厥的伽蓝公主，见寺庙与她名号相合，顿时觉着有缘，罕见的给佛祖上了几柱香。
到此伽蓝寺又与皇室产生了联系，在僧人们宣告之下，很多人听到了消息，庙中的香火一下就又盛了许多。
