琳琅还没有这么快恢复记忆，根据剧情猜测，应该是玉姑姑在杏仁酥里下了毒(芸初给琳琅意见做杏仁酥讨皇上欢心的时候玉姑姑在一旁听到了，长庆现在又是辛者库厨房掌事太监，下毒轻而易举)，然后给皇上吃前，琳琅作为御前侍女试吃，结果就跟之前那个侍卫一样变的狂躁要杀人。