看着无法无天、变本加厉的刘端，汉武帝最终下令剥夺他一半的封地。刘端一下子惊呆了，怎么还来真的啊！刘端怨恨汉武帝夺走了他的封地，索性连剩下的那一半封地也不管了。他也不管他的封国的国库每年盈利还是亏损，也不再修理库房，任由它破烂倒塌，库房内的宝物损失惨重，估计得有上亿两。同时，刘端还命令自己的手下们，不管封地怎么运营和管理了，租金赋税也不用征缴了，王宫也不需要守卫了。

最后，刘端整日关闭着王宫大门，只留下一个门没有关，那个门就成为了刘端出宫的必经宫门，他常常从这个门出去游玩。游玩的时候，刘端都会给自己起一个名字，编造一个身份，假扮成普通老百姓的样子，走得远的时候，他还能跑到其他封国去玩一圈。

在位四十七年以后，刘端终于去世了，因为患病也没有儿子，所以他的胶西国也被废除，最终被并入朝廷。