2004年，潘威志一面成立瑞興工業開發PLA包材生產技術，一面前往中國找市場。「那時候想設廠，可是我到了上海，台灣的營業狀況急遽往下掉，沒現金買原料，整個工廠靜悄悄。有時回去，看到我媽一個人坐在辦公室，很煩惱，怕過不了年關。我們幾乎處在倒閉邊緣，只好先設營業所賣貨。」
「我一直擔心如果明天的票撐不過，兒子還在大陸，總要跟兒子說一聲：『媽媽已經盡力了。』」這句話，陳麗杏在心裡演練過無數次，幸好始終沒成真。
2007年，潘慶瑞判定台灣市場沒有救了，決定把重心移往大陸，但他對公司財務不熟，屢次亂花錢投資，埋下夫妻決裂的導火線。陳麗杏說：「我這邊的財務很吃緊，（從大陸）回來的錢又不夠支付原料款，慢慢地就鬧得不可開交。」