但同时，中国瓷业已经面临着极大的危机。1894年甲午战争战败后，清政府被迫与日本签订了《马关条约》，日本除了得到辽东半岛、台湾和附属岛屿，得到二万万两白银的“赔偿”以外，更可以在通商口岸任意从事各项工艺制作。日本在中国境内设的瓷厂，逐渐把中国瓷业逼上了绝路。景德镇等瓷区的瓷厂纷纷倒闭，一蹶不振，广彩被迫使用日产瓷胎为原料。

1931年“九·一八”事变以后，全国各地纷纷号召抵制日货。当时广彩工人把已经制好的产品，集中在河南龙船岗全部打碎，轰动了广州城。但是，因供货短缺全行业出现了停产、停工的现状，广彩工人的生活受到影响。

1938年，广州沦陷，百业停顿。广彩人纷纷逃难，转到香港和澳门的瓷厂谋生，留下来的只能靠打苦工维持生计。1941年12月，太平洋战争爆发，香港沦陷，广彩业在香港遭到重创，所有产业化为乌有，工厂只得遣散工人。广彩艺人的生活陷入绝望的困境，有逃难回乡的，有被迫到日本做苦工的，有被日军拉夫到海南开矿、修铁路从此再没回来的；也有家人散失，甚至无以为生饿死的。抗战前后的十年间，广彩业一再遭到毁灭性的打击，战后寻找到的技师人数不到战前的十分之一，是广彩史上最黑暗的一个衰落时期。

1947年，广彩业在停战两年后得以全面发展，一是产品远销欧美的织金彩瓷，亦即洋庄货；二是产品成销港澳、东南亚和省内的日用瓷。从业人数也迅速增至四百多人，可惜好景不长，内战爆发导致物价飞涨，工人在接单时定好的加工价，月尾结算时便已成为废纸。从1948年始，恶劣的经济环境使工厂主亦无法经营，陆续把资金转移到香港，重新建厂，广彩艺人不得不再次离开广州。经营了二百多年的广彩业在广州日渐消失，“港九绘瓷业职业工会”，成为广彩的生产基地。