早在谢万钧出生以前，其父谢裕卿就在金滩古镇沿河一带开了一家茶面店，商号“集贤社”，设有茶水、面点和炒菜。

1939年，谢裕卿在肖家巷建了一处住宅兼店铺，并改茶面店为糕饼店，商号为“集贤斋”。后来，谢万钧将糕饼业进行了拓展，并增设磨坊和酱园两块业务，一共请了十来个工人。谢万钧自拟一副对联贴于商铺大门，将“集贤”二字嵌入对联当中，彰显其经营特色，对联曰：集其类之总酱糕饼，贤于众者三色味香。集贤斋经营的糕饼种类有云片糕、芝麻片、寸金糖、龙门酥、广桃酥、月饼、兰花根、麻丸、马口酥、鼓饼、雪枣、花生糖、爽子（状如扇子）、冻米糖、桂花糖、烧饼、蜜饼等。其中有一类代表婚嫁习俗的糕饼销量最大，是男方下聘礼前送给女方家的，由四种饼组成：礼饼、茶饼、茴饼、鼓饼。这些饼通常要提前两天订货，男方一买少则180斤，多则200多斤。磨坊这一块业务，主要是卖面粉，那时集贤斋养着6头牛来磨小麦。酱园这块业务做得挺大，集贤斋有大大小小60口缸做酱油，其中大缸10口，每缸可装酱油500斤。做酱油的时候，每一道工序都在集贤斋做，包括蒸黄豆、三伏天日晒夜露、天晴时打开缸发酵、下雨及时上盖，要晒180天，才酿造出天然美味、香气浓郁的酱油。除了所生产的糕饼，集贤斋的酱油也是远近有名的。

1944年，谢万钧一家躲避战乱，回到了老家金滩镇东溪村。垂死挣扎的日军逃跑时还不忘作孽，一路烧杀抢掠，将集贤斋主店一把火烧了。为了筹款重建，谢万钧卖掉了其他三处店铺，1946年在肖家巷店铺原址上再建集贤斋。1949年，经不住母亲的哭闹和强烈要求，谢万钧花3000多块大洋在老家东溪村购得一处私宅，集贤斋的资金运转由此受到影响。土改的时候，作为工商业者多余的住宅，东溪村的这栋房子被征收。(www.daowen.com)

新中国成立后，鉴于移风易俗的缘故，这种婚嫁送饼的习俗渐渐淡出历史舞台，集贤斋的糕饼生意锐减。加上战后重建商铺和购置东溪村老家的私宅，集贤斋资金运转严重不足。1953年，经过深思熟虑，谢万钧重操旧业开起了茶面店，只留下一个工人。人手少了，妻子邓耀秋要做的事就多了，除了做饭等日常杂事，她还承担了每天挑5担水的任务。肖家码头50多个台阶，一担水重达120斤，寒来暑往、风雨无阻，她一挑就是3年。夏天水浅的时候，邓耀秋还须走过一丈多远的瓦砾地，到深水处用木桶挽水挑上来，为了防止布鞋被瓦砾割破，每次挑水她都改换成8分钱一双的草鞋。一年三百六十五天，四五天就要穿破一双草鞋，回忆起那段日子，邓耀秋至今仍然难以忘怀。