上个世纪30年代初，这里成为上海鱼市场，是全国最大的水产品集散地。1946年，上海青帮头子杜月笙为理事长。1947年5月17日清晨4时半，有一个鱼贩子像老鼠似地钻入鱼舱，任意翻动舱中鲜鱼，被鱼商和船主看到，双方动手相殴。码头上的其他鱼商、渔民百余人抄起棍棒相助鱼商和船主，上百个鱼贩子上前阻拦，双方展开一场械斗。鱼市场内拳脚相加，棍棒乱舞，鲜血飞迸，哭喊声震天。据记录，鱼市场复业不到4个月内，此类纠纷多达数十起。鱼贩与鱼商、渔民的纠纷屡屡不断的原因就在于鱼贩一方恃强凌弱，鱼贩的人员中混杂地痞流氓依仗帮会势力、称霸一方。不少鱼行老板不得不去拜杜月笙为靠山，藉以应付。