革命火种在江西的传播，使北洋军阀当局十分害怕，反动军阀决心扑灭这刚刚燃起的革命火种。3月，江西省督军蔡成勋下令，禁止马克思主义学说研究会活动，查封了南昌文化书社，并逮捕了袁玉冰（江西党团组织创始人之一）。赵醒侬被迫离开南昌，前往上海避难。在上海，赵醒侬当面向中共中央和团中央汇报了革命思想在江西传播和发展团员的情况。

　　9月，赵醒侬按照党、团中央的指示，再次回到江西，不惧危险，继续开展革命工作，在九江等地开展调查研究，为成立地方党团组织掌握了第一手资料。

　　10月21日，赵醒侬按照团中央的指示，正式成立了中国社会主义青年团南昌地方执行委员会，并担任委员长。不久，相继介绍了一些优秀青年团员转为中共党员。

　　1924年2月，在赵醒侬的积极筹备下，中共中央直属江西支部建立，他担任支部书记。从此，江西开始有了正规的党团组织。

　　严以律己，一代风范

　　江西党团组织建立后，秘密机关一直设在南昌解家厂的一幢民房里。因革命斗争的需要，党团组织负责人赵醒侬乔装成一位“阔老爷”，住在解家厂。是“老爷”就得有人服侍。于是，方志敏把堂弟方志纯（解放后曾任江西省委书记）介绍给赵醒侬做“厨子”和“门卫”。但事实上，方志纯是党团组织机关的机要交通员和公务员。直到赵醒侬牺牲，方志纯就一直在他身边工作。

　　当时，方志纯作为一个男同志，又刚从弋阳来到南昌，很不安心炊事工作，更不愿做“佣人”。赵醒侬看到方志纯闹情绪，便耐心地对他说：“这也是革命工作嘛！看门、做饭、搞勤杂，总得有人去做。如果大家都不做，我们这个机关就难以维持下去，那党团组织的工作就要受影响。”同时，赵醒侬还非常诚恳地对方志纯说：“表面上，我们是主仆关系，实际上，我们是同志关系。有陌生人在的时候，我是‘老爷’，没陌生人在的时候，我们是同志，是兄弟。”赵醒侬确实也把方志纯当兄弟对待，由于方志纯文化水平低，赵醒侬就手把手地教他读书写字。

　　在赵醒侬的关怀和教育下，方志纯的思想有了很大进步，工作取得了一定成绩。1924年9月的一天，赵醒侬亲切地对方志纯说：“你在机关工作一年了，干得很好。在机要交通工作中，没出过乱子，应付了不少困难局面。总之，在革命工作中，你立场坚定，机智勇敢，党组织同意吸收你入党，我愿意做你的入党介绍人。”看到方志纯十分欣喜，赵醒侬又严肃地对他说：“希望你入党以后，加强学习，提高修养，更加忠诚党的事业，忠诚人民，忠诚无产阶级，为共产主义奋斗终身！”事后，赵醒侬介绍了很多党内书刊给方志纯看。

　　赵醒侬对同志要求很严，但对自己要求更严。因为日以继夜忙于革命工作，他患了很严重的肺病，变得又黑又瘦。由于当时党的活动经费紧缺，他很少看病，还总是带病工作。有时，身为“厨子”的方志纯会偷偷地买点鱼肝油给他吃，他总是为此批评方志纯。赵醒侬经常开会开到深夜，饿得实在不行时，会叫方志纯买碗馄饨吃。本来，带有鸡蛋的馄饨每碗30个铜板，但赵醒侬为了节约，只让方志纯买不带鸡蛋的每碗五、六个铜板的普通馄饨。

　　赵醒侬的穿着也很朴素。为了乔装成“阔老爷”的需要，组织上给他做了一件长褂，但他只在外出时穿一下，回到机关后就脱下来；会客时穿了，客人走后又脱下叠好，十分珍惜那件长褂。

　　赵醒侬不仅对自己要求严，对家属要求更严。他模范遵守党的地下工作纪律，从不向家属泄露半点革命机密。他爱人当时住在南昌营房街，但他从不让爱人去机关找他，以防暴露党的秘密机关。他因为工作忙，很少回去和爱人团聚。他爱人生活十分清苦，住的房间只有十来平方米，家里摆设也极其简陋，只有一张床、一张桌子、一个炉灶。由于党的活动经费没保障，赵醒侬不能及时领到工资，所以不能按时送生活费给他爱人。他爱人为此经常过着巧妇难为无米之炊的日子。然而，为让赵醒侬安心工作，她从不抱怨，带着一个女儿，含辛茹苦，艰难度日。