9月17日，滕代遠(yuǎn)以中共湖南省委特派員的身份，在銅鼓幽居主持召開(kāi)了紅五軍黨組織負(fù)責(zé)人與平（江）、瀏（陽(yáng)）、修（水）、銅（鼓）四縣黨組織負(fù)責(zé)人聯(lián)席會(huì)議，正式組建了中共湘鄂贛邊界特委。滕代遠(yuǎn)任書(shū)記，彭德懷、王首道、李宗白、邱訓(xùn)民等為常委。特委的成立，標(biāo)志著湘鄂贛邊界的斗爭(zhēng)進(jìn)入一個(gè)新的階段。此后，邊界各縣的黨組織也逐步地建立和健全起來(lái)。

    會(huì)議對(duì)平江起義以來(lái)的經(jīng)驗(yàn)教訓(xùn)進(jìn)行了總結(jié)，研究了紅五軍的去向問(wèn)題。大橋受挫后，紅五軍面臨的局勢(shì)是十分嚴(yán)峻和危險(xiǎn)的，敵人調(diào)集大軍，步步追逼，部隊(duì)內(nèi)部又因傷亡和少數(shù)舊軍官、士兵叛逃而嚴(yán)重減員，同時(shí)，給養(yǎng)也很困難。在這種形勢(shì)下，紅五軍往哪里去？這是一個(gè)必須作出答復(fù)的大問(wèn)題。是繼續(xù)留在湘鄂贛邊境單獨(dú)作戰(zhàn)呢，還是上井岡山與朱毛紅軍會(huì)合？會(huì)議經(jīng)過(guò)認(rèn)真討論，認(rèn)為革命正處于低潮，留駐湘鄂贛邊境于我不利，平江、瀏陽(yáng)、修水、銅鼓一帶的“會(huì)剿”敵軍隨時(shí)都在十團(tuán)之眾，加上各地反動(dòng)地方武裝，其兵力大大超過(guò)我十余倍，如繼續(xù)在此地孤軍奮戰(zhàn)，極易被敵人各個(gè)擊破；而到井岡山與紅四軍會(huì)合，則能有效地保存力量，相機(jī)對(duì)付敵人，共同促進(jìn)革命形勢(shì)的轉(zhuǎn)變與到來(lái)。幽居會(huì)議的這一決定，對(duì)以后紅五軍挺進(jìn)井岡山的行動(dòng)起了關(guān)鍵性的作用。

    幽居會(huì)議后，部隊(duì)即在平、瀏、銅邊界的紙坊進(jìn)行了整編，取消了團(tuán)的建制，軍直轄5個(gè)大隊(duì)：一大隊(duì)長(zhǎng)雷振輝，二大隊(duì)長(zhǎng)黃公略，三大隊(duì)長(zhǎng)賀國(guó)中，四大隊(duì)長(zhǎng)李玉華，五大隊(duì)長(zhǎng)李燦，原四團(tuán)團(tuán)長(zhǎng)陳鵬飛改任軍部高級(jí)參議。全軍不足一千人。

    隊(duì)伍縮編后，以修水臺(tái)莊為中心，開(kāi)展了游擊戰(zhàn)爭(zhēng)。但是，由于敵軍的窮追，部隊(duì)“幾乎每天都要與國(guó)民黨正規(guī)軍和地主武裝奮戰(zhàn)數(shù)次方能前進(jìn)，有時(shí)最多的一天打過(guò)八次仗”。就在這樣危急的形勢(shì)下，四大隊(duì)長(zhǎng)李玉華與一大隊(duì)長(zhǎng)雷振輝狼狽為奸，在部隊(duì)轉(zhuǎn)移到平江北鄉(xiāng)六坪時(shí)，圖謀叛逃。一天，雷振輝乘彭德懷訓(xùn)話之機(jī)，舉起手槍對(duì)著彭德懷的腦袋，幸被彭身邊的一位勇士扳倒，處決了雷振輝，彭德懷仍然面不改色，從容訓(xùn)話。

    10月，紅五軍黨委與湘鄂贛邊界特委在修水臺(tái)莊召集平、瀏、修、銅、武（寧）五縣黨組織負(fù)責(zé)人召開(kāi)聯(lián)席會(huì)議，將五軍與各地地方武裝合編，仍稱紅五軍，下轄三個(gè)縱隊(duì)十個(gè)大隊(duì)。一縱隊(duì)轄三個(gè)大隊(duì)，縱隊(duì)長(zhǎng)李燦；二縱隊(duì)轄兩個(gè)大隊(duì)，縱隊(duì)長(zhǎng)黃公略；三縱隊(duì)轄四個(gè)大隊(duì)，縱隊(duì)長(zhǎng)賀國(guó)中；另軍部直轄一個(gè)大隊(duì)。同時(shí)，對(duì)五軍的黨組織進(jìn)一步作了調(diào)整，將師（黨）委改為軍（黨）委，下設(shè)支部和分支部（設(shè)在大隊(duì)）。至此，紅五軍對(duì)部隊(duì)的思想和組織整頓得到落實(shí)，從而，朝著井岡山這盞“明燈”，采取飄忽不定的游擊戰(zhàn)術(shù)，勝利地前進(jìn)了。