İttihat Terakki yönetimi Birinci Dünya Savaşı sırasında nizami orduların yanı sıra milis güçlerinden de yararlanma yoluna gitmiştir. Bu cümleden olarak, doğu cephesinde savaşmak üzere Alevi-Bektaşilerden oluşan bir milis alayı teşkil edilmesine karar verilmiş ve bu alay için milis toplanması işi de Bektaşi şeyhi Cemaleddin Çelebi’ye havale edilmiştir. Aynı zamanda bu alayın komutanlığı verilen Cemaleddin Çelebi Alevi nüfusun yoğun olduğu yerleri dolaşmış, bir yandan milis toplarken diğer yandan da muhtelif Alevi gruplarını kendisine bağlama amacıyla faaliyet yürütmüştür. Cemaleddin Çelebi’nin bu gayretleri bazı bölgelerde başarılı olurken bazı bölgelerde de ciddi dirençle karşılaşmıştır. “Tarik erkânı” Çelebi’nin nüfuz mücadelesine karşı sergilenen Kızılbaş/Alevi direncinin sembolü olmuştur. Nuri Dersimi’nin anılarında kaydettiği bir olay bize bu mücadelenin berrak bir kesitini sunmaktadır