できます。任意整理は、自己破産や個人再生と違い、すべての貸金業者を対象とする必要はありません。
例えば消費者金融だけ任意整理して、銀行への借金はそのまま返していく、という選択も可能です。