¿Las arqueobacterias son multicelulares?

No. Las arqueobacterias son organismos unicelulares.

La palabra arqueobacteria está desactualizada porque ya no se consideran bacterias. Se llaman Archaea, un reino separado (incluso un dominio separado).

Llegando a su pregunta: los miembros de Archaea son unicelulares.