Cuenta una leyenda sobre este edificio que cuando la población le pidió al obispo terreno para construir el Ayuntamiento, éste no quiso ceder nada de terreno para que pudieran edificarlo. Fue entonces cuando la gente de la ciudad decidió clavar postes de madera en el río para crear así una isla artificial en el centro del río y levantar sobre ella el primer ayuntamiento de la ciudad.
Hoy en día podemos ver una parte restaurada de la fachada original, con sus paredes blancas y su entramado de madera pintado de amarillo. El mejor lugar para hacer bonitas fotos de esa parte de Ayuntamiento de Bamberg es el puente Geyerswörthsteg.
