Zaledwie trzysta metrów od katedry w Ulm znajduje się obszar zabytkowej średniowiecznej zabudowy — Rybackie kwartał. Wąskie uliczki, mosty i domy, wszystko przesiąknięte bytom i duchem okresu świetności starego miasta Ulm. Rybacka kwartał tego czasu, powstałe u brzegu rzeki Blau (dopływ Dunaju), zasiedlali rzemieślnicy: rybacy, кожевенники, millers i stoczniowców. Nurt rzeki utożsamiał najlepsze miejsce do budowy domów, tak jak te rzemiosła domagali się dużo wody. Młyn kręgów (w tym czasie było ich 7), mostki do moczenia skór, przystanie dla łodzi rybackich blisko dołączył do fasad budynków. Żrące roztwory do garbowania skór wpłynęły nawet na wygląd budynków: dla lepszej ochrony ich dodatkowo обшивали drzewem.

Wiele ważnych historycznie i ciekawych budynków Ulm znajduje się w wiosce rybackiej dzielnicy. Na przykład, tak zwany "Dom Przysięgi", wybudowany w 1618 roku. To właśnie z jego balkonu każdy przedostatni piątek lipca burmistrz Ulm wypowiada coroczną mowę i składa przysięgę wiernie służyć obywatelom. Z północnej strony Rybackie kwartał ograniczony do jednej z najstarszych zachowanych budynków — ściany Штауфенов, resztkami wzniesiono je w końcu 12 wieku pałacu królewskiego.

Kilka oryginalnych budynków są bezsporne ozdoby Rybackiej dzielnicy Ulm, takie jak "padający dom", stara mennica, "piękny dom" i wiele innych.

Obecnie w odrestaurowanych budynkach Rybackiej dzielnicy mieszczą się hotele, kawiarnie i restauracje, sklepy i stragany z pamiątkami.