Prima di essere una prigione Azkaban era la fortezza di un mago malvagissimo di nome Ekrizdis che si divertiva ad attirare sull'isola i navigatori Babbani per poi torturarli.