Prašná brána postavená v roce 1565 byla součástí obranného systému Drážďan a sloužila k bezpečnému uchovávání střelného prachu. Poté, co v roce 1744 byly zásoby prachu převezeny do tří věží na novoměstských valech, byla Prašná brána až na zbytky zdí, které se dochovaly dodneška, stržena.

Na základě královského výnosu získal pozemek za kostelem Frauenkirche Johann Christoph Knöffel, který zde nejprve postavil dvě budovy. V jedné z nich tehdy sídlila porcelánová manufaktura.

V souvislosti s ostřelováním města kolem roku 1760 byly obě tyto budovy téměř zničeny. V roce 1763 získal ruiny Knöffelova domu Friedrich August, říšský hrabě z Coselu, syn saského kurfiřta Augusta Silného a říšské hraběnky Coselové.

Friedrich August pověřil Julia Heinricha Schützeho, Knöffelova žáka, vybudováním paláce Cosel v dnešní znovuvzkříšené podobě.

Ve sklepě paláce Cosel se ještě dnes nacházejí působivé fragmenty Prašné brány, jakož i klenba Knöffelova domu z 18. století.