На місці дерев’яно-земляного княжого граду на початку XV століття збудовано кам’яну княжу резиденцію, яка з часом перетворилася в королівську резиденцію.
Королівський замок не був власністю короля, а належав державі, що було нечуваною подією. Король мав в замку тільки свою резиденцію, і це відрізняло варшавський замок від інших королівських замків у світі. Тому правильно назвати його Замком Його Королівської Величності та Речі Посполитої.
Замок був офіційною резиденцією короля, але одночасно десь знаходився та засідав Сейм Речі Посполитої, а також працювали керівні органи Корони.