A ház neve annak a ténynek tudható be, hogy négy nagy szikla közé épült, melyek a ház alapjaiba lettek integrálva, és amelyek a ház falaként és mennyezeteként szolgálnak. A ház építése 1972-ben kezdődött, és két évvel később, 1974-ben fejeződött be.
Egy portugál mérnök építette Guimarães-ből. A tulajdonos vidéki kikapcsolódási helyként használta. Ma a Casa do Penedo egy kis múzeum a ház történelméről készült fotókkal és emlékekkel.
A ház szinte teljes egészében kőből készült, kivéve az ajtót, az ablakokat és a tetőt. A belső teret rusztikus stílusban díszítették. A bútorok és a második emeletre vezető keskeny lépcső fából készült. A szobák mindegyike más alakú. A ház kanapéja betonból és eukaliptusz fából készült, súlya mintegy 350 kg. Van egy kőből készült kandalló is a házban, kint pedig kőből faragott medence található.
Az elmúlt néhány évben a Casa do Penedo felkeltette a tervezés és az építészet rajongóinak figyelmét a világ minden tájáról. Miután a házról készült fotók megjelentek és a portugál televízió is beszámolt róla, nagy szám kezdtek érkezni a látogatók.
Sajnos a házat sokszor megrongálták és a tulajdonosnak több mint húsz alkalommal kellett kicserélnie az ablakokat. Most az ablakok golyóállóak és fémrudak védik őket.
A bejárati ajtó acélból készült, melynek súlya 400 kg. A házban nincs áram annak ellenére, hogy egy szélerőműpark van mellette.
A tulajdonos már nem lakik a házban. A kíváncsi turisták nagy számának köszönhetően már nem tudta pihenésre használni, ezért kis múzeumot csinált belőle.