A Bagolyvár építtetése Vermes Lajos, a sport szerelmesének nevéhez fűződik. Fáradhatatlanul dolgozott azon, hogy Palicson versenyezhessenek Európa legnevesebb sportolói. Vermes Lajos alig volt húsz éves, mikor megszervezte az első Palicsi Olimpiai Játékokat, amit a sporttörténet a modern kori olimpiai játékok elődjének tart. Vermes Lajos a családi vagyon felhasználásával ekkor építette fel a Bagolyvárat, ahol a Palicsra érkező sportolókat szállásolta el. Így ezt az épületet joggal tekinti a sporttörténet a világ első olimpiai falujának.