A mai Széchenyi tér és a Várkerület sarkán lévő saroktelek az 1700-as évek végén a gróf Pejacsevich család tulajdonában volt. A grófi család neve 1784. szeptember 20-án került be először a soproni városi tanács jegyzőkönyvébe.

A napóleoni háborúk előestéjén Sopronban és környékén gyülekeztek a bandériumok, ezért egy időre József nádornak és vezérkarának lefoglalták a mai Ógabona téren lévő Pejacsevich-palotát. Emiatt verőcei gróf Pejacsevich Károly (1745–1815) grófnak át kellett költöznie a fentebb említett saroktelken álló kerti házba, mely akkor már a fia, Pejacsevich Vince (1780–1820) császári és királyi kamarás tulajdonában volt. Megjegyzendő, hogy a kellemetlenségért cserébe gazdag ajándékot kaptak a nádortól. A saroktelket, melyen később már egy nagyobb épület, illetve egy kisebb palota is állt, a Pejacsevich-család eladta, majd néhány tulajdonosváltás után az Szürnyegi-Horváth József tulajdonába került. Ő mindent lebontatott, és 1857-ben Handler Nándor tervei alapján felépíttette a ma is látható kétszintes, zárterkélyes, illetve a Várkerület felőli oldalán körerkélyes sarokházat – innen a Horváth-ház elnevezés. Az épületben előbb a Szent Orsolya-rendi Római Katolikus Leánygimnázium internátusa, majd 1947-től a Soproni Állami Entzbruder Dezső Középiskolás Fiúkollégium működött, ma pedig a Szent Orsolya Római Katolikus Gimnázium, Általános Iskola, Óvoda és Kollégium egyik épülete.