A község a 8-as számú főútvonalról leágazó és az Őrségbe vezető út mentén, az Országos Kék Túra útvonalán található. Első okleveles említése 1237-ből ismert. A 15. században a környék településeit birtokló Ivánczy család innen származtatta nemesi előnevét. A 17. századtól a Sigray család birtoka lett. Kastélyát báró Sigray Károly építtette, 1745-ben, barokk stílusban. A kastély kertjét az 1810-es években Sigray József, a jakobinus Sigray Jakab bátyja alakította ki és költők, írók találkozó helyévé tette. A kastélyt övező gyönyörű parkban virágzik Magyarország legnagyobb, messze földön híres tulipánfája. A falu emblémája is lehetne a magyar szecesszió remeke, az 1913-ban épült templom Hendrick Antal tervei szerint, aki Koós Károly zebegényi templomát tekintette mintaképnek. Ivánc a rábai vadvizi evezősök és a bakancsos túrázók kedvelt pihenőhelye, ahol horgászni is lehet a Rába folyóban.