Ilse liegt auf der rechten Weserseite.Im Norden von Ilse liegen Döhren und Neuenknick, im Osten Rosenhagen. Südlich grenzt es an Raderhorst, Ilserheide und Gorspen-Vahlsen und im Westen an Jössen und Windheim.
