Mae gweddillion y castell yma, or math mwnt-a-beiliwedi lleoli ar penrhyn bychan o'r enw Ynys Hir yn aber yr Afon Dyfi, yn agosi'r ffordd A487yn agos i orsaf rheilffordd Cyffordd Dyfi. Pan mae'r llanw allan mae'r ardal o'i gwmpas i gyd yn gors gyda dim ond yr afon yn ymdroelli tua'r mor.