「及位」は「のぞき」と読みます。
山岳信仰（山を神とし信仰すること）が盛んだった時代に沢山の修行僧が県境に建つ山にこもり、断崖から逆さづりになって横穴をのぞく「のぞき」と呼ばれるという修行をしていたことから、「のぞき」と呼ばれるようになった由来だとか。