We didn't invite him or his sister~　の場合、him と his sister がそれぞれ独立的に意識されています。しかしhim and his sister とした場合は、him と his sisterがひとつのグループとして意識され、個々が独立的に扱われていないということになります。