一般的には、甥、姪あたりまでという感覚です。
ただ、家によってルールが違うと思いますので、今までの冠婚葬祭のお祝いのやり取りで
お祝いを頂いていたりした場合は、多少遠い血縁の親戚でもするようにします。
また近所の方で長い付き合いがある子供にも入学祝いしてもよいと思います。
逆に入学祝いを頂いておらず、今後その機会も無いようでしたら
気を遣わせてしまうのでお祝いの言葉だけにしておいたほうが無難だと思います。