「〜に行きはじめた」は started to go to 〜、 started to attend 〜 ですが、幼稚園に通いはじめたということなので、単純に started kindergarten でも大丈夫ですし、started going to kindergarten でも started attending という言い方でも大丈夫です。
今年の4月から次男も幼稚園に行きはじめたので、仕事を再開しました。
My second son started to attend kindergarten in April this year, so I went back to work.
My second son started kindergarten in April this year, so I started working again.
日本 
