「最初」または「はじめ」は beginning と言います。
It's only at the beginning = 最初だけだよ、最初の頃だけだよ
It's probably just at the beginning=多分最初だけだよ
probably をつけると 「多分」とか「きっと」というニュアンスを与えます。
例:
I studied very hard for the test tomorrow, but it's probably just in the beginning that I will study this hard.
明日のテストの勉強を真剣にしましたが、これだけしっかり勉強するのはきっと最初だけだ。
ご参考に。