こわがりながら、物事をするさま。
こわいこわいと思いながら。
おそるおそる。
びくびく。

例）
・怖怖と中を覗き込む