後悔して、悔しいと思うこと。
「臍」は「へそ」のことで、自分のへそを噛もうとしても届かないことから。

例）
・後で臍をかんでも遅いぞ