柳时元与妻子通过朋友介绍相识于2009年，2010年奉子成婚后3个月柳时元便升级成为奶爸。
而本以为从此能幸福生活的柳时元仅仅在婚后不满2年便被传出离婚的消息。而至于为何离婚当事人都守口如瓶，而柳时元当时也公开表示会努力挽回这段婚姻，不愿意与妻子离婚。
据韩国大法院透露，柳时元于2011年在妻子赵某车上、手机上安装GPS以及位置追踪软件，隔年5月因收集他人位置情报被起诉。
不仅如此，柳时元也涉嫌对要求解除位置追踪装置的妻子加以威胁与施暴。因所以控诉被证实，柳时元在一审以‘严重侵害被害人私生活’为由被判罚款700万韩元。
二审时，法官表示，“柳时元有需要彻底地反省以丈夫以及父亲身份对家庭有多忠实，对妻子有多尊重等”，因此给予了与一审相同的判决。
