1974年9月,纽约州司法部长公布对“上帝的孩子”的调查报告,指出他们有瞒税、逃避兵役、诱拐青少年、洗脑、袭击信徒的父母和反常的性行为等不法行为。伯格为暂避风头,下令化整为零,把信徒分散到世界各地,称之为“出埃及”。并以“金字塔式”的层压统治,以“宫室家庭”为首,下设各级领导人,最基层的组织为“家庭”,每12人为一单位。1978年2月,伯格再下令易名为“爱之家(Family of Love)”,以掩人耳目,把一切权力集中自己的手中,实行独裁统治。同年,他们在东南亚开展工作。全盛时期,“爱之家”遍布世界70多个国家,人数约一万人。