Разерфорд пачатку судзіцца за дзяцей яшчэ ў 2010 годзе, адразу пасля разводу з мужам. Паколькі Гірша пастаянна пражывае ў Францыі, сумесная апека над дзецьмі стала немагчымай. Суд вырашыў, што дзецям будзе лепш з бацькам.
Кэлі арганізавала цэлую кампанію, каб адстаяць сваё права на выхаванне дзяцей. Яна абскардзіла рашэнне суда і нават правяла акцыю «Вярніце дзяцей Кэлі Разерфорд!», Якую падтрымалі Мелані Грыфіт, Крыс Джэннеру і іншыя знакамітасці.
У маі гэтага года ў Кэлі з'явілася надзея - суд дазволіў Эрмесу і Элен заставацца з мамай у ЗША любы час. Але Гірша падаў у адказ пазоў, абвінаваціў акторку ў выкраданні дзяцей і заявіў, што іх гвалтоўна ўтрымліваюць у ЗША. У жніўні 2015года адбыўся судовае пасяджэнне, на якім Кэлі прымусілі вярнуць дзяцей і перадалі іх бабулі, якая ўяўляла бацькі, прама ў зале суда.
Кэлі распачала яшчэ адну спробу абскардзіць гэтае рашэнне, але зноў няўдала. Зараз дзеці будуць пражываць з бацькам, а Разерфорд мае права іх наведваць у Манака або ў Францыі.
Як паведамляюць замежныя таблоіды, за гады судовых разглядаў Кэлі выдаткавала 1,4 мільёна долараў. У той час як былы муж штомесяц выплочвае ёй аліменты ў памеры 3 тысяч даляраў.