Cavaliers'ın internet sitesinden yapılan açıklamada, geçen yıl 24 Nisan tarihinde ikinci kez takımın başına getirilen Brown ile yolların ayrıldığı açıklandı.
İlk olarak 2005 yılında Cavaliers'ın başına geçen 44 yaşındaki antrenör, 5 senelik görev süresi boyunca LeBron James önderliğindeki takımı 2007'de NBA finaline taşıdı. Brown yönetiminde 2009'da konferans finaline yükselen Cavaliers, 2006, 2008 ve 2010'da konferans yarı finallerinde mücadele etti.
Brown, iki yıllık Los Angeles Lakers macerasının ardından ikinci Cavaliers dönemine iyi bir başlangıç yapamadı. Sezonu 33 galibiyet, 49 mağlubiyetle noktalayan Cavaliers, play-off'ların dışında kaldı.