Box byl zařazen na každé letní olympijské hry od jejich zavedení v roce 1904, s jedinou výjimkou Stockholmu 1912. Při oznámení programu v roce 2022 však byli dočasně odstraněni z kalendáře Los Angeles 2028 kvůli konfliktu mezi řídícími orgány boxu. Naštěstí to bylo vyřešeno a během 144. zasedání Mezinárodního olympijského výboru (MOV) tento týden MOV uznal World Boxing jako mezinárodní federaci odpovědnou za boxerské disciplíny na letních olympijských hrách, čímž nahradil historickou IBA.
Role organizace olympijského boxu by měla, stejně jako u jiných sportů, připadnout Mezinárodní boxerské asociaci (IBA), organizaci založené v roce 1946, která má pět kontinentálních konfederací a organizuje mistrovství světa v boxu. Pověst této organizace vedené Ruskem však byla zasažena již před ruskou invazí na Ukrajinu, přičemž nedávná předsednictví byla ovlivněna obviněními z korupce, což vedlo k tomu, že MOV v roce 2019 pozastavil spolupráci s ní a místo toho se rozhodl uspořádat vlastní boxerské závody pro olympijské hry v letech 2021 a 2024.
Proto došlo k tak obrovské kontroverzi s boxery Imane Khelifem za Alžírsko a Lin Yu-tingem z Tchaj-wanu, kteří byli vyloučeni z mistrovství světa 2023 pořádaného IBA kvůli neúspěchu v testech způsobilosti pohlaví, ale byli přijati MOV pro Paříž 2024, přičemž oba boxeři získali zlaté medaile ve svých váhových kategoriích.
Podezření týkající se financování IBA a vazeb na ruskou vládu zvýšilo nedůvěru vůči IBA, přičemž země bojkotovaly jejich akce a MOV v červnu 2023 oficiálně zrušil uznání IBA, první mezinárodní federace, která byla vyloučena z olympijských her, a místo toho upřednostnil World Boxing, který byl založen v dubnu 2023. Země, jejichž národní federace nejsou součástí světového boxu (v současné době má 84 členů ve srovnání se 198 členy IBA), mají čas se připojit před zahájením kvalifikace na olympijské hry v Los Angeles v roce 2028.
