Впервые в официальную программу Игр бокс попал на Олимпиаде 1904 года в американском Сент-Луисе. Победителями во всех категориях стали спортсмены из США — а иначе и быть не могло, потому что все 18 участников боксёрского турнира на той Олимпиаде были американцами. В следующих Играх, которые проходили через четыре года в Лондоне, участвовали 39 англичан и по одному боксеру от Дании, Франции и Австралии. Ещё через четыре года на Олимпиаде в Стокгольме боксёрский турнир вообще не проводили: в Швеции бокс был запрещённым видом спорта. В 1920 году наступил переломный момент для олимпийского бокса. В бельгийском Антверпене в рамках VII Олимпийских игр прошли первые по-настоящему масштабные боксёрские соревнования, в которых участвовало 114 спортсменов из 11 стран.

После Олимпийских игр 1948 года были отменены матчи за третье место — и по сей день оба боксёра, потерпевшие поражение в полуфинальных поединках, получают бронзовую медаль. С 2012 года в программу Олимпийских игр входит женский бокс. А на Олимпиаде-2016 в Рио на ринг впервые вышли профессиональные боксёры (раньше участвовать в Олимпиадах разрешалось только любителям). Правда ни один из профессионалов в Рио не дошел даже до четвертьфинала.