Для начала надо отметить следующее: потерять здоровье (как я это понимаю: приобрести хронические заболевания и травмы, ограничивающие физические возможности) можно и не занимаясь или занимась физкультурой. Поэтому здесь нет чёткой границы тут здоровье, а тут вред. Наследственное и бытовые травмы никуда не деваются.
Спорт это значит стремление быть быстрее/сильнее/дальше и т.д. в прямом соперничестве с другими, в спорте всегда присутствует риск, т.е. переход за границы текущих возможностей. А там где риск, там всегда есть и проигрыш, а там где проигрыш, всегда есть место и травмам и потере того, что мы считаем здоровьем.
Когда начинаешь участвовать в соревнованиях для удовольствия и избегая возможности рисковать, это значит, что это уже не спорт, а физкультура и ты стал тусовщиком, а не спортсменом. Про контактные виды, единоборства, не могу ничего сказать, если ли там такая возможность, как халявить, пока не довелось еще.