根据尺码表，半身毛衣96的胸围适合86-90厘米的胸围穿着，而106的胸围则适合96-100厘米的胸围穿着。因此，如果要穿得合适舒适，96的胸围穿106的胸围会明显过松，影响美观和穿着体验。建议选择符合自己实际尺寸范围的衣服，以获得最佳的穿着效果。