根据《中华人民共和国消费者权益保护法》的规定，您有权要求商家按照实际支付的金额退款。在本案例中，您已经支付了400多元，并且商家提供的珠宝价值仅为100元，因此商家应该退还您剩余款项中的差额部分，即（400元-2000元/2400元）*400元=3333元。请注意，如果商家拒绝退款或未能提供足够的证据证明其价值，您可以考虑通过其他途径寻求帮助，如向消费者协会投诉或者直接提起诉讼。