这一纠纷最终演变成了法律诉讼。法院在审理此案时，考虑到双方并未正式登记结婚，且彩礼的支付是以婚姻为前提的，因此判决小李家应当退还剩余的彩礼。法院的判决依据是《中华人民共和国婚姻法》的相关规定，即婚前财产应当归各自所有，彩礼作为一种婚前财产，理应在婚姻关系未能成立时予以退还。