根据您提供的参考信息，以下是在刘公岛岛上或附近提供温泉服务的酒店：
刘公岛人家饭店：这家饭店隶属于刘公岛宾馆，位于刘公岛旅游主干道丁公路中部，虽然主要提供海鲜美食，但并未明确提及是否有温泉设施。
刘公岛海洋大酒店：这家酒店地理位置优越，位于岛上的中心区域，距离码头非常近，设施齐全，房间干净整洁，服务态度好，性价比高。虽然没有直接提到温泉，但考虑到其设施齐全，有可能提供温泉服务。
速8酒店：位于刘公岛旅游码头旁边，是全国连锁的速8酒店，价格合理，环境优美，交通便利。虽然没有明确提及温泉，但作为连锁酒店，可能提供基本的温泉设施。
由于上述信息中没有明确指出哪家酒店有温泉服务，建议您在预订时直接联系酒店咨询是否有温泉设施，以便确认并满足您的需求。同时，您也可以考虑入住威海市区或周边的其他酒店，这些地方可能提供更为丰富的温泉服务。