Hugging Face Blog·· 2021-10-13AI 评分22
用遥感(卫星)图像和描述微调 CLIP
Fine tuning CLIP with Remote Sensing (Satellite) images and captions
AI 导读
一个跨 12 个时区的团队用 RSICD、UCM 和 Sydney 三个遥感数据集微调了 OpenAI 的 CLIP,让模型能按文本描述检索卫星图像。训练采用对比学习,并用 Torchvision 图像增强和 Marian MT 回译文本增强抑制过拟合,评估显示增强后过拟合明显下降。模型已开放下载,并提供在线 demo。
来源:Hugging Face Blog · huggingface.co