方法1:
对于分类任务,每类先手动搞个 100张图,然后训练个基础模型。
找一些相关的数据,用这个模型跑出来一些结果,然后手工挑选一些来扩增数据集。
方法2:
使用 clip 把这些相关的数据做一个嵌入,保存下来,然后通过问问题的方式,找到需要类别的数据
方法3:
直接用 clip 来做图像分类任务?可能需要的计算资源无法被满足,可能不可行。因为需要对 给的图像进行嵌入。
而如果用 clip 做图像检索那么不存在该问题,因为 图像嵌入码可以保存到硬盘里面,对问题文本和图像嵌入码做个相似度计算即可知道该图像是不是你问问题的那一类。
标签:嵌入,迭代,clip,模型,构建,图像,数据 From: https://www.cnblogs.com/odesey/p/17551809.html