Test Time Augmentation and Model Attack & Defense

之前做项目的时候就曾用过这个技术,说白了也很简单,就是测试的时候做数据增强,来增强整个系统的鲁棒性。 另外,最近 hCAPTCHA 的更新是关于给图片加噪声的,说白了也是一种比较简单的模型攻击嘛,但是令我觉得好奇的是,他这个场景做模型攻击究竟会有什么用呢? ...

June 10, 2022 · Edited June 10, 2022 · 473 words · 1 min · 北屿

"Please click each image containing a seaplane"

上次说的 seaplane,这不就来了吗! 说实话,也确实没什么好说的,除了这里面的贵物变多了…因为有太多四不像的了,我觉得对于模型理解自己生成的是 seaplane 的话应该是下面有个横线就算是。反正我是觉得这个任务的生成模型做的不是太好,生成的效果太差了。 ...

May 1, 2022 · Edited June 10, 2022 · 446 words · 1 min · 北屿

"Please select all the elephants drawn with lеaves"

好像这个 prompt 和 水上飞机的 prompt 最近出现的频率比较高,应该是放到生产环境中了。 那么自然要来搞他,数据集可以在这里找到 先来分析一下,一共就三种类型,一种是树叶组成的,一种是花瓣组成的,还有一种不知道是什么玄学组成的黑不拉几的东西. 再来看组成的内容,除了象就是马,就是一个二分类呗。 ...

May 1, 2022 · Edited March 21, 2023 · 2130 words · 5 min · 北屿

"Please click each image containing an airplane in the sky flying left"

My machine is a living life. I’ll prove it. 引言 hCaptcha 在今天又喜提一次更新,出现了新的标签,要求选中 在天上 的 向左飞 的 飞机。 不过幸运的是,所有的样例图片里面,都包含一个飞机,所以这个标签相当于少了一个限制,只有 在天上 和 向左飞 这两个限制了。 ...

March 3, 2022 · Edited March 21, 2023 · 1878 words · 4 min · 北屿

"Please click each image containing a vertical river"

引言 最近 hCaptcha 迎来了一次更新,从之前的物体识别,改成了选出图片中的垂直河流。如上图,截自https://www.hcaptcha.com/。 说实话,第一看看到就知道是一些生成模型搞的,因为图片特征很明显,有些地方特别模糊,然后生成的其实很没有逻辑。最开始以为是 GPT-3 的应用,就把图片描述转成文字,后来觉得不合理,因为太缺乏想象力了,而且各个元素的分布其实也特别明显,都是直直的,很不自然。应该是一些从语义图片生成原始图片的工作,例如 NVIDIA 的一些艺术创作。 ...

March 2, 2022 · Edited March 21, 2023 · 1703 words · 4 min · 北屿