使用计算机视觉方法做海洋濒临物种检测 - 海洋生物物种鉴定

去年11月有相关的报道，谷歌用深度学习守卫海洋：如何在 4.5 万张照片中找到一只濒危的“美人鱼”？

" W3 d8 g' x% o

今年TensorFlow-dev-summit中又提到了这个是利用tensorflow自动化构建的海洋生物系统，使用的是大量的高像素的无人机航拍图片，然后在图片中找出到了”海牛“这种濒临物种。

/ f3 j* l1 u# K 7 j* k3 t) E# s# i( K o& k/ W

前几天我看到了报道中的内容，然后提问了 用Tensorflow自动化构建海洋生物系统，利用上万的图片训练，找到濒临物种“海牛”是什么原理？ - 人工智能 - 知乎 ，后来经过回答者给出了该应用的相关论文《Automating Marine Mammal Detection in Aerial Images Captured During Wildlife Surveys: a Deep Learning Approach》，看了论文后发现，报道有误导，因为报道中给出的图片非常模糊，显得识别的效果非常出人意料，但是在论文中使用的训练数据和人工标注数据其实是非常高像素的无人机航拍图片，如图：

5 a8 T* }7 M, I. }( ?$ J

论文使用的方法其实也是非常常规的方法，而且主要也是有非常优质的数据，我们来看看。

" U1 u: f: I c. z

1. 系统概述

3 Y/ x2 `( K" x. w1 Z! ~3 Y0 t% W

: |% U8 g) r/ F

首先使用Simple Linear Iterative Clustering (SLIC)做图像分割，然后把每一个分割区块看做一个region proposal，然后对候选窗口使用DCNN做one-hot分类。

2. SLIC参数设置

SLIC中最重要的一个参数设置就是把像素分类的个数，论文中设置的个数的计算方式为：

3 Y8 A% t0 f& v" N, K7 ], U3 w# a

其中，w,h分别是整个画面的宽和长，d是一个预测的每个bounding box的长，这个其实可以理解为就是”海牛“在画面中的大小。

* M& K: |3 \9 y

3. CNN结构

文中的CNN结构对比了两种结构，

第一种是没有使用maxout的结构：

" {6 t7 Q$ X% H" \, c2 n8 \; m. \ c

第二种是使用了maxout的结构：

& c/ z7 c1 a' f# m' u3 D8 L( d, ^, \

4. 实验结果

! O3 ]' D8 ]) q5 a6 X9 y ) U: r0 R+ A/ j2 ~

7 a/ @; i) i7 n4 I4 a" v$ O

准确度其实还不是很高，不过训练还是挺快的，文中用GPU训练，大概就训练了半天，实际应用中，据说可以帮助解决80%的海牛检测。

5. 延伸

[1]实验数据的HDF5格式和python code[2]另外一个关于bowhead whale的研究：《Trends in bowhead whales in West Greenland: Aerial 2 @4 C) S" P6 t: Z9 g surveys vs. genetic capture-recapture analyses》

---人工智能应用系列·介绍---

本系列介绍各领域的一些有趣的人工智能应用，原理可能并没有那么复杂，目的是开拓大家的视野和思路，也许人工智能能做的事情比我们想象的还要多。

专栏地址：人工智能应用系列 - 知乎专栏 （欢迎投稿和关注） * k# { ]0 E7 [. i

本人的Live：「跨领域人工智能应用」系列Live的开篇--如何做跨领域人工智能应用

$ M8 J# q. H) h" g% @ G% w x $ f2 U& l/ z, x' ?. Q# h4 q ' n- N7 `% u- D1 c