斑点で、一匹ずつ見分ける

人の顔認識のように、このカメラはマスの体の黒い斑点の模様で、一匹ずつを見分けています。同じ魚が戻ってくると「おかえり」とわかり、何度も確認できた魚には名前がつきます。いまは 7匹に名前があります。

過去24時間の判定

329同じ魚と一致

40新しい顔

41同じ魚とわかり統合

845確認待ち・判定保留

412斑点が見えず見送り

今日見分けたマス

**ペブル**斑点が 255 点一致
11月10日(火) 00:51（日本時間）

**スケールズ**斑点が 86 点一致
11月10日(火) 00:49（日本時間）

**スペックルズ**斑点が 181 点一致
11月10日(火) 00:45（日本時間）

**フィネガン**斑点が 293 点一致
11月10日(火) 00:20（日本時間）

**ラスティ**斑点が 168 点一致
11月9日(月) 23:49（日本時間）

しくみ

はっきり映った瞬間を選ぶ
ライブ映像から、マスの体の横がくっきり映った瞬間だけを自動で切り出します。ブレている、水が濁っている、こちらを向いている写真は見送ります。
斑点の特徴を見つける
体の黒い斑点や模様のかどを「特徴点」として、1枚から数百個見つけます（SIFT という画像解析の方法）。
これまでの「顔」と照らし合わせる
覚えているすべての顔と比べ、点どうしの位置関係ごと一致するものだけを数えます（RANSAC で、ずれや回転を考えに入れて確認）。同じ魚なら数百点、違う魚なら数十点以下です。40点以上一致し、2番目の候補の1.5倍以上なら「同じ魚」と判定します。
迷ったときは、もう一度よく見る
魚が斜めを向いていて自信がないときは、学習済みの特徴点マッチング（DISK と LightGlue）で、いちばん可能性の高い数匹と見比べます。
名前がつくまで
新しい顔は、同じ訪問の2枚の写真が一致して初めて登録されます。そして10分以上あけた別々の3回の訪問で一致し、1時間以上にわたって確認できたら、名前がつきます。
左と右は、別の顔
マスの斑点は左右で模様が違います。一匹だけで映っているときに向きを変えるところを見て、左右の顔を同じ魚としてつなげます。二匹が同時に映れば、別の魚だとわかります。
夜の見直し
配信が終わった夜、その日の写真をもう一度まとめて見直し、取りこぼしや間違いを直します。