Merlin Bird ID
(merlin.allaboutbirds.org)- 鳥の観察現場で音・写真・質問を使って候補を絞り込める無料の鳥識別アプリで、初心者でもすぐに確認できるよう支援する点が中核となっている
- Sound IDは周囲の鳥のさえずりをリアルタイムで分析し、録音とMerlinのさえずり・鳴き声データを比較して識別を支援する
- Photo IDとBird ID Wizardは、写真または3つの質問を通じて可能性のある鳥の一覧を提示し、オフライン利用にも対応する
- 識別した鳥はSave My Birdでlife listに追加でき、単なる検索を超えて個人の観察記録へとつながる
- MerlinはeBirdの観察データ、コミュニティの写真・音声、専門家のヒント、Birds of the Worldの分布図を活用し、地域や時期に合った鳥の一覧を提供する
音・写真・質問で鳥を識別
- Sound IDは周囲の鳥の声を聞き、どの鳥がさえずっているのかをリアルタイムで候補表示する
- 録音した音をMerlinのさえずりと鳴き声のデータと比較し、聞こえた鳥を確認できる
- 完全にオフラインで動作するため、場所を問わず鳥の声の識別に活用できる
- 対応地域は米国、カナダ、欧州、中南米の一部の一般的な鳥類、インドで、今後さらに多くの種と地域が追加される予定
- Photo IDは鳥の写真を撮るかカメラロールから取り込むと、可能性のある候補を短い一覧で提示する
- Photo IDも完全にオフラインで動作し、撮影した写真の鳥をどこでも識別できる
- Bird ID Wizardは識別したい鳥について3つの簡単な質問に答えると、可能性のある候補一覧を提示する
- あらゆるレベルのバードウォッチャーやアウトドア利用者が、世界中どの国でも鳥を学ぶのに役立つ
観察記録と地域別の鳥一覧
- Save My Birdは、識別のたびに「This is my bird!」をタップして鳥をlife listに追加できるデジタルスクラップブック機能
- Merlinは eBird を基盤として、ユーザーがいる場所で見られる可能性が高い鳥のカスタム一覧を作成できる
- フィルターオプションで場所や時期に応じた鳥を確認できる
- ダウンロード済みのOffline Birds全体表示に切り替え可能
- アプリの活用方法は Merlin Tips and Tricks で確認できる
- Merlinはコミュニティが提供した写真、さえずり、鳴き声と、世界中の専門家によるヒントをあわせて提供する
- 分布図は Birds of the World から取得している
- 機能全般は eBird に提出された数十億件の鳥類観察データに基づいている
1件のコメント
Hacker Newsのコメント
このアプリは本当に大好き。1か月ほど前、家の裏の森でやかましく鳴いている鳥が何なのか知りたくて使い始めたら、Tufted Titmouse と Carolina Wren だと分かった
この1か月で朝のルーティンがすっかり変わって、今では家の中に座っていないで、裏庭で餌箱を満たして掃除し、リスをなだめるためにピーナッツを置いたあと、デッキに座ってコーヒーと朝食を取りながらスマホで MerlinID を起動している
人間の言語を新しく学ぶのは苦手だけど、このアプリを1か月使い続けたら、種だけでなく何羽かの個体まで、それぞれ固有の鳴き声や声で聞き分けられるようになった
惜しいのは、個々の鳥をカタログ化して、その鳥の鳴き声の録音や写真を一緒に保存する機能があればいいという点くらい。開発者には敬意を表したいし、ここしばらく使った中では断然最高のアプリだ
Exploreと Life List の両方で写真と鳴き声は見られるアプリ自体は本当に良いけど、Life List に鳥を追加するフローには不満がある。音や写真で鳥を識別したあと、どこで/いつ見たかを聞かれるのだが、デフォルト値が最悪。現在地と時刻を把握しているはずなのに、たまに何か月も前に行った場所や時間をランダムに選ぶことがあるし、しかも今まさに現在地で複数件入力した直後でもそれを無視する
Merlin は、「みんなのポケットの中のコンピューター」が本来なり得た姿を示す輝かしい例だと思う。周囲の世界や人々と、より親密につながれる素晴らしいアプリだ
ときどき団体への支援依頼は来るけれど、明確で直接的なお願いでしかなく、少なくとも自分の知る限り ダークパターン はない
とくに音声識別は、たいていの人ができることの範囲を大きく広げてくれる驚くべきやり方で、人々が耳だけでより多くの鳥を識別できるようになる入口になっている。自然の中で音にもっと注意を払うようにもしてくれる
ただ、Merlin、とくに eBird は、バードウォッチングを競争的な「高得点」視点に少し寄せすぎている面がある。気候変動が鳥類個体群に与える影響を考えると、世界中を飛び回ってできるだけ多くの種を見ようとけしかけるのは、明らかに問題がある
それでも些細な不満ではあって、Merlin は少しでも使う可能性のある人になら無条件で勧める数少ないアプリのままだ
このアプリの Sound ID 側の研究者を何人か友人として知っている。チームは機械学習モデルと評価を堅牢なものにするため、本当に多くの労力を注いでいた
内部的には、Sound ID は単にデータを食わせてうまくいくことを願うよりも、ドメイン専門家主導 の慎重な研究のほうが信頼できる結果を出せることを示す良い例だ
別々のクロウタドリに一貫して名前を付けるのは難しいかもしれないけれど、ほかの鳥なら何らかの AI アルゴリズム で可能そうに思える
友人たちには、雄鶏も鳥 であり、世界のモーニングコールとして認められる資格があると伝えてほしい
このアプリが注目されているのは本当にうれしい。開発者やプロダクト担当者がここに来て見てくれるといい
音声識別は、特にネットワークがまったくないコロンビアのジャングル／森林でも非常によく動く
ただ、アプリのそれ以外の部分は改善の余地がかなりある。ボタンがしばしば反応せず、画面に一貫性がなく、結果が消えるなどの問題がある
機能面ではiNaturalist連携があるといい。以前の録音に戻ると、最初にキャプチャしたときには結果があったのに「No matches」と表示される。自然の中でグループと一緒にいるとき、何かを識別できたのに誰かに見せようとした瞬間にはもう消えている、ということがよくある
手早い出発点としては、Webフォームを開く代わりにクイックフィードバックボタンを入れて、気軽に問題を報告できるようにするとよさそう。このアプリを可能にしてくれている皆さんに大きな感謝を伝えたい
とても長い録音を作るとアプリが重くなり始めることはある。なのでだいたい10分くらいで切って、新しい録音を始める使い方になる
それから、すぐ近くにいる非常に大きくて明瞭な鳥、たとえば頭上のBaltimore Orioleを見逃す一方で、かすかで遠いさえずりは正確に当てるという妙なこともある
識別判断の根拠になったソノグラムの区間を表示してくれるといい。何羽も同時にさえずっていると、ソノグラムを見るのが特に難しい
アプリのそれ以外の部分については逆の経験をしているが、機種ごとの問題かもしれない。それでもすばらしいアプリだ
でもAndroidでは起動後255秒ごとにクラッシュする。実際に時間を測った
バグレポートを送る方法はある？
鳥のさえずりを再生するときは気をつけたほうがいい。数日前、識別リストにあったCardinalの鳴き声をタップしたら、フェンスに営巣していたオスのCardinalが完全に取り乱して、その後はオスもメスも見なくなった。以前は毎日見かけていたのに、縄張り意識の強い鳥なんだ
アプリで軽い気持ちで再生して、うっかり活動中の巣から追い払ってしまったのではと心配している
自分が鳥だったとして、意味のわかる特定の感情や文句を含んだ正体不明の鳥の声が聞こえたので行ってみたら、巨大なサル人間が自分の体からその音を流していたとしたら、家族を移すと思う
Cardinalはたしかに縄張り意識が強く、互いを追い払う。特に営巣時はそうだ
似た調子で口笛を吹くことも、注意を引くために「pishing」することも、スマホで音を流すことも、どれも正常な行動を妨げる。車、トラック、芝刈り機、オートバイも鳥の妨げになる
https://www.sibleyguides.com/2011/04/the-proper-use-of-playb...
鳥の縄張りでさえずりを流すと、その鳥が「侵入者」に反応する様子を近隣のオスやメスが注意深く見ている。ある研究(Mennill et al 2002)では、攻撃的な再生音にさらされた高順位のBlack-capped Chickadeeのオスが、つがい相手や近隣個体に幽霊の侵入者を追い払えなかった敗者と見なされ、地位を失った
機器で鳥の言語をまねて再生できる以上、鳥の家族を壊してしまう潜在的な結果が確かにある
そのたびに「うわ、この鳥すごく近いな！ スマホを出してMerlinが何かわかるか見てみよう……」と思ってから、やらかしたと気づく
興味深い点:
「Sound IDは、まず音声録音を視覚表現であるスペクトログラムに変換し、その後、Photo IDを動かしているものに似たコンピュータビジョンツールで解析して学習される」
上でスクロールしているスペクトログラムは、ただのかわいい飾りではなく、実際に認識が動作する仕組みそのものだ
ずっと昔、学部生のころに言語学の研究室で働いていたとき、録音を聞くのと同じくらいスペクトログラムを見て音、特に調音位置を識別していた
だから、音の別表現よりもスペクトログラム上にモデルを作るのはかなり理にかなっているように思える
何年も積極的にバードウォッチングをしてきたが、こういう音声識別器を使い始めたのは今年になってからだ。本当に大きな助けになった。すでに鳴き声だけで12種以上の鳥を新たに見つけ、そのうちいくつかは自力で識別する方法も覚えた
この趣味を楽しむまったく新しい道が開けた。少なくともここでは、機械学習/AIは明確で前向きな影響を与えている
バードウォッチャーとして、この技術には全体的にとても感心しており、おおむね信頼している
ただ、似た種が同じ地域にいる場合は、何度か怪しいと思ったことがある。たとえば、うちの近所に本当に Purple Finch がいるのか確信が持てない。一日中見かけるのは House Finch ばかりだからだ。それでも私のほうが間違っている可能性はある。十分に性能を見せてくれているので、その件で間違いだと決めつけるつもりはない
もちろん実際に識別できていた可能性も技術的にはあるが、Merlin が検出した Bald Eagle は、おそらく通りの先で子どもたちが走り回って叫んでいた音だったのではないかとかなり確信している
見た目なら両者ははっきり違うが、Merlin をかばうなら、私も耳だけでは聞き分けられない
このアプリは本当に気に入っていて、いつも使っている
ただ不満が一つあって、PC のWebでは画像をアップロードできない。探鳥写真に DSLR を使う人間にとって、写真をスマホに移してアプリに入れなければならないのは、本当に苦痛なユーザー体験だ
世界の終わりというほどではなく、結局は別の方法で鳥を識別するだけだ。それでも、モバイル以外のユーザー体験も提供してほしい
まだ初期アルファだが、DSLR のワークフローには役立つかもしれない
Webベースの代替手段を試したいなら、ブラウザから画像を直接アップロードできるデモスペースがある: https://huggingface.co/spaces/birder-project/birder-image-cl...
ただし先に断っておくと、これは何らかのユーザー体験を提供するためというより、モデルを見せる目的で設計されている。なので、写真を撮った地域に合わせて eu-common や arabian-peninsula のような接尾辞を見て、適切な 地域モデル を自分で選ぶ必要がある
対応範囲はまだ非常に限られており、今後数か月でさらに多くの地域が追加される予定だ
裏庭に Mockingbird が1羽いて、いや、もっと正確に言えば私たちがその鳥の縄張りに住んでいる。その鳥が Gila Woodpecker を真似する。録画もしていて、その動画を再生しながら Bird ID を使うと、実際に Gila Woodpecker と表示される