精密酪農システムのデジタルツイン開発のための映像ベース牛挙動検出

牛を観察することが重要な理由

現代の酪農場では、各牛が何をしているか―給餌、休息、飲水、反芻（むしゃむしゃ咀嚼）など―を把握することが乳量、健康、福祉に直結します。しかし生産者が24時間すべての動物を監視する時間はほとんどありません。本研究は、一般的な牛舎のビデオカメラと高度なコンピュータビジョンを組み合わせることで、牛の日常行動を自動で追跡し、その情報を群れのデジタル「バーチャルツイン」に取り込めることを示します。こうしたシステムは、装着型センサーを用いずに栄養管理の最適化、早期の疾病発見、効率的な群管理などを支援する可能性があります。

実際の牛舎から仮想群へ

研究者らは、酪農のデジタルツインのための「目と耳」を構築することを目指しました。これは、ほぼリアルタイムで更新される牛舎と牛の仮想モデルです。彼らは健康と生産に最も関係する7つの日常行動に着目しました：立つ、横たわる、立ったまま給餌、横たわったまま給餌、飲水、立位での反芻、側臥での反芻。ウェアラブルセンサーに頼る代わりに、約80頭のホルスタインを飼育する商業的スタイルのタイスタール牛舎に設置した天井および斜めからの監視カメラを使用しました。連続映像を個々の牛に焦点を当てた10秒の短いクリップに切り出し、コンピュータに各牛の行動を学習させるための生データとしました。

コンピュータに牛の行動を教える

生映像を有用なデータに変えるにはいくつかの工程が必要でした。まず、物体検出システムが各フレームで牛を自動検出し、追跡アルゴリズムが部分的に隠れても移動中の牛の識別を保持しました。プログラムは各牛を切り出して標準化されたビデオクリップにリサイズしました。人間の専門家が約5,000本のクリップに対して明確な視覚ルールに従い行動ラベルを付け、互いの作業をダブルチェックして一貫性を確保しました。牛は自然に横たわりや立位に費やす時間が飲水や反芻より多いため、研究チームは希少な行動をデジタル「拡張」で慎重に増強しました—微妙なフリップ、切り取り、明るさの変化、タイミングの調整など—これにより約9,600本のよりバランスの取れた学習セットを作成しました。

システムが時間的パターンを捉える方法

行動を検出するために、チームは二つの主要な映像解析モデル群を比較しました。一つはSlowFastと呼ばれ、同時に二つの視点速度を模倣します：姿勢を長時間にわたって見る「スロー」経路と、頭の素早い動きを重視する「ファスト」経路です。もう一つはTimeSformerで、もともと言語モデル向けに開発されたアテンション機構を用いて空間と時間を横断的に注視し、各フレームのどの部分とクリップのどの瞬間が重要かを判断します。牛舎映像で訓練したところ、TimeSformerはSlowFastをわずかに上回り、行動を約85%の精度で分類し、単一の現代的なグラフィックスプロセッサでもリアルタイム処理が可能な速度を示しました。可視化では、給餌や飲水時にモデルが自然と牛の頭部や口吻に注目し、横たわりや立位では胴体や脚に注目する様子が示され、人間の観察者による判定と一致しました。

行動ストリームから農場の意思決定へ

クリップごとの行動認識ができるようになると、研究者らは牛舎映像上で継続的に稼働する完全なパイプラインを構築しました。プログラムは各牛を時間を通して追跡し、スライディングウィンドウを適用して短時間の誤認を平滑化し、短い誤動作が急速な状態変化として現れないようにします。出力は各個体の明確なタイムラインです：いつ給餌し、横たわり、立ち、飲水し、反芻したか、各行動の継続時間やシステムの信頼度とともに示されます。これらの構造化されたログは、給餌時間から飼料摂取量を推定する農場の栄養モデルに直接読み込め、実際の牛の行動を反映する仮想牛が表示されるゲームのような環境で3Dデジタルツインを駆動できます。24時間の単一牛の事例では、システムは1日の行動を再構築し、給餌時間と基本的な個体情報から推定乾物摂取量を算出しました。

将来の酪農場にとっての意義

本研究は、安価なカメラと慎重に設計された映像モデルが、デジタルツインの感覚層として十分に正確な継続的な個体別行動記録を提供できることを示しています。本研究がまだ配合変更や疾病通知などの意思決定を自動化する段階には至っていないものの、そうした上位ツールが依存する重要な入力ストリームを提供します。より開放的な牛舎設計へ拡張し他のセンサーと組み合わせることで、生産者は動物の日々のリズムを詳細かつ常時把握できるようになり、牛と環境の双方に利益をもたらす、より穏やかで精緻な管理が可能になるでしょう。

引用: Rao, S., Garcia, E. & Neethirajan, S. Video-based cattle behaviour detection for digital twin development in precision dairy systems. npj Vet. Sci. 1, 3 (2026). https://doi.org/10.1038/s44433-026-00004-x

キーワード: 精密畜産, コンピュータビジョン, 乳牛の行動, デジタルツイン, 動物福祉モニタリング