2026-11-17 合肥物質科学研究院(HFIPS)

Technical workflow for weed detection in Chinese medicinal herb fields. (Image by SUN Youqiang)
<関連情報>
- https://english.hf.cas.cn/nr/bth/202611/t20261117_1219263.html
- https://www.sciencedirect.com/science/article/pii/S258972172600098X
薬用シャクヤク畑の除草ロボットに向けたRGB-D物体検出フレームワークによる雑草認識と位置推定(Weed recognition and localization based on RGB-D object detection framework for weeding robot in Paeonia lactiflora Pall. fields)
Wei Zhang, He Huang, Youqiang Sun, Junqing Zhang, Fang Qu
Artificial Intelligence in Agriculture 2026-9-4
DOI:10.1016/j.aiia.2026.08.013
薬用シャクヤク(Paeonia lactiflora Pall.)の栽培では、雑草の繁茂による生育阻害が問題となるが、従来の手作業による除草は労力とコストが大きい。本研究では、雑草の重なりや作物による遮蔽、照明条件の変化に対応するため、RGB画像と深度画像を統合した物体検出モデルFW-DETRを開発した。RGBの色・質感情報に深度画像の三次元的な幾何情報を組み合わせ、複数の特徴融合機構によって雑草の認識精度を高めた。また、雑草の形態情報を利用した作業位置推定手法を開発し、ロボットが実行可能な三次元座標を生成する仕組みを構築した。1512組のRGB-D画像と47,633個の注釈付き対象物からなるデータセットを作成し、実験ではmAP0.5が84.4%、mAP0.5:0.95が51.7%となった。実際の圃場での除草試験では、雑草除去率89.5%、シャクヤク損傷率2.3%を達成した。本研究は、深度情報を活用した高精度な雑草認識と位置推定を実現し、生薬栽培における選択的な自動除草技術の実用化に向けた基盤を示している。ただし、今後は他の薬用植物や栽培環境への適用、多視点画像の導入が課題として挙げられている。
Weed proliferation in Paeonia lactiflora Pall. cultivation adversely affects crop growth, while conventional manual weeding is labor-intensive and costly. This study developed FW-DETR, an RGB-D object detection framework integrating RGB images and depth information to address weed occlusion, overlapping targets, and variations in field illumination. The model combines color and texture information from RGB images with three-dimensional geometric information from depth maps through multiple cross-modal feature fusion modules. A morphology-based operation-point localization method was also developed to generate executable 3D coordinates for robotic weeding. The researchers constructed a dataset comprising 1,512 paired RGB-D images and 47,633 annotated instances. Experimental evaluation achieved an mAP0.5 of 84.4% and an mAP0.5:0.95 of 51.7%. Field trials demonstrated a weed removal rate of 89.5% and a crop damage rate of 2.3%. These findings provide a technical foundation for precision robotic weeding in medicinal herb cultivation. Future work will address broader crop and cultivation scenarios and incorporate multi-view imaging to improve the detection of heavily occluded weeds.


