天天看點

Plant Phenomics | 虛拟圖像“以假亂真”,無需人工标注,自監督建立小麥表型算法

作者:小麥研究者

→檢視原文 →檢視PDF

早期生長勢(Early Vigor)是刻畫作物苗期地上部生長活力的綜合性狀,與品種适應性和産量潛力密切相關。利用現代植物表型高通量檢測裝備和智能化解析技術,監測苗期作物葉片數量的動态變化有助于解析早期生長勢相關性狀。現階段,人工智能算法極大提高了表型鑒定的準确性和效率。然而,算法嚴重依賴大量人工标注的訓練樣本,尤其在作物苗期,器官纖細,标注成本高、誤差大,成為限制人工智能算法在早期生長監測應用中的重要瓶頸。

面向早期生長勢高效精準解析難題,文章以小麥為研究對象,結合三維作物模型和域自适應遷移學習,開辟基于虛拟資料集的表型算法研發新途徑,對于完善小麥表型組研究方法,提升基于早期生長勢的育種效率具有重要價值。

2023年3月, Plant Phenomics 線上發表了南京農業大學聯合多家機關合作完成的題為Self-Supervised Plant Phenotyping by Combining Domain Adaptation with 3D Plant Model Simulations: Application to Wheat Leaf Counting at Seedling Stage 的研究論文。

文章利用三維生長模型與域自适應遷移學習,實作無需人工标注的自監督表型算法研發。提出利用内嵌植物生理機理知識的三維作物生長模型開展多品種的虛拟表型試驗,生成不同生育期小麥冠層結構,研究田間小麥虛拟圖像自動生成方法;進而,綜合利用光線跟蹤算法研究田間小麥虛拟圖像中相應的植物器官标簽自動生成方法,建構覆寫多個關鍵生育期的帶标簽高品質訓練資料集。

Plant Phenomics | 虛拟圖像“以假亂真”,無需人工标注,自監督建立小麥表型算法

圖1 利用數字植物表型平台(D3P)模拟田間小麥圖像。從左到右,通過使用D3P在模拟過程中考慮越來越多的因素(上欄),模拟的圖像會變得越來越真實(下欄)

進一步,文章以自動生成的虛拟圖像為源域,田間擷取的真實圖像資料為目标域,進行樣本對抗的域自适應遷移學習;基于遷移學習結果,訓練目标檢測(監測葉片數量)深度學習模型,并對監測結果進行驗證。

Plant Phenomics | 虛拟圖像“以假亂真”,無需人工标注,自監督建立小麥表型算法

圖2 域自适應後的圖像資料。在保證模拟圖像結構不變的前提下,生成了更接近真實圖像的“Sim2real”資料集。

此外,文章提出的葉尖檢測模型在來自包括中國、澳洲、法國、日本和美國等五個國家的獨立測試集上進行了測試,模型能夠有效監測圖像中的小麥葉片數量(R2=0.96),充分展現了該方法的有效性和魯棒性。

圖3 來自全球範圍内不同國家圖像的獨立測試結果

該研究由南京農業大學前沿交叉研究院PheniX Lab聯合來自全球範圍内5個國家7個機關的相關學者合作完成,包括華中科技大學、東京大學、昆士蘭大學、内布拉斯加大學林肯分校和法國農業食品環境研究院。南京農業大學鐘山青年研究員李英倫為本文第一作者,南京農業大學劉守陽教授和華中科技大學陸昊副教授為本文通信作者。相關工作得到了科技部政府間國際科技創新合作重點專項、“十四五”重點研發計劃、國家自然科學基金和江蘇省卓越博士後計劃等項目的資助。

論文連結:https://doi.org/10.34133/plantphenomics.0041

——推薦閱讀——

3dCAP-Wheat: An Open-Source Comprehensive Computational Framework Precisely Quantifies Wheat Foliar, Nonfoliar, and Canopy Photosynthesis

https://doi.org/10.34133/2022/9758148

Plant Phenomics | 基于整合葉片與非葉片組織光合作用的三維冠層模型精确刻畫小麥群體光合

Repeated Multiview Imaging for Estimating Seedling Tiller Counts of Wheat Genotypes Using Drones

https://doi.org/10.34133/2020/3729715

Plant Phenomics | 使用無人機多視角成像技術估算小麥幼苗分蘖數

Plant Phenomics | 虛拟圖像“以假亂真”,無需人工标注,自監督建立小麥表型算法

加入作者交流群

掃碼添加小編微信,拉您進入《植物表型組學》作者交流群,群内不定期開展作者分享會、專刊釋出會等高品質活動。

添加小編微信,備注姓名+機關+PP,加入作者交流群

About Plant Phenomics

《植物表型組學》(Plant Phenomics)是由南京農業大學和美國科學促進會(AAAS)合作創辦的英文學術期刊,于2019年1月正式上線發行。采用開放擷取形式,刊載植物表型組學交叉學科熱點領域具有突破性科研進展的原創性研究論文、綜述、資料集和觀點。具體範圍涵蓋高通量表型分析的最新技術,基于圖像分析和機器學習的表型分析研究,提取表型資訊的新算法,作物栽培、植物育種和農業實踐中的表型組學新應用,與植物表型相結合的分子生物學、植物生理學、統計學、作物模型和其他組學研究,表型組學相關的植物生物學等。期刊已被DOAJ、Scopus、PMC、EI和SCIE等資料庫收錄。科睿唯安JCR2021影響因子為6.961,位于農藝學、植物科學、遙感一區。中科院農藝學、植物科學一區,遙感二區,生物大類一區(TOP期刊)。2020年入選中國科技期刊卓越行動計劃高起點新刊項目。

說明:本文由《植物表型組學》編輯部負責組稿。

中文内容僅供參考,一切内容以英文原版為準。

特邀作者:李英倫(南京農業大學) 排版:陳新月(南京農業大學)

稽核:孔敏、王平

”檢視英文原文

繼續閱讀