DOU GROUP / RESEARCH

研究方向

从田间图像到植物分子信息,研究感知、知识与功能之间的连接。

01 / TaxoSeg

作物病害分割

识别病害,也看清病斑。

同一种症状可能出现在不同作物上,复杂背景与遮挡也让病害识别更具挑战。TaxoSeg 结合田间图像和作物—病害分类结构,在像素层面定位病斑,并识别病斑所属的作物与病害。

方法以结构化语义原型连接视觉区域和类别知识,利用作物上下文区分相似症状,并将类别名称与症状描述共同用于区域识别。

田间病叶与 TaxoSeg 标出的病斑

分割结果TaxoSeg

02 / WheatField-Seg · ADF-Syn242

农业图像数据

让研究扎根真实场景。

WheatField-Seg

带有像素级病斑标注的小麦田间图像,涵盖赤霉病、白粉病和条锈病。自然光照、叶片遮挡与复杂背景,保留了真实田间观察的条件。

1,762田间图像3小麦病害像素级
病斑标注

2026 年 5 月 · 河南省国家小麦工程技术研究中心

ADF-Syn242

由多个公开来源整理的农业图像数据集,围绕作物与病害组织,涵盖多样的作物健康状态,为农业图像识别与视觉语言模型研究提供多来源图像资源。

379,194农业图像242类别图像级
类别标注
田间成片的小麦田间的麦穗与叶片田间的一株麦穗

WheatField-Seg 田间采集图像

03 / Qwen3.5-0.8B

轻量视觉语言模型

用轻量模型理解农业图像。

我们基于 Qwen3.5-0.8B 官方 Instruct 多模态基座,开展农业领域的量化低秩适配研究。通过农业图像与类别监督,探索轻量模型对作物及其健康状态的识别能力。

模型读取图像并输出一个中文类别名。这一清晰的输出形式,为后续按类别组织农业知识和检索相关文献提供入口。

领域适配 · 概念示意
Qwen3.50.8B
农业图像→中文类别名

04 / Vision + Literature

农业知识助手

从田间观察,走向有据可查的分析。

视觉语言模型先从图像确定中文类别名,再以类别名和用户问题检索农业文献。回答依据检索到的证据组织,让类别判断与农业知识各有来源。

需要了解病斑范围时,调用 TaxoSeg 提供分割结果。类别识别、病斑位置和文献证据共同服务于农业问题的分析。目前,整体链路仍在集成与研究中。

研究进行中 · 链路集成

研究链路

  1. 01
    田间图像视觉语言模型识别
  2. 02
    中文类别名结合用户问题
  3. 03
    农业文献检索返回相关文献证据
  4. 04
    依据证据组织分析结合类别与病斑位置
↳ TaxoSeg

需要病斑范围时,对同一张图像进行分割。

05 / PlantPTM

植物生物信息

从蛋白质序列,探索植物功能。

植物蛋白质的翻译后修饰与蛋白功能密切相关。PlantPTM 结合蛋白质语言模型与多视图特征,从蛋白质序列中预测多种翻译后修饰位点,为植物蛋白功能研究提供计算工具。

相关论文发表于 Molecular Plant,配套开源代码与在线预测平台已公开,便于研究者使用和进一步研究。

序列 × 功能 · 概念示意
蛋白质序列→修饰位点

研究源于具体问题,也在交流中向前。

联系课题组