About Me
👋 你好,我是 Evan Zhong!
- 目前是东南大学研究生在读
- 研究方向是多模态大模型 / Graph RAG / LLM的Agent构建
🔧 科研与项目经历
面向电子器件datasheet的多模态知识图谱构建与社区化图检索增强查询
- 基于Docling的多模态文档解构与语义修复:利用多模态VLM对图片进行上下文感知的信息抽取,生成准确的图片信息与关联实体抽取。
- 采用同源双视角的语义分块策略,将 Markdown 文档智能地拆分为最小的、有意义的“结构块”,根据文档中最大的“结构块”来动态计算一个合适的分块尺寸,保持 chunk 语义结构完整且长度合理。同时构建分块视角1:纯文本去图分块,减噪音,有利于模型聚焦,精确抽取出型号实体;分块视角2:保留图片,为每个chunk创建一个包含其前后相邻chunk内容的滑动。这些chunk拥有更完整的语义,用于抽取器件参数。
- 通过LLM驱动的Agent实体决策与融合实现电子器件的知识图谱构建:利用LLM驱动的型号名称消歧与融合实现器件的准确提取,基于双视角的数据融合与器件参数抽取,利用LLM驱动的冲突参数智能决策机制,实现准确构建规范化的多模态电子器件知识图谱。
- 采用社区化构建的图谱检索增强生成:引入“社区”划分的器件图谱检索,类似于 GraphRAG 的社区层次索引思想。针对电子领域知识各子领域的特点构建不同的社区;通过Query改写理解用户意图并用领域术语表达重写/扩写提问;提供LLM规划图谱检索的路径:确定从哪个社区/实体出发、沿哪些关系遍历,实现多跳路径推理;采用混合自适应剪枝(Beam Search + 语义剪枝),获取更为精准的检索路径,避免多跳推理时的路径的组合爆炸。
基于 Django + MySQL 构建的电弧故障数据管理与分析平台(全栈开发)
- 前端使用 HTML5 / CSS3 / JavaScript + Fetch API 实现交互式页面与 RESTful API 通信。
- 后端基于 Django 构建自定义用户系统,使用 ORM 管理用户、电弧数据、算法模型与测试结果,实现用户认证、数据上传、特征提取、算法模型评估与可视化等功能。
- 设计 FFT 实现电弧故障信号的特征工程,包括时域分析、频域分析和小波分析。
- 设计实现完善的用户管理系统,包括用户认证、个人资料管理等功能。
- 支持企业与用户自行上传算法模型评估(准确率、F1 分数、混淆矩阵等、误判率)。
补苗移栽机器人(2020/10 - 2020/12)
- 设计机械臂结构
- 主控 STM32 + 电机驱动电路设计
- 行走程序编写(基于超声波传感器)
三相 AC-DC 变换电路(2021/11)
- 三相 PWM 整流双闭环电路设计
- MATLAB 仿真建模与验证
- 实物电路焊接调试