Multi-modal Language Intelligence(M2LI)LAB (多模态语言智能实验室)
英文主页


负责人:徐凡(博士)

职称:教授(校聘)、博士生导师

单位:江西师范大学,计算机信息工程学院

邮箱:xufan@jxnu.edu.cn

招生方向/研究领域:人工智能、自然语言处理、计算语言学、大数据分析

实验室简介

本多模态语言智能实验室以人工智能、自然语言处理、计算语言学和大数据分析为主要研究方向。实验室与美国德州理工大学、新加坡信息通信研究院、苏州大学等著名高校/研究所合作,发表有影响力的学术成果,注重科研成果转化,为我国自然语言处理领域研究做出贡献。

  1. (1)欢迎具有很强自我驱动力的硕士生、博士生加盟课题组!

  2. (2)实验室与美国、新加坡、国内985和211高校/研究所合作稳定,利于优秀学生深造!

  3. (3)欢迎本科生参与课题组科研训练和论文发表,具有ACM、数学建模等经验者优先!


最新动态


  • 2024/02: 一篇关于多模态谣言检测论文被LREC-COLING 2024 (自然语言处理领域国际顶级会议,CCF-B)接收.
  • 2024/02: 一篇关于多模态手语识别论文被LREC-COLING 2024 (自然语言处理领域国际顶级会议,CCF-B)接收.
  • 2023/12: 一篇关于多模态谣言检测论文被Neurocomputing (顶级SCI期刊, JCR Q1, 中科院SCI二区Top, IF=6.000)接收.
  • 2023/10: 一篇关于缺失模态的谣言检测论文被EMNLP 2023 findings (自然语言处理领域国际顶级会议,CCF-B Findings)接收.
  • 2023/05: 一篇关于阿尔兹海默症识别的论文被TECHNOLOGY AND HEALTH CARE (SCI期刊, JCR Q3, IF=1.60)接收.
  • 2022/11: 一篇关于手语识别平台的设计论文获得CPEC 2022优秀论文二等奖.
  • 2022/11: 一篇关于谣言检测的论文被软件学报 (CCF T1, EI)录用.
  • 2022/09: 一篇关于谣言检测的论文被中国科学:信息科学 (CCF T1)录用.
  • 2022/08: 一篇关于谣言检测的论文获得国际EI会议ICCEAI 2022最佳论文奖.
  • 2021/07: 一篇关于方言识别的论文被ACM Transactions on Asian and Low-Resource Language Information Processing (领域权威SCI期刊, JCR Q2, IF=2.000)录用.
  • 2021/07: 一篇关于虚假信息检测和真值发现的综述论文被ACM Computing Surveys (顶级SCI期刊, JCR Q1, IF=16.600)录用.
  • 2020/08: 一篇关于谣言检测的论文被Knowledge-Based Systems (顶级SCI期刊, JCR Q1, IF=8.800)录用.
  • 2020/03:一篇关于方言识别的论文被ACM Transactions on Asian and Low-Resource Language Information Processing (领域权威SCI期刊, JCR Q2, IF=2.000)录用.
  • 2017/12:一篇关于方言语料库构建的论文被LREC 2018 (顶级会议, Oral acceptance rate=188/1102=17.05%) 录用.

导师简介

徐凡,男,博士,教授(校聘),博士生导师,入选江西省赣鄱俊才支持计划(高层次高技能领军人才),江西省自然科学杰出青年基金项目获得者;CCF高级会员;国际期刊Medical Data Mining青年编委;2013年12月获苏州大学工学博士学位,师从朱巧明教授和周国栋教授;2018年12月至2019年12月在美国University of Central Arkansas进行合作研究、2023年7月在新加坡信息通信研究院进行合作研究;具有6年面向欧美客户的企业项目管理和软件研发经验;主持国家自然科学基金3项,主持省级课题10余项(含省杰青和省重点项目等);国家一级出版社学术专著2部;国家发明专利8项(授权5项);软件著作权登记10余项;发表CCF推荐及SCI/EI等高水平论文40余篇(含CSUR、KBS、Neurocomputing、ACM TALLIP、EMNLP、COLING、中国科学、软件学报等顶级期刊/会议);获得ICCEAI 2022国际EI会议最佳论文奖、获得CPEC 2022会议优秀论文二等奖;指导研究生获省级创新专项资金项目及相关大赛40余项;常年担任超过20余种国际/国内权威期刊/会议审稿人;国家自然科学基金函评专家、江西省和云南省科技项目会评专家。

企业工作经历

  • (1)6年面向欧美客户的项目管理和软件研发经验

  • (2)研发项目类型:中间件、推荐系统、海关关税系统、医院信息系统等

教学课程

学生层次 教学课程
本科生 《自然语言处理》、《Python程序设计》
国际留学生(本科) 《Java Programming》
研究生 《面向对象的系统分析与设计》、《高级软件工程》

学术服务

  • (1)CCF高级会员
  • (2)中国计算机学会语音对话与听觉专业委员会委员
  • (3)中国中文信息学会语言与知识计算专业委员会委员
  • (4)中国中文信息学会青年工作委员会委员
  • (5)国际期刊《Medical Data Mining》青年编委
  • (6)常年担任超过20余种国际/国内权威期刊/会议审稿人,含顶级/重要期刊和会议:CSUR、Artificial Intelligence Review、ACM TALLIP、Data Technologies & Applications、ACL、IJCAI、EMNLP、COLING、LREC、计算机学报、软件学报、自动化学报、中文信息学报等

所获奖励/荣誉

  • (1)入选江西省赣鄱俊才支持计划(高层次高技能领军人才).
  • (2)2019年获批江西省自然科学-杰出青年基金项目.
  • (3)ICCEAI 2022,国际EI会议,Best Paper Award(最佳论文奖),2022.08. (排名第1)
  • (4)CPEC 2022,会议优秀论文二等奖,2022.11.(排名第1)
  • (5)2017-2019、2020-2022连续两个聘期考核优秀.
  • (6)2015-2016年度江西师范大学“三育人”先进工作者,2017.09.
  • (7)江西师范大学2015、2016、2017年度优秀班主任,2018.01.
  • (8)国家博士研究生奖学金,2012.12.

研究成果简介

  • 主持项目

  • 代表性论文

  • 学术专著(教材)

  • 国家发明专利

  • 软件著作权登记

  • [1] 国家自然科学基金,地区项目,多模态社交媒体虚假信息检测研究(62162031),2022.01-2025.12。 (在研)
  • [2] 国家自然科学基金,面上项目,赣方言篇章平行语料库构建及计算模型研究(61772246),2018.01-2021.12。 (已结题)
  • [3] 国家自然科学基金,青年项目,汉语篇章连贯性分析计算模型研究(61402208),2015.01-2017.12。 (已结题)
  • [4] 江西省人力资源和社会保障厅,人才培养项目,赣鄱俊才支持计划(高层次高技能领军人才), 2024.01-2016.12。 (在研)
  • [5] 江西省自然科学基金-杰出青年基金项目,基于众包机制的多模态客家方言资源建设及语音处理模型研究(20192ACBL21030),2019.01-2021.12。 (已结题)
  • [6] 江西省自然科学基金,重点项目,开放域中文多技能共情对话关键技术研究(20224ACB202010),2023.01-2026.12。 (在研)
  • [7] 国家留学基金委公派出国访问学者,面上项目,美国University of Central Arkansas, 2018.12-2019.12。 (已结题)
  • [8] 江西省社科规划项目,一般项目,江西方言平行语料库构建及计算模型(17YY05),2018.01-2019.12。 (已结题)
  • [9] 江西省高校人文社科项目,青年项目,赣方言篇章平行语料库构建及共时与历时研究(YY17211),2018.01-2019.12。 (已结题)
  • [10] 江西省自然科学基金,一般项目,基于大数据的商务汉语写作资源建设和机器评分模型研究(20151BAB207027),2015.01-2017.12。 (已结题)
  • [11] 江西省教育厅基金,一般项目,大中华区词语链接库共时与历时研究(GJJ150351),2016.01-2017.12。(已结题)
  • [12] 江西省学位与研究生教育教学改革研究项目,一般项目,融入思政元素基于PBGS和CBGS的《面向对象程序方法与设计》教学改革实践研究(JXYJG-2021-056),2022.01-2023.12。 (已结题)
  • [13] 校级教改课题,物联网专业学生的数学思维培养——以《通信原理》课程为例,2016.09-2018.09。 (已结题)
  • [14] 校级博士启动课题,汉语篇章连贯性分析关键技术研究,2014.06-2016.06。 (已结题)
  • [15] 江苏省研究生科研创新计划项目,基于篇章结构的文本相似度检测技术(CXZZ11_0101),2011.09-2013.05。 (已结题)
  • [1] Fan Xu, Victor S. Sheng, Mingwen Wang. A Unified Perspective for Disinformation Detection and Truth Discovery in Social Sensing: A Survey. ACM Computing Surveys, 2021, Vol. 55, No. 1, 6:1-6:33. (JCR-1区/中科院SCI一区Top期刊, 影响因子:16.600)
  • [2] Fan Xu, Victor S. Sheng, Mingwen Wang. Near Real-Time Topic-Driven Rumor Detection in Source Microblogs. Knowledge-Based Systems, 2020, Vol. 207, 106391:1-9. (JCR-1区/中科院SCI一区Top期刊/CCF推荐期刊, 影响因子: 8.800)
  • [3] Fan Xu, Lei Zeng, Qi Huang, Keyu Yan, Mingwen Wang, Victor S. Sheng. Hierarchical Graph Attention Networks for Multi-Modal Rumor Detection on Social Media. Neurocomputing, 2023, accepted. (JCR-1区/中科院SCI二区Top期刊/CCF推荐期刊,影响因子: 6.000)
  • [4] Fan Xu, Yangjie Dan, Keyu Yan, Yong Ma, Mingwen Wang. Low-Resource Language Discrimination towards Chinese Dialects With Transfer Learning and Data Augmentation. ACM Transactions on Asian and Low-Resource Language Information Processing, 2021, Vol. 21, No. 2, 27:1-27:20. (JCR-2区/CCF推荐期刊,领域权威SCI期刊,影响因子: 2.000).
  • [5] Fan Xu, Jian Luo, Mingwen Wang, Guodong Zhou. Speech-Driven End-to-End Language Discrimination towards Chinese Dialects. ACM Transactions on Asian and Low-Resource Language Information Processing, 2020, Vol. 19, No. 5, 62:1-62:24. (JCR-2区/CCF推荐期刊,领域权威SCI期刊,影响因子: 2.000)
  • [6] Fan Xu, Pinyun Fu, Qi Huang, Bowei Zou, AiTi Aw, Mingwen Wang. Leveraging Contrastive Learning and Knowledge Distillation for Incomplete Modality Rumor Detection. Findings of the Association for Computational Linguistics: EMNLP 2023, pages 13492–13503, December 6-10, 2023@2023 Association for Computational Linguistics. (计算语言学国际顶级会议, CCF-B [Findings])
  • [7] Fan Xu, Lei Zeng, Bowei Zou, AiTi Aw and Huan Rong. CLFFRD: Curriculum Learning and Fine-grained Fusion for Multimodal Rumor Detection. In Proceedings of the LREC-COLING 2024, accepted. (计算语言学国际顶级会议, CCF-B)
  • [8] Fan Xu, Kai Liu, Yifeng Yang and Keyu Yan. WW-CSL: A New Dataset for Word-Based Wearable Chinese Sign Language Detection. In Proceedings of the LREC-COLING 2024, accepted. (计算语言学国际顶级会议, CCF-B)
  • [9] Fan Xu, Qihang Zheng,Jia Shi,Keyu Yan*,Mingwen Wang. Pre-training and Ensembling Based Alzheimer's Disease Detection. Technology and Health Care, 2024, 32:379-395. (SCI期刊,影响因子: 1.600)
  • [10] 徐凡, 李明昊, 黄琪, 鄢克雨, 王明文, 周国栋. 知识图谱驱动的图卷积神经网络谣言检测模型. 中国科学:信息科学, 2023,53(4):663-681. (CCF A类,CCF计算领域高质量科技期刊-T1)
  • [11] 徐凡, 徐健明, 马勇等. 基于知识增强的开放域多轮对话模型. 软件学报, 2022.11. (CCF A类,CCF计算领域高质量科技期刊-T1,EI)
  • [12] 徐凡, 杨逸峰, 叶继华, 王明文. 基于沉浸式情景的面向对象课程教学设计与实践. 计算机教育, 2023.02:58-63. (CCF C类,CCF计算领域高质量科技期刊-T2)
  • [13] 徐凡, 杨剑峰, 颜为之, 王明文. 基于自注意力的端到端方言语音识别模型. 信号处理, 2021,37(10):1860-1871. (CCF计算领域高质量科技期刊-T3)
  • [14] Fan Xu, Mingwen Wang, Maoxi Li. Building Parallel Monolingual Gan Chinese Dialects Corpus. In Proceedings of the 11th edition of the Language Resources and Evaluation Conference (LREC), 7-12 May 2018, Miyazaki (Japan), pages 244-249. (CCF推荐国际会议,语言资源及评测类国际顶级会议,Oral录用率: 188/1102=17.05%)
  • [15] 徐凡, 王明文, 谢旭升, 李茂西, 万剑怡. 基于主位-述位结构理论的英文作文连贯性建模研究. 中文信息学报, 2016, 30(1):115-123. (CCF计算领域高质量科技期刊-T1)
  • [16] Fan Xu, Xiongfei Xu, Mingwen Wang, Maoxi Li. Building Monolingual Word Alignment Corpus for the Greater China Region. In Proceedings of the Joint Workshop on Language Technology for Closely Related Languages, Varieties and Dialects, pages 85–94, Hissar, Bulgaria, September 10, 2015. Association for Computational Linguistic.
  • [17] 徐凡, 朱巧明, 周国栋. 衔接性驱动的篇章一致性建模研究. 中文信息学报, 2014, 28(3):11-21. (CCF计算领域高质量科技期刊-T1)
  • [18] 徐凡, 朱巧明, 周国栋. 基于树核的隐式篇章关系识别研究. 软件学报, 2013, 24(5):1022-1035. (CCF A类,CCF计算领域高质量科技期刊-T1,EI)
  • [19] 徐凡, 朱巧明, 周国栋. 篇章分析技术综述. 中文信息学报, 2013, 27(3):10-22. (CCF计算领域高质量科技期刊-T1)
  • [20] Fan Xu, QiaomingZhu, Guodong Zhou. A Unified Framework for Discourse Argument Identification via Shallow Semantic Parsing. In Proceedings of the COLING 2012, pages 1331-1340. (领域国际顶级会议, CCF-B)
  • [21] Fan Xu, QiaomingZhu, Peifeng Li. Detecting Text Similarity over Chinese Research Papers Using MapReduce. In Proceedings of the IEEE SNPD 2011, pages 197-202. (EI)
  • [22] Fan Xu, Minghao Li, Shuixiu Wu, Qi Huang, Keyu Yan, Mingwen Wang, Exploring Hierarchical Language Knowledge in Graph Neural Networks for Fake News Detection. ICCEAI 2022, pp. 646-650. (EI国际会议最佳论文)
  • [23] 王明文, 徐雄飞, 徐凡*(通信作者), 李茂西. 基于word2vec的大中华区词对齐库的构建. 中文信息学报, 2015, 29(5):78-85. (CCF计算领域高质量科技期刊-T1)
  • [24] Zhongfeng Chen, Zhenyu Lu, Huan Rong, Fan Xu, Chuanjun Zhao. Multi-Modal Anchor Adaptation Learning for Multi-Modal Summarization. Neurocomputing, 2023, accepted. (JCR-1区/中科院SCI二区Top期刊/CCF推荐期刊,影响因子: 6.000)
  • [25] Huan Rong, Zhongfeng Chen, Zhenyu Lu, Fan Xu, Victor S. Sheng. SHENG. Multization: Multi-Modal Summarization Enhanced by Multi-Contextually Relevant and Irrelevant Attention Alignment. ACM Transactions on Asian and Low-Resource Language Information Processing. 2024.3, Acepted. (JCR-2区/CCF推荐期刊,领域权威SCI期刊,影响因子: 2.000)
  • [26] Maoxi Li, Mingwen Wang, Hanxi Li, Fan Xu. Modeling Monolingual Character Alignment for Automatic Evaluation of Chinese translation. ACM Transactions on Asian and Low-Resource Language Information Processing, 2016, 15(3), 16:1-16:18. (JCR-2区/CCF推荐期刊,领域权威SCI期刊,影响因子: 2.000)
  • [27] 裘白莲,王明文,李茂西, 陈聪, 徐凡. “细粒度英汉机器翻译错误分析语料库”的构建与思考. 中文信息学报, 2022, 36(01): 47-55. (CCF计算领域高质量科技期刊-T1)
  • [28] 颜为之, 王明文, 徐凡, 但扬杰,罗健. 基于语谱图的江西境内赣方言自动分区研究. 中文信息学报, 2021, 35(4):1-7,15. (CCF计算领域高质量科技期刊-T1)
  • [29] 杜舒静, 徐凡, 王明文. 实体驱动的双向 LSTM 篇章连贯性建模. 中文信息学报, 2017, 31(6):67-74. (CCF计算领域高质量科技期刊-T1)
  • [30] 李茂西, 徐凡, 王明文. 机器译文自动评价中基于IHMM 的近义词匹配方法研究. 中文信息学报, 2016, 30(4):117-123. (CCF计算领域高质量科技期刊-T1)
  • [31] 王明文, 付翠琴, 徐凡, 洪欢. 基于词项共现关系图模型的中文观点句识别研究. 中文信息学报, 2015, 29(6):185-192. (CCF计算领域高质量科技期刊-T1)
  • [32] 华秀丽, 徐凡, 王中卿, 李培峰. 细粒度科技论文摘要句子分类方法. 计算机工程, 2012, 38(14): 138-140. (CCF计算领域高质量科技期刊-T2)
  • [33] 陈开阳, 徐凡*(通信作者), 王明文. 基于知识图谱和图像描述的虚假新闻检测研究. 江西师范大学学报(自然科学版), 2021, 45 (4):398-402. (中文核心期刊)
  • [34] 徐雄飞, 徐凡, 王明文, 左家莉, 罗文兵. 中文微博句子倾向性分类中特征抽取研究. 江西师范大学学报(自然科学版), 2015,39(3):290-296. (中文核心期刊)
  • [35] Fan Xu, Mingwen Wang, Maoxi Li. Sentence-level dialects identification in the greater China region. International Journal on Natural Language Computing (IJNLC), 2016, Vol. 5, No.6, pp. 9-20. (CNKI)
  • [36] Fan Xu, Shujing Du, Maoxi Li, Mingwen Wang. An entity-driven recursive neural network model for Chinese discourse coherence modeling. International Journal of Artificial Intelligence and Applications (IJAIA), 2017, Vol. 8, No. 2, pp. 1-9. (CNKI)
  • [37] YuMei Sun, Fan Xu(Corresponding author), MingWen Wang. Varieties of Chinese Discrimination Using Hybrid Squeeze-and-Excitation Network. Proceedings of the 2019 2nd International Conference on Algorithms, Computing and Artificial Intelligence, pp. 473–478. (EI)
  • [38] Yangjie Dan, Fan Xu(Corresponding author), Mingwen Wang. End-to-end Chinese dialect discrimination with self-attention. Computer Science & Information Technology (CS & IT), 2021, pp. 305-316. (EI)
  • [1] 徐凡.《语言变体语料库构建及计算模型》(ISBN978-7-03-059955-1), 2019. 科学出版社.(独著)
  • [2] 徐凡, 黄琪.《社交媒体虚假信息检测基础及模型》(ISBN978-7-03-072713-8), 2022. 科学出版社.
  • [1]徐凡,杨逸峰,鄢克雨,叶继华,周萍,王明文. 一种手语翻译手套控制方法及系统(202310189705.1), 2023.3.2. (公开实审)
  • [2] 鄢克雨,颜玮琦,徐凡,冯浩. 基于图正则非负矩阵分解的脑电情感信号识别方法. 2023106393291,2023.6. (公开实审)
  • [3] 颜玮琦,鄢克雨,冯浩,徐凡.基于核映射协同表示的跨数据库微表情识别方法.2023106399103,2023.6. (公开实审)
  • [4]徐凡, 但扬杰, 张光河, 王明文. 一种低资源客家方言点识别方法(ZL202110317760.5), 2022.06.14. (授权)
  • [5]徐凡, 罗健, 王明文. 一种赣方言语音和方言点识别方法(ZL201810983923.1),2022.02.22. (授权)
  • [6]朱巧明, 徐凡, 周国栋. 一种文本连贯性检测方法和装置(ZL201310160661.6),2016.03.02. (导师第一作者,授权)
  • [7]李辉,马勇,钱辉,徐凡,曾锦山. 一种专利文本多标签分类方法(ZL202111455951.4),2022.2.18. (授权)
  • [8]马勇, 邵诗韵, 李辉, 戴梦轩, 徐凡, 钱辉, 赵从俊. 一种基于深度强化学习的云边协同文档分类系统及方法(CN202110222422.3),2021.06.01. (授权)
  • [1]阿尔兹海默症识别系统V1.0(2023SR0621048), 2023.06.
  • [2]知识驱动的对话系统V1.0(2023SR0621047), 2023.06.
  • [3]客家方言语音识别系统1.0(2022SR0294687), 2022.03.
  • [4]虚假新闻检测系统1.0(2022SR0294685), 2022.03.
  • [5]低资源方言识别系统1.0(2021SR0513894), 2021.04.
  • [6]细粒度赣方言语音和方言点识别系统1.0(2018SR890415), 2018.11.
  • [7]英汉作文篇章衔接性自动标注软件1.0(2017SR480762), 2017.08.
  • [8]大中华区句子自动分类软件V1.0(2016SR250915), 2016.05.
  • [9]大中华区词语对齐字典自动抽取软件V1.0(2015SR157897), 2015.02.
  • [10]宾州篇章树库风格的潜层篇章分析系统1.0(2012SR063666), 2012.05.

团队简介

在校生


年级

姓名

2023级 简伟强(人机对话)、王淇(人机对话)、叶凌宇(知识图谱)
2022级 刘凯(手语识别)、钟金鹏(谣言检测)、刘苏敏(人机对话)、肖键(知识图谱)
2021级 杨逸峰(手语识别)、傅品贇(谣言检测)、曾蕾(谣言检测)、施佳(阿尔兹海默症识别)

毕业生


年级

姓名

2020级 徐健明(人机对话)、郑启航(阿尔兹海默症识别)
2019级 Hafiza Mahrukh Shahzadi(Rumor Detection)、李明昊(谣言检测)、杨剑峰(方言识别)
2018级 但扬杰(方言识别)、陈开阳(谣言检测)
2017级 罗健(方言识别)、孙玉梅(方言识别)、颜为之(博士,协助指导,方言识别)