注意：禁止用于商业用途，欢迎个人学习交流！
- 个人的开源医学计划，旨在构建一个功能强大的本地AI工具箱，使得大家能够像使用搜索引擎搜索东西那样搜索自己的本地知识库，提高工作学习效率。
- 爬取多个医学网站/题库/包括对众多最新版本的医学教材词典做ocr转化并且清洗，为中文界的医学GPT训练积累可靠数据。
- 目前上线的医学教材搜索引擎支持多关键词文段搜索，搜索出符合含有相关关键词的文段
- 构建中文（多语言）NLP针对临床医学、口腔医学领域的知识库语料库，训练具有先验医学专业知识的本地多模态向量搜索引擎；
- 构建扫描版pdf电子教材自动转换器，实现全书语义检索，解决扫描版pdf电子教材检索、编辑困难的问题；
- 实现医学pdf电子教材思维导图生成器；做具有网页信息再筛选功能的浏览器插件，将具有先验知识的向量搜索引擎部署到本地浏览器！
- 该项目也会整合一些其他的医学AI项目完善各种实际需求！欢迎共同建设！
- 项目同时备份在Notion，国内访问速度慢图片无法打开等问题可以尝试切换一下
针对医学问答任务训练Bert-index模型作为embedding，代替openai text-embedding-ada-002的付费方案
Bert-index模型辅助构建GPT3.5/4的prompting并本地化部署私有信息库的ChatGPT对话模型
使用自回归原理的GPT，对大量医学教材问答作训练
使用大量医学文本对做对比学习，文本编码器通过计算对比句子与句子之间（QA问答等）、句子与文本之间做余弦相似度（Cosine Similarity）来获得学习效果
教材搜索引擎通过相关查找算法搜寻包含相关关键词的文段；使用Bert的“阅读理解”模型对召回的文段再做过滤筛选
注意:由于个人算力等资源有限且不少电子书内含水印等；txt版本电子书难免会有不少错漏，后续会继续优化，敬请理解
2023/03/10 实现Bert+GPT3.5/4的低token成本方案的基础上，利用包含数十万个医学文本样本的数据集，针对式训练一个中文医学Bert用于辅助ChatGPT的prompting工程
2023/03/02 实现Bert+GPT3.5/4的低token成本方案，实现Chatbook、chatxmind、chatweb生成式对话搜索教材、思维导图等
2023/03/01 完成CLIP+GPT2的多模态问答模型的构建，为后续全自动诊疗、影像学报告自动生成作准备！
2023/02/19 爬取了医学百科3200+种常见病的介绍、诊疗等内容并做成问答题的形式。（目前已整合超过数亿字高质量医学数据集）
2023/02/15 清洗了中华口腔医学词典，以及临床医学|口腔医学|检验医学|基础医学的执业/主治等单选题目30000+
2023/02/03 爬取了医学百科近65000个网页并整合CMEDQ-A数据集近100000个医学问答。
2023/01/07 上线医学教材搜索引擎！
2022/09/20 新书持续更新inggg！
2022/09/18 完成人卫诊断学、病理等多本口腔、临床教材的OCR转化工作，具体请见releases
2022/09/11 爬取医学百科wiki等数万个词条并将其用于text encoder的训练
2022/08/25 测试用于浏览器信息过滤筛选的本地代理插件
2022/07/31 建立相关倒排索引等检索框架
1.对于教材搜索引擎，后续会不断增多教材可搜索类目并且引入Bert对搜索结果进行过滤；且允许用户上传自己的pdf电子书进行转化搜索！
2.后续进展会不定时更新，欢迎大家贡献各种 .docx / .txt 版本的医学电子教材
3.项目同时备份，更多相关项目欢迎留意个人Notion主站、bilibili 等社交平台
4.欢迎捐赠给予小编更多支持与鼓励（未完待续）！