近年来,核技术的快速发展为医学治疗带来了许多全新的方法,这些融合了核科学基本原理和生物医学技术的新方法和新装置,在治疗癌症等方面取得了举世瞩目的成果和良好的社会效应。随着社会老龄化的加剧,作为一个现代人应该对这些最先进的核医学治疗癌症方法有一个基本的认知,而作为一个大学生则需要对这些方法的基本原理和知识有所储备,作为核科技专业的学生这些内容更是必须要了解和掌握的专业知识的一部分。特别是质子重离子大型治疗装置,即采用具有精确定位释放能量的质子或者重离子束,通过加速器加速并聚焦照射到肿瘤细胞上使其凋亡,凭借其优秀的高精度局部清除癌细胞和极大限度保护正常细胞的优点,以其极佳的临床治疗表现,正成为相关领域的一颗耀眼的新星,应该被公众所了解,并让更多的核专业学生加入到这个领域中来。
为此在核专业的多个课程中,都有关于该方法的教学内容。但是在实际教学中,缺陷还是明显存在的。首先是公共课的讲述中,由于质子重离子大型治疗装置涉及的专业知识非常多,而大部分的内容对没有较多理工科知识积累的同学很难展开解释,仅仅通过ppt 的描述很难让一般的大学生有一个直观、清晰和全面的认识,理解效率很低。而对于专业学生,由于该装置的稀缺性,复杂性,以及真人实验的不可逆性和危险性,只有极少数幸运儿可以有机会参加这些装置的实习,亲手参与实验或者治疗,这对于专业内容的深入学习和实践是极为不利的。所以针对质子重离子大型治疗装置这样的教学内容,通过虚拟仿真的形式来大大降低上机实验教学的门槛,让专业学生,甚至普通学生都能够参与到实验中,并通过超越真实的观测方式,看到实验过程中的物理和生物反应的微观细节,将是对该领域教学的一种革命性的推进,也是对公众科普的一个利器。因此非常有必要展开该内容虚拟仿真教学的开发。
另一方面,在虚拟仿真技术方面,随着近年来硬件技术的快速发展,商用水平的混合现实(MR)技术逐渐成熟。MR技术需要将现实世界和虚拟世界中的事物在同一个空间中呈现,并且实现互动和反馈,其内容的开发难度远高于VR或AR,但是也带来了VR或AR手段不具备的优势,尤其是对医学相关的教学内容,学生可以直接在真实“病人”和真实的具有物理存在的虚拟“设备”上,进行治疗和并实时观察治疗效果。比如,可以看到真人模特体内的脏器和假设的肿瘤,以及操作质子、重离子管线实现聚焦束对肿瘤进行扫描杀灭和观察效果,也可以亲自去操作各种辅助实验设备如定位束缚装置的制作等。另外配合本团队研发的元宇宙虚拟社会技术,可以实现多人的MR实验,这将为该领域的教学带来全新的面貌。所以本项目将聚焦基于混合现实技术的质子重离子治疗大型装置的虚拟仿真实验,在元宇宙技术平台上研发一套可以让专业和非专业学生都参与其中的虚拟仿真程序。本项目研制的程序不仅可以在质子重离子治疗方法的专业学习和公众科
普领域进行直接的应用,还可以将所研制的技术引申到更多的先进核技术的医学应用的虚拟仿真教学上,具有广泛的实用性。
本项目将在如下8个方面进行设计和开发。
1. 装置核心器件的高精度3D建模以及全流程的体系化的各类装置的完整建模。人员的分器官建模和辅助装置的建模。肿瘤的精细建模和自动生成。
2. 质子重离子的产生和束流光学的粒子模型建模, 以及核心粒子光路控制器件对束流的影响的实时蒙特卡洛运算和视觉呈现。
3. 束流的生物学效应的蒙卡算法以及视觉呈现。
4. 教学相关的精细剂量分析和规划的交互方式开发,以及数据输入输出。5. MR呈现和动捕匹配的方案研制,以及与教学内容的有机融合设计。
6. 治疗全流程的高自由度剧情设计和过场动画。
7. 针对复旦360环幕的适配性开发。
8. 云计算方案的应用和适配。
相适应的教学功能设计按流程描述如下:
1. 老师在虚拟空间中“现场”讲解质子重离子治疗装置和方法。
2. 每个学生将被分配到一个诊疗室,系统自动生成一名病人和符合一定规范的肿瘤组织。肿瘤将根据一定的规则进行系统生成,具有一定的随机性。
3. 学生带领病人进行PET/CT等的诊断,获得肿瘤的详细数据。
4.a 对于专业学生, 根据获得的肿瘤数据,进行治疗规划和精细剂量的计算。得出可以被用于治疗的完整的时间和空间的剂量规划数据表。(该功能分两个阶段实现。初级阶段:学生将数据导出后,在线下完成数据表,并上传入系统。高级阶段:程序需内建数据分析界面,直接在线上完成数据分析和数据表的建立。)
5.a 对于专业学生,调整束流的约束和基础参数的设定,并用测试器进行校验(如果效果不达标亦可强行开展治疗,但会带来严重后果)。然后学生带病人进入诊室,进行定位装置的安装调试操作。最后打开束流开始第一次的照射治疗。完成后,将病人送走。完成设备操作的收尾工作。之后系统以动画形式,略过规划中的后续治疗轮次。
4.b 对于非专业学生,系统提供若干种治疗策略可供选择,学生选择后,系统自动生成剂量规划数据表。
5.b 对于非专业学生, 系统将提供若干种束流调节策略可供选择,学生选择后,系统自动实施调节并给出测试器结果。然后系统将动画演示病人定位装置的调试操作,以及根据4.2生成的数据表的治疗流程,并完成所有治疗轮次。
6 根据4,5 中的操作,通过专业的生物物理效应算法,得出组织,器官和人体对本次治疗的效果并进行视觉化。流程上设立了治疗效果评估环节,将在病床边展示病人的不同治疗效果。(包括极端效果,即错误的操作下导致的包括正常细胞大面积凋亡,器官衰竭,人体死亡等根据算法得到的模拟效应。)
7 流程上设立了回访机制,根据4,5 的实际操作,通过专业的生物物理效应算法,得出不同周期的生存率和器官功能健康指数,并通过人体视觉效果展示。相关的剧情设计也将以动画形式呈现。
8 最后系统将关键信息以报告形式生成,学生可以总览他的学习和实验的要点结果和最终效果,从而总结提高。
其中MR的应用将高度融入3,4,5,6,7环节的展现和互动中。
后期针对复旦360环幕的特点,相关环节都将进行适配性开发,使之可以在环幕上运行和开展实验。
综上,整个教学过程将全流程呈现和使学生深入参与到质子重离子治疗的多个核心环节,让学生完整,生动,深入的了解所有的关键知识和技术,并将学到的知识付诸实践,同时可以实时的观察治疗的短期效果和长期效果,从而得到接近真实的学习效果的反馈。整个教学设计具有专业领域的合理性,以及符合人从学习到实践到反馈再到更深层次学习的基本认知规律。
本项目的实验系统在技术上具有一定的先进性
1. 依托多年的科研积累,针对质子重离子治疗方法的教学实验, 本项目将首次对各个主要过程进行基于最新科研成果的蒙卡模拟计算,并将整个流程串联成一个完整的虚拟仿真综合事件。即专业算法新,全流程模拟。
2. 在可见的范围内,混合现实(MR)技术将首次被深度应用到虚拟仿真教学项目中。通过MR技术将首次实现在真人上的质子重离子虚拟实验,即可以对真人模特体内组织(包括正常组织和模拟的癌组织)进行虚拟仿真照射,并实时观察学生的操作带来的生物学反馈。在项目的初级阶段将完成人体方案的开发,在项目高级阶段我们将不断完善算法,将MR技术应用到仪器设备上,可以利用现有的仪器设备,也可以DIY的各类实体化虚拟仪器,让参与者在使用中体会到超越VR和AR的高度真实的实体反馈,大大增强教学的真实感和临场感。本次MR功能将依托VR眼镜的SeeThrough模式开发,一种极具潜力的MR新途径。
3. 元宇宙技术的引入,让多人虚拟仿真教学成为可能。特别适合类似本项目质子重离子治疗这样需要老师现场指导,多学生配合操作的大型实验。空间上的局限被打破,来自不同地域的学生可以共同看到和操作同一套实验装置,对同一个病例进行治疗实验。
4. 将首次将该类大场景装置的教学, 移植到360环幕的设备上,将充分发挥环形剧目的优点,并结合MR技术发展新的教学方法。
5.由于一体机算力限制,根据以往经验必须牺牲细节度来提高流畅度。而本项目将尝试引入的云算法方案将打破这样的局限,使得我们对于大型装置的核心细节,以及人体相关组织的细节可以做到精细的刻划,教学效果将大大提升。
本项目的实验依托技术先进性,在教学方法上也不断开拓新的可能。
由于MR技术的引入,允许我们将真实的人和仪器,或者部分根据真实物体制作的实体教具应用到虚拟仿真程序中,这打破了原有VR或者AR无法构建具有实体感力学反馈的限制,基于这样的创新,我们将尝试更具真实感的实验和教学方式。在之前的虚拟仿真实验中,我们无法模拟与真人的交互,特别是一些操作性较强的环节,比如根据人体制作定位装置和辅助固定等流程。而依托MR技术,我们将可以对这类项目进行高仿真的实践教学。
进一步实践元宇宙的教学功能,也将给我们带来全新的教学方法。比如,师生共同进入到人体中,对局部组织的变化进行观察。师生共同进入到大型装置中,对粒子束流和电磁透镜的结构进行现场讲解和操作反馈观察。让来自不同地域的学生在一起合作实验,共同现场讨论。期待这些新的教法可以碰撞出新的火花。
实验教学目标(实验后应该达到的知识、能力水平)
通过实验,完整了解质子重离子治疗的基本原理和技术要点,并对整个治疗的流程、操作以及剂量规划方法有一个深入的学习,并通过实践掌握相关的技术。
(1)实验原理(限1000字以内)
质子重离子治疗方法的实验基本原理如下:
1. 被加速的质子或者重离子(后简称质子),经过整形和聚焦,射入生物体中。这部分涉及的内容主要包括束流光学的原理和操作方法。
2. 具有一定能量的质子,以聚焦的笔型束射入生物体,根据带电粒子在物质中减速的布拉格峰原理,将在一定的射程上释放几乎所有的动能给所处位置的生物组织,从而对生物组织(如肿瘤细胞)产生多种生物效应。
3. 质子束释放给生物组织的能量, 将会产生不同层次的效应,本项目将重点关注如下效应的算法,包括:
a. 射线导致细胞死亡机制的LQ模型。
b.细胞修复和增值机制的经验模型,如NHEJ修复模型等。
c. 重点脏器的核心功能与射线剂量的宏观规律,以及微观至宏观的过渡算法。
d.临床医学范畴的人体不同位置的辐照宏观反应,以及与微观的衔接算法。
依托上述原理,通过在不同层次上进行蒙特卡洛的数值模拟,并进行有机的衔接,最终实现在特定的照射策略下,质子束对生物体在微观、介观和宏观的反应的结果。
从学生的角度,在理解和掌握上述原理的基础之后,还需要掌握根据基本原理和经验结合后的辐照剂量的策略制定方法,其中包括:
a 分次辐照的意义和实际操作规范。
b 布拉格峰卷积算法和应用。
c 射程计算方法和考虑不同组织的干扰效应。
d临界组织的剂量调节策略。
e 基本的局部解剖知识。
依托这些知识,可以进行精细剂量的计算和安排,从而完成针对专业学生的实验。
核心知识点:共8个
1.细胞死亡LQ模型
2.细胞修复NHEJ模型
3.各脏器累积剂量阈值
4.宏观人体急性和慢性辐射反应
5.分次辐照策略
6.布拉格峰卷积剂量分布
7.质子射程计算和干扰修正
8.重离子的上述知识点。
(2)核心要素仿真设计(对系统或对象的仿真模型体现的客观结构、功能及其运动规律的实验场景进行如实描述,限500字以内)
具体的实验场景如3-1 中的流程介绍说述。而核心要素的仿真包括如下两个方面:
自然规律等要素的仿真:
1. 场地和设备的模拟。即建立质子重离子治疗涉及的加速器,引导管线,聚焦导向机构,诊断装置,治疗室,其他治疗用具,医生护士以及病人模型的全套建模,并设计相关交互反馈。
2. 质子重离子束流的仿真模拟, 使其可见化,并可以通过电磁光路进行实时调节,改变入射束流的形状和聚焦。
3. 针对不同形状和聚焦效果的入射束流,模拟其在生物组织内路径上的积分阻止效应,得到射程的布拉格峰,以及路径上细胞的微分剂量。
4. 模拟不同剂量下,细胞的反应,脏器的反应,以及人体的综合反应。交互和反馈的仿真:
1. 学生操作加速器和管线及聚焦导向设备,对束流的影响的仿真2. 学生带领病人进行诊断,以及制作固定定位装置的仿真。
3. 学生输入和调整照射策略的互动,以及影响结果的仿真。4. 病人躯体和相关组织,对于不同的治疗结果的反馈。
在实验中,学生通过几种方法接入到虚拟世界:VR眼镜,电脑网页端,手机端。(在课堂上我们将优先采用VR眼镜方式。而本次使用MR技术也将依托VR眼镜的SeeThrough模式开发)进入虚拟世界后,学生在大厅选择质子重离子项目进入包含物理和医学各个功能的综合建筑内。
以下为教师讲解和演示实验阶段:
1a. 教师进入到同一虚拟空间中,引导学生到相关装置房间对质子重离子知识进行现场讲解和剖面展示。并通过小问答测试学生的理解程度。
2a.然后教师开始做演示实验。请出真人模特,通过MR技术展示其体内的正常组织和虚拟的癌症组织。然后带领大家进入诊断室,让模特平躺后,进行扫描,获得肿瘤的3D数据和参数。
3a. 教师讲解该类肿瘤需要遵循的分次辐照的意义和实际操作规范,以及布拉格峰卷积算法,并通过估算在数字白板上讲解射程计算方法和考虑不同组织的干扰效应。最后讲授临界条件取舍以及其他注意事项。然后计算机生成剂量规划数据表。
4a. 之后大家转移到治疗室,教师演示如何配合在线诊断设备,制作固定定位装置。并完成在真人上的制作。
5a. 开始并完成第一轮的照射治疗,之前教师将演示束流调节和优化的过程。以下进入学生实验阶段(将以专业学生为例):
1b. 学生两人一组分配到一套医疗单元,以及一名虚拟模特。
2b. 根据老师的指导对虚拟模特执行2a的实验内容,获得肿瘤数据。
3b. 本项目初级阶段:学生将数据导出到网络端,使用教师讲解的方法,离线计算剂量规划数据表,并上传至系统内,重新回到虚拟空间。本项目高级阶段:直接在虚拟数据处理机上进行数据分析和处理,得到剂量规划数据表。
4b. 进入治疗室, 针对虚拟模特制作固定定位装置。
5b. 进行束流调节和优化,并完成一轮照射治疗。之后系统会根据规划通过动画形式完成所有的治疗。
6b.回访环节,学生可以观察病人的恢复情况,并且看到治疗处的恢复或者复发情况。并将有动画展示后续的发展结果。包括正确的操作以及错误操作所带来的正面或者负面的各种生物和医学的模拟效应。
7b.学生结束实验,系统生成总结报告。教师也可以对实验进行现场指导。
在学生实验中,可以保存和读取实验进度,并且导入和导出关键数据。实验实际是在一个高自由度的状态下进行,各种操作都是开放的。所以学生亦可以通过尝试,看到不动的设计的不同后果。也可以实时对肿瘤和周边组织进行透视观察,或者对束流状态进行透视观察。在本项目开发的高级阶段,我们还将不断加入新的实体道具进行MR的交互,不断丰富实验操作的内容和精细度以及真实度。
(1)学生交互性操作关键步骤,共10步(以开发初级阶段为例) |
|||||||
步骤 序号 |
步骤目标要求 |
步骤合理用时 |
目标达成度赋分模型 |
步骤 满分 |
成绩类型 |
||
1 |
获得肿瘤3D数据 |
5m |
区域覆盖合理度,诊断方法选择正确度等 |
5 |
■操作成绩 实验报告 预习成绩 教师评价报告 |
||
2 |
导出数据 |
5m |
是否选择合理数据导出 |
5 |
|||
3 |
计算剂量规划数据表 |
15m |
导入数据后,系统对比自动生成的最优数据进行评分。 |
20 |
|||
4 |
制作固定定位装置 |
10m |
根据固定定位装置制作的细致步骤的完整性和正确性系统自动打分 |
10 |
|||
5 |
开机,调束和优化 |
5m |
根据最后束流的品质,如聚焦度和层流 度,自动打分 |
15 |
■操作成绩 实验报告 预习成绩 教师评价报告 |
||
6 |
引导病人,安装固定定位装置 |
5m |
根据步骤的正确性给分 |
5 |
|||
7 |
开始第一轮照射 |
10m |
病人是否定位准确,操作是 |
5 |
否满足安全规范 |
|||||||
8 |
关机流程和送走病人 |
3m |
根据流程正确性自动打分 |
5 |
|||
9 |
回访调查 |
5m |
系统自动完成学生输入的全套治疗策略后根据治疗效果给分。 |
15 |
|||
10 |
生成报告 |
1m |
教师根据报告以及表现打分 |
15 |
■教师评价报告 |
(2)交互性步骤详细说明
1. 通过选择合理的诊断方式,进入诊断环节。通过引导病人完成数据的采集。2. 摘选正确的数据打包导出。
3. 根据导出数据,进行全流程的计算和设计,得到剂量规划数据表,并上传回系统中。
4. 根据正确的步骤,对虚拟模特的治疗部位进行固定定位装置的制作。
5. 撤开病人, 对大装置开机,并进行束流的调节和优化。
6. 请回病人, 引导其进入治疗位置,并安装固定定位装置。
7. 按安全规范,清空现场。打开束流,按流程进行照射。
8. 完成全套照射, 确认现场安全后,请护士将病人带走。完成关机流程。
9. 在回访环节中,观察治疗效果和病人反馈。
10. 在系统中生成报告,并下载,完成整个实验。
整个实验的运行是建立在基于前沿科学研究成果的规律的仿真上,因此具有比较高的自由度和仿真度。
对于学生在实验中的不同的操作,都会根据蒙卡运算给出对应的仿真结果。
比如没有调好的束流聚焦,将是的束流的能量被分散,剂量将不在准确,同时周边的组织也将得到额外的照射,从而产生额外的伤害。这些伤害积累到一定的程度,就会通过计算模型反应到更宏观的层面,甚至影响人的生命的延续。所以可以在技术允许的范围内尽可能的给出细致的反馈。
比如如果细致剂量计算和分次照射策略的设计出现不合理,系统也将在这个前提下进行仿真,并产生由于这个不合理而带来的负面效果,如肿瘤未被治愈,或者人体受到过量的辐射导致新的癌症或者直接死亡等。
比如如果固定定位装置的制作流程不对,定位就会不准确,治疗就可能发生巨大偏差,就会产生很严重的后果,如细胞大面积死亡,器官衰竭,人体死亡等。
所以,学生只有充分理解和学习了质子重离子治疗方法的原理和技巧,才能得出合理的治疗方法和策略,才能有一个积极治疗效果。只有亲自联系治疗的核心操作,才能获得理想的治疗结果。偶然性和必然性在蒙卡计算的模拟仿真中得到了充分的体现。
单场景总面数大于30万
贴图分辨率最高4K*4K
帧数不低于30Hz
眼球动作反馈时间低于5ms
分辨率最低1280*720
开发技术 |
■VRAR■MR3D仿真二维动画HTML5 其他 |
开发工具 |
■Unity3D3DStudioMaxMayaZBrushSketchUpAdobe Flash UnrealDevelopmentKitAnimateCCBlenderVisualStudio 其他 |
运行环境 |
服务器 CPU 8核、内存16GB、磁盘50GB、 显存4GB、GPU型号PICO一体机 操作系统 WindowsServerLinux■其他 具体版本: 数据库 ■MysqlSQLServerOracle 其他 备注说明(需要其他硬件设备或服务器数量多于1台时请说明) 是否支持云渲染:●是○否 复旦360环幕适配 |