深度学习
0
1
2
3
4
5
实习生
上海全职 · 400/日 · 8700/月信用正常
工作时间: 工作日09:00-17:00、周末09:00-17:00工作地点:
远程
服务企业:
0家累计提交:
0工时
联系方式:
********
********
********
****************
查看联系方式
个人介绍
我是程序员客栈的lxz，一名AI技术人员； 我就读于上海交通大学，计算机科学与技术专业； 负责过“视觉语言预训练模型在医学图像分析中的应用”，“大语言模型在集成电路设计中的作用”的开发； 熟练使用pytorch，huggingface相关库； 如果我能帮上您的忙，请点击“立即预约”或“发布需求”！
工作经历
2024-07-01 -2024-08-15上海交通大学实习生
对基于医学图像的Med3Diffusion模型进行轻量化，减少训练时的时间与空间需求。 发现u-net结构下的3D diffusion model中，较高层的cross-attention占用GPU的比率更大，因此使用线性注意力Linformer替代原有attention后，GPU显存消耗降低15%，且生成图像的FID值更低。
教育经历
2021-09-01 - 2025-06-30上海交通大学计算机科学与技术本科
资质认证
技能
作品
分别使用上下文学习和微调的方法，对LLaMA-2-7B模型进行训练，使之具备生成verilog代码的能力。 在上下文学习中，模型的效果较差，不管是否添加memory，推理能力都不太理想；在微调了约10000条示例代码后，模型的效果得到显著提升。
02025-01-06 12:30
使用CLIP模型，通过脑部图像的模态、脑部肿瘤的位置等文字描述信息指导微调，并成功训练出了一个二维图像的特征提取器，其可用于脑部图像分类、分割等下游任务。并尝试了将CLIP图像编码器替换为3D-ViT，直接进行3D原图像的微调。
02025-01-06 12:17
