第一百九十二章 要不,你请示一下? (第2/3页)
“我这个人比较直,我就直说了,”张弛继续说道,“这个位置鼎盛内部不是没人能做,我们是觉得你的经验更合适才走的外招,但项目的时间可不等人。”
江松然静静听着,手紧紧攥着手机。
张弛似乎意识到刚才的话硬了些,放缓语气:“这样吧,待遇你可以参考一下,年包大概在四百到五百个之间,具体的HR会跟你谈。你好好考虑一下,尽快给我个回复。”
江松然没说话,把电话挂了。
挂断电话,他才发觉自己刚才憋得有点儿喘。
在原地喘匀了气,他才往外走。
韩路一站在楼外,见他出来,迎上前,神情亲切自然。
“您好,聊完了?”
“聊完了。”刚被打断的拒绝,加上那个脑残电话,反倒让江松然想听听韩路一要说什么。
他看了看四周,住院部外有个小花园,摆着几张长椅。
冬天室外没什么人,江松然指着一张长椅:“去那儿说。”
两人在长椅上坐下,韩路一从双肩包拿出电脑。
他打开电脑,对江松然说:“我的来意您应该已经知道了,想邀请您加盟源智科技。在您答复之前,我想先给您看点儿东西。”
说完,韩路一打开一个代码仓库页面,看样子是自托管的。
江松然觉得这页面有点儿眼熟。
等韩路一打开其中一个名为SDPA(scaled dot product attention)的文件夹,江松然意识到,这不就是他刚看的那篇论文吗?
Wenyuan Zhao,Source Intelligence AI。
怪不得觉得耳熟,原来就是源智科技。
江松然不由得生出好感:这是个干实事的团队。
可他又觉得更不相关:自己的领域明明是大规模集群管理,偏工程向;源智科技若做硬件适配,找自己干什么?
“这位Wenyuan Zhao是?”江松然问道。
“他是我们的首席科学家。”韩路一出声,“您可以看看我们的成果。”
江松然把目光移回屏幕,这才注意到仓库里还有别的文件夹。
SDPA、LayerNorm、RMSNorm、Softmax、GELU、SiLU、Rotary Embedding、FlashAttention、AdamW、All-Reduce。
一共十个文件夹,各对应一个算子的完整实现。
江松然的手指不自觉点向触控板,又停住——这不是他的电脑。
“您可以自己看。”韩路一重复了一遍刚才的话。
江松然这才开始翻看。
他先点开SDPA文件夹,和论文里的实现对照,确认是同一套代码。
随后翻看别的算子实现。
看了两个之后,他皱起眉头。
“这些跑过benchmark吗?”
韩路一说:“是的,每一个算子都有对应的性能测试,和N卡cuDNN的基准线对比,最低的80%,最高的91%,README里都有完整数据。”
江松然没想到能从HR嘴里听到这么专业的回答,心里对这个年轻人更认可了几分。就算是死记硬背,也说明至少在公司产品上花过足够精力。
他打开README查看,确实都有对应数据,可信度又高了些。
“多卡通信验证了吗?”
“现在只跑过4卡和8卡,All-Reduce也是我们自己写的新实现。”
这么小的范围,上大规模还有挑战啊,江松然心想。
他又看提交记录:最早的在上个月,最新的在今天早晨。
这十个算子是一个月写出来的?
不,还不到一个月。
江松然震惊地抬头看向韩路一,随即又否定了自己。
不,不可能,或许是把别处的成果迁移过来,时间戳不准。
他在硅谷那家公司做过类似的事:五人的小组,一个算子平均要打磨两到三周,那还只是微调,不是重
(本章未完,请点击下一页继续阅读)