我们的软件工程面试正在发生一点变化

一家高调交易公司的博客文章讨论如何为 LLM 时代调整软件工程面试,引发了关于现代技术招聘究竟应衡量什么的争论。评论者争论是否应在编程轮次中允许甚至要求使用 AI,如何测试真实理解与提示词驱动之间的差别,以及传统的 leetcode 式问题或 git“基础”是否仍然有意义。另一些人指出该公司最近频繁出现在 Hacker News 上,并质疑这究竟反映了自然增长的兴趣、带有招聘导向的刻意营销,还是仅仅是帖子统计上的聚集现象。

HN 上对 Jane Street 存在感的看法

  • 许多人注意到 Jane Street 帖子异常激增,包括同一周内出现多篇首页故事。
  • 有些人怀疑这是刻意营销或 astroturfing,尤其是为了吸引工程人才。
  • 另一些人则认为这只是正常的“光环效应”和 Baader–Meinhof:可见度越高,获得的赞同就越多;数据显示,过去几年里提及次数一直稳步上升。
  • Jane Street 的高薪、“精英”声誉、OCaml 使用,以及技术演讲,都被视为对 HN 读者的强吸引力。

对面试变更帖子的反应

  • 几位读者觉得这篇博客帖子说得很笼统,缺乏具体细节;有人认为这是一种含蓄的招聘内容。
  • 也有人认为,考虑到工作流程正在变化,在面试中对 LLM 使用保持灵活性是合理的,而且面试形式必须随之调整。

LLM 时代该如何面试

  • 许多人认为,传统的现场编码 / leetcode 现在更没意义了,因为 LLM 很容易解决这些问题。
  • 提出的替代方案包括:
    • 允许候选人使用 LLM,但要求对生成的代码做深入解释。
    • 侧重架构/系统设计、调试、代码审查,以及引导或纠正 LLM 的能力。
    • 故意使用一个较弱或容易出错的 LLM,测试候选人是否能发现并修复问题。
  • 有些人预见,未来的面试会测试“AI 编排”技能:设定目标、护栏、验证,以及围绕 agent 的工作流。

关于工具的争论:Git、PR 和对 LLM 的依赖

  • 围绕要求候选人打开一个 PR 作为“git 基础”测试的长篇子讨论。
  • 反对意见是,PR 关乎托管平台,而不是 git 本身;许多合格的开发者很少使用 PR 或特定的代码托管平台。
  • 更广泛的分歧在于:一方坚持工程师应当了解核心 git 操作,另一方则认为在不常做的任务中,借助 LLM/IDE 辅助也完全可以。

对面试和招聘的更广泛批评

  • 多条评论质疑这些面试仪式是否有证据支持,或能否预测工作表现。
  • 有些人主张更简单的对话式面试,或者短期试用期,而不是复杂的多轮流程。