下书看 > 太空争霸之我来自未来 > 第251章 开源的工具箱

太空争霸之我来自未来 第251章 开源的工具箱

    “自己的工具箱还没钉好,外面的仓库门先开了?”

    赵国梁一句话,把齐放问得半天没出声。

    屏幕上是谷歌刚刚开源的tensorFlow。代码、文档和示例都摆到了网上,世界各地的学生、研究人员和公司很快便能拿它搭模型。消息发布不到一天,国内技术论坛已经刷出上百篇讨论,有人断言今后的机器学习底座会被谷歌统一。

    星辰内部也分成两派。

    一派主张放弃“星核”,直接跟随开源框架。理由简单:免费的工具就在眼前,全球开发者一起维护,星辰何必继续烧钱造轮子。另一派认为核心训练框架绝不能交给外部生态,甚至建议禁止员工阅读相关代码,免得自研路线被带偏。

    两边从上午吵到中午,一边把开源说成万能钥匙,一边把它说成门外洪水。

    星核负责人杜明远一直没发言。

    他从搜索早期便在星辰写计算系统。星核不是2015年临时起的名字,它的前身服务过网页排序、广告候选、语音搜索和支付风险提示,后来又接入焊缝视觉、机器人识别与星算一号的地面训练链。它已经能在星辰混合显卡集群上分布式训练,也能把受控模型包送往工厂和轨道板。

    可它很难用。

    新员工第一次搭模型要读十几份内网页面,许多接口只有作者自己记得;搜索团队加一个算子,机器人团队常要重写一遍;调试工具像从旧仓库里拼出来,错误信息有时只剩一串编号。星核能干活,却像一只只有老师傅知道每把钳子放在哪里的铁箱。

    杜明远的女儿给那只铁箱画过一个蜡笔标志。他过去半年几乎住在办公室,生日只回家吃了一顿饭。如今外面的开源工具一夜成名,董事会上有人用一句“免费替代”便想把他十多年的积累划掉。

    “马总,如果公司决定换,我服从。”他说,“但别把星核说成一套没做完的演示。它撑过搜索高峰,也把模型送上过卫星。”

    马飞没有宣布采用外部框架。

    “星辰继续用星核,自研。”他说。

    主张开源的人立刻急了:“只因为已经投入很多,就继续投入?这是沉没成本。”

    “不是因为舍不得旧代码。”马飞把四张系统图投出来,“我们需要掌握从训练、数据权限、混合硬件到工厂和轨道部署的完整链。星核已经嵌进这些边界,换底座不只改训练脚本。更重要的是,未来算力供应、工业控制和深空设备不能把核心演进完全押在别人路线图上。”

    “开源代码也能自己改。”

    “能改,不等于我们必须拿它做底座。外部工具越强,越说明星核不能靠内部习惯活着。”

    决定不是关门自夸。马飞给杜明远三个月,把星核从“作者会用的代码”变成“别人能用的产品”。若做不到,不会因为自研两个字无限续命。

    第一场考核没有比训练速度,而是让十名从未接触星核的高校实习生完成同一项公开图像任务。

    最快的人用了一天半,最慢的人第三天还没跑起来。有人被驱动版本卡住,有人找不到数据格式说明,还有一名学生误把测试集放进训练目录,系统没有提醒。

    杜明远原本准备展示星核在混合GpU上的高利用率,看到十张失败记录,演示文稿一页也没打开。

    “外部开源工具最可怕的不是免费。”齐放说,“是一个学生照着文档就能开始。我们的优势若只剩机房里十个老人会修,迟早没人敢碰。”

    星核团队分成四组。

    一组重做统一计算图和自动求导,研究人员只描述目标,不必为每种网络手写全部反向计算;一组负责混合GpU、国产服务器与后续专用芯片适配,硬件差异不再散落进业务代码;一组负责模型血缘、检查点、数据域和审计;最后一组专门做工厂、移动端和轨道计算板的受控部署。

    杜明远亲自带第五件事:文档。

    有人觉得让核心架构师写教程浪费,他说:“只有我能解释的接口,就还不是框架,是我的私人暗号。”

    他把团队过去十年的接口打印出来,足足装了三个纸箱。午休时,几个年轻工程师蹲在走廊里一页页贴便签:看不懂的贴红色,靠猜才能用的贴黄色,能独立跑通的才贴绿色。杜明远原以为自己会舍不得,真翻到一段七年前写的调度代码,连他也想不起变量为什么叫“老三”。

    食堂阿姨推着餐车经过,问这几箱废纸卖不卖。齐放笑得差点把汤洒进箱里。杜明远没笑,掏出笔把“老三”圈住,下午便让人改成真正说明用途的名字。两周后,红色便签从满墙缩到一扇门那么大,星核团队第一次把“别人能否独立使用”列进负责人的绩效,而不是只看模型跑得多快。

    星辰没有把tensorFlow代码引入训练或生产链,也没有偷偷改个名字当自研。团队可以阅读公开论文、理解行业方向、比较公开基准,但所有进入星核的实现都要有独立设计、来源记录、测试和知识产权审查。外部开源事件是竞争压力,不是拿来遮住自家短板的外壳。

    法务提出最严方案,禁止任何相似接口。马飞否决。矩阵、张量、计算图、算子和梯度并非谁家独占的普通概念,刻意把每个名字改得谁也看不懂,只会让人才无法迁移。星核保持清楚的公共概念,同时拥有自己的执行引擎、调度、权限、模型包和边缘编译链。

    为了建立生态,星辰开放星核的开发接口、基础算子规范和一套不含业务数据的教学版。核心生产调度、安全部署和客户代码仍按权限管理;开放工具不等于把支付、火箭与卫星数据挂到网上。

    第一批教学版发布后,论坛骂声比赞美多。

    安装包太大,示例只在星辰常用环境运行,中文文档反而比英文接口落后一版。一名西北高校学生提交问题,说他实验室只有两张旧显卡,星核默认把任务当成机房集群,刚启动便申请不存在的高速互联。

    杜明远没有回复“建议升级硬件”。他让团队增加单机与小规模模式,旧显卡能跑慢一点,不能直接被挡在门外。那名学生两周后提交一段内存优化,使小模型占用下降,也被收入星核贡献记录。

    投资人问为什么自研框架还允许外部贡献:“万一核心被人看走?”

    “接口越多人用,问题越早暴露。”杜明远说,“真正不能公开的部署与客户能力守好,基础工具不靠没人看懂来保密。”

    星核二点零第一次内部演示,选择了三个完全不同的任务。

    搜索组训练语音查询模型,焊缝组训练多角度缺陷候选,机器人组训练散料抓取视觉。三组使用同一套任务描述、数据授权和模型血缘,不再各自维护一套孤岛脚本;混合GpU由调度器按能力分配,训练中断后能从检查点恢复。

    结果没有一夜翻十倍。

    搜索任务速度提高不到两成,焊缝训练缩短约四分之一,机器人模型在两种显卡上的输出差异反而暴露出一处数值处理问题。团队暂停发布,修正后重新验证。杜明远拒绝让市场用最快一项写“性能提升数倍”。

    星核真正赢下内部信任的是轨道部署。

    同一个影像筛选模型从GpU训练环境导出后,先进入星算一号地面同构板。边缘编译器按板卡算力、内存和功耗裁剪执行计划,模型参数、预处理、运行库、数据权限和回滚基线一起装进签名包。地面模拟翻转一位内存时,运行时能隔离故障并退回旧版本。

    外部通用工具能教人更快搭网络,却不会替星辰处理这条从数据门到宇宙粒子的长链。星核的价值终于不再是“我们也有框架”,而是让同一套模型在机房、工厂和轨道上各守自己的边界。

    三个月考核结束,十名新实习生重新做公开图像任务。最快两小时跑通,最慢一天内完成;数据混用会被系统提示,环境与硬件问题能在页面找到原因。仍不如成熟开源社区丰富,却已不需要杜明远站在每个人身后念私人暗号。

    女儿放学来公司,看见墙上的蜡笔小箱子被做成星核图标,问:“你的箱子修好了吗?”

    “能让别人打开了。”

    “那你今晚回家吃饭吗?”

    杜明远看一眼发布排期,第一次在六点前合上电脑。

    外部开源浪潮没有因此消失。谷歌、百度、微软、阿里和大量创业团队会用不同框架加速,大学生能更快进入机器学习。星辰选择自研,意味着每一种新算法、硬件和工具都要自己追,付出的工资、电费和错误一样不会开源免单。

    齐放把这句话写进星核路线首页:自主不是免费,自研也不是免检。

    二点零开始迁移机器人视觉时,平台带来另一个诱惑。

    汽车厂已有十套柔性工位。过去每台设备单独更新,慢,也容易版本不一致。星核现在可以从训练到部署生成同一份模型包,按批次自动分发。项目经理决定先迁移共同的坐标预处理,让十台设备以后不再维护十份代码。

    赵国梁要求一台影子、两台小批、最后扩到十台。发布经理认为只是把旧逻辑搬进星核运行时,申请缩短观察时间。

    迁移代码只有一行写错。

    相机画面本该用原始宽度归一化横坐标。星核运行时会先裁掉两侧无效区,开发者把除数误换成裁剪后宽度。测试图片恰好没有裁边,两者相等;真实工位的有效区更窄,横坐标便被整体放大。

    单元测试全部通过。

    标准工位测试也通过。

    下午三点,十台设备依次收到星核二点零发布包。

    第一台机械臂抬起,抓取位置向右偏了几毫米。

    第二台也向右。

    十台机械臂像听见同一道错误口令,几乎同时把手伸向不存在的位置。