数据工程
2 published articles
开源4 min read
流处理 · FLIP-21
Apache Flink 想停止在每个算子处复制数据,而这只是最容易的部分
FLIP-21 将让 Apache Flink 不再在每个链式算子之间复制数据,以三种可选模式取代长期存在的安全默认设置。DEFAULT、COPY_PER_OPERATOR 和 FULL_REUSE 在速度与谨慎之间各取平衡。迁移问题仍未解决。
2026-09-14
硬件与电子Featured4 min read
数据工程
JPEG质量92:让Photoroom 7B模型运作的无聊数据工程选择
Photoroom发布PRX模型开发系列第四部分,详细描述了一条优先考虑广度和一致性而非单张图像完美度的数据管道。文章揭示,对于训练而言,JPEG压缩至质量92与PNG几乎不可区分,而在扩展到数亿张图像时,最快的描述器胜过了最准确的描述器。
2026-07-06