Linux

本节介绍有关机器学习常见任务重的API。请参阅每一节的链接以深入了解。 Working with data PyTorch有两个有关数据工作的原型： torch.utils.dat…

数据并不总是满足机器学习算法所需的格式。我们使用 transform对数据进行一些操作，使得其能适用于训练。 所有的TorchVision数据集都有两个参数，用以接受包含trans…

Tensor是一种特殊的数据结构，非常类似于数组和矩阵。在PyTorch中，我们使用tensor编码模型的输入和输出，以及模型的参数。 Tensor类似于Numpy的ndarray…

大多数机器学习流程都包括数据、创建模型、优化模型参数，以及保存训练模型工作。该教程向你介绍一个在PyTorch上实现的完整的机器学习工作流，并提供了了解这些概念详细信息的链接。 我…

用于处理数据样本的代码可能会变得凌乱且难以维护；理想情况下，我们希望数据集代码和模型训练代码解耦（分离），以获得更好的可读性和模块性。PyTorch提供了两个data primit…

一、简介 Paxos 协议是少数在工程实践中证实的强一致性、高可用的去中心化分布式协议。Google 的很多大型分布式系统都采用了 Paxos 算法来解决分布式一致性问题，如 Ch…

一、概述 guava⽬前有三种刷新本地缓存的机制： expireAfterAccess：当缓存项在指定的时间段内没有被读或写就会被回收。 expireAfterWrite：当缓存项…

原文链接：DMA 与零拷贝技术 注意事项：除了 Direct I/O，与磁盘相关的文件读写操作都有使用到 page cache 技术。 1. 数据的四次拷贝与四次上下文切换 很多应…

大半夜的睡不着，越发的想给 2021 年作个总结，一想更睡不着了，来唠叨下吧。 一拖再拖的婚礼。本来定在今年正月的婚礼，因为疫情，不敢办，村里也不让办；然后选在国庆吧，卧槽，封城了…

简介 经常听到有人说磁盘很慢、网络很卡，这都是站在人类的感知维度去表述的，比如拷贝一个文件到硬盘需要几分钟到几十分钟，够我去吃个饭啦；而从网络下载一部电影，有时候需要几个小时，我都…