IOTag Archive

1.Inflight机制存在的原因 在QEMU/KVM/SPDK/DPDK这种架构下，vhost相关进程会因为各种异常概率crash的，在DPDK这种网络架构下，最多是产生丢包效应，一旦vhost进程拉起重连后，DPDK网络架构仍可以正常工作，而对于SPDK则不可行，因为存储系统中丢失的任一块请求在文件系统中都可能表意元数据，导致文件系统异常，对于用...

 之前耗了一段时间做SPDK下的vhost-user-nvme的开发，就是让VM内使用NVME存储。涉及到vhost-user-nvme设备的QEMU live迁移或者热升级的开发，碰到一个有意思的问题，值得写一下。 QEMU版本：https://github.com/spdk/qemu.git 最好用https://review.gerrithub.io/#/c/spdk/qemu/+/406011/ SPDK版本：htt...

一. epoll用户态使用规范 epoll有2种工作方式：LT和ET。 LT（level triggered，水平触发）是缺省的工作方式，并且同时支持block和no-block socket.在这种做法中，内核告诉你一个文件描述符是否就绪了，然后你可以对这个就绪的fd进行IO操作。如果你不作任何操作，内核还是会继续通知你的，所以，这种模式编程出错误可...

代码版本linux-3.16.37-git, qemu-v2.8-git 因为eventfd要与epoll配合使用，不清楚epoll的请参考epoll的linux内核工作机制。 一. Eventfd在QEMU下的使用 Eventfd在QEMU下的使用以这三个函数为基础：event_notifier_init和event_notifier_get_fd，以及event_notifier_set_handler。 在event_notifier_init中，初始化E...

源代码：linux-3.16.37-git， qemu-v2.7 1.vm启动时qemu的代码 virtio block的qemu cmd： x86_64-softmmu/qemu-system-x86_64 -enable-kvm -cpu host -m 256 -smp 1 -drive file=~/vm/centos6-virtio.qcow2,if=none,id=drive-virtio-disk,format=qcow2 -device virtio-blk-pci,bus=pci.0,drive=drive-virtio-disk,id=...

源代码:git tag, kernel v3.16.37 qemu v2.7 ，上一篇：KVM源代码分析4:内存虚拟化–OenHan 1. PIO指令介绍 80386的I/O指令使得处理器可以访问I/O端口，以便从外设输入数据，或者向外设发送数据。这些指令有一个指定I/O空间端口地址的操作数。有两类的I/O指令： 1、 在寄存器指定的地址传送一个数据（字节、字、双字）。...

DirectIO是write函数的一个选项，用来确定数据内容直接写到磁盘上，而非缓存中，保证即是系统异常了，也能保证紧要数据写到磁盘上，具体写文件的机制流程可以参考前面写的<Linux内核写文件流程>,DirectIO流程也是接续着写文件流程而来的。 内核走到__generic_file_aio_write函数时，系统根据file->f_flags &am...

从《Finding a needle in Haystack: Facebook’s photo storage》大致对比着翻译看了几遍，有些理解和想法，便记录下来。 Haystack和TFS都是面向对象的分布式存储系统，最主要的需求都是为了解决PB级别的图片存储问题，文中也提到了一些设计目标，但设计目标是问题驱动的，先看facebook前期存储模型： 它们存在的问题...

swap分区出现是因为硬件落后的时候，被OS设计人员搞出来承担一部分内存工作的，那时候的硬盘的速度和内存速度的差别对性能的影响还不明显，但随着现在高性能程序的要求，swap分区的读写速度严重影响了性能。 swappiness又被留出来作为控制swap使用程度的接口，关于/proc/sys/vm/swappiness的介绍wiki有 Swappiness is...