Notes of O_DIRECT flag

What is O_DIRECT Starting with kernel 2.4, Linux allows an application to bypass the buffer cache when performing disk I/O, thus transferring data directly from user space to a file or disk device. This is sometimes termed direct I/O or raw I/O. Dire…

【转】open参数O_DIRECT的学习

open参数O_DIRECT的学习使用 O_DIRECT 需要注意的地方 posix_memalign详细解释 free:这里好几个方法我都没测试成功,最后还是用posix_memalign 对齐的方法成功执行了,贴上代码 #include <stdio.h> #include <sys/types.h> #include <sys/stat.h> //O_DIRECT #define __USE_GNU 1 #include <fcntl.h> #inc…

InnoDB O_DIRECT选项漫谈（一）【转】

本文来自:http://insidemysql.blog.163.com/blog/static/2028340422013671186977/ 最近和文件系统内核开发人员做技术交流,对O_DIRECT选项有了新的认识. 在 InnoDB存储引擎的配置中参数innodb_flush_method通常设置为O_DIRECT,这也是官方文档所推荐的设置值.DBA或开发人员知道该参数是文件打开的一个标识,启用后文件的写入将绕过操作系统缓存,直接写文件.其在InnoDB存储引擎中的表现为对于写…

RAC的QA

RAC: Frequently Asked Questions [ID 220970.1] 修改时间 13-JAN-2011 类型 FAQ 状态 PUBLISHED Applies to: Oracle Server - Enterprise Edition - Version: 9.2.0.1 to 11.2.0.1 - Release: 9.2 to 11.2 Purpose Frequently Asked Questions for Real Applicatio…

马哥教育视频笔记：01（Linux常用命令）

1.查看缓存中使用的命令和命令路径 [wskwskwsk@localhost /]$ hash 命中命令 /usr/bin/printenv /usr/bin/ls /usr/bin/clear 2.查看系统时间 [wskwskwsk@localhost /]$ date 2015年 07月 28日星期二 :: CST 3.查看ls命令手册 [wskwskwsk@localhost /]$ man ls LS() User Commands LS() NAME ls - list direc…

2.Linux文件IO编程

2.1Linux文件IO概述 2.1.0POSIX规范 POSIX:(Portable Operating System Interface)可移植操作系统接口规范. 由IEEE制定,是为了提高UNIX(也适用于Linux)环境下应用程序的可移植性. 2.1.1虚拟文件系统 Linux具有与其他操作系统和谐共存的能力. Linux文件系统由两层构建:第一层是虚拟文件系统(VFS),第二层是各种不同的具体的文件系统. VFS把各种具体的文件系统的公共部分抽取出来,形成一个抽象层,是系统内核的一部分…

percona 5.6升级到5.7相关error及解决方法

今早,把开发环境的mysql升级到了5.7.15,5.6数据导入后,启动一切正常,检查.err日志,发现有如下异常: 2016-10-31T00:29:33.187073Z 0 [Warning] System table 'time_zone_leap_second' is expected to be transactional.2016-10-31T00:29:33.187093Z 0 [Warning] System table 'time_zone_name' is expected…

Linux下使用iostat 监视I/O状态

我们可以使用 sar(1), pidstat(1), mpstat(1), vmstat(8) 来监控一.安装 yum install sysstat 二.参数解释 FILES /proc/stat contains system statistics. /proc/uptime contains system uptime. /proc/partitions contains disk statistics (for pre 2.5 kernels that have been patche…

FastDFS配置文件(storage.conf)

# 该配置文件是否生效 # false:生效 # true:无效 disabled=false # 本storage server所属组名 group_name=group1 # 绑定IP # 后面为绑定的IP地址 (常用于服务器有多个IP但只希望一个IP提供服务). # 如果不填则表示所有的(一般不填就OK),相信较熟练的SA都常用到类似功能, # 很多系统和应用都有 bind_addr= # bind_addr通常是针对server的.当指定bind_addr时,本参数才有效. # 本sto…

nginx指令

Directives(指令) Syntax(语法): aio on | off | threads[=pool]; Default: aio off; Context: http, server, location This directive appeared in version 0.8.11. 指令出现在版本0.8.11版本 Enables or disables the use of asynchronous file I/O (AIO) on FreeBSD and Linux: 启用…

Linux User's Manual IOSTAT

IOSTAT(1) Linux User's Manual IOSTAT(1) NAME iostat - Report Central Processing Unit (CPU) statistics and input/out- put statistics for devices, partitions and network filesystems (NFS). SYNOPSIS iostat [ -c ] [ -d ] [ -N ] [ -n ] [ -h ] [ -k | -m ]…

FastDFS分布式文件系统配置文件详解

一.tracker配置文件详解: # is this config file disabled# false for enabled# true for disableddisabled=false# 这个配置文件是否不生效,呵呵(改成是否生效是不是会让人感觉好点呢?) false 为生效(否则不生效) true反之 # bind an address of this host# empty for bind all addresses of this hostbind_addr=# 是否绑定I…

Direct I/O，Synchronous I/O的概念

Direct I/O概念: Direct I/O is a way to avoid entire caching layer in the kernel and send the I/O directly to the disk. 想要使用direct io的模式,可以这样做: Opens files with O_DIRECT flag. Synchronous I/O概念: Synchronous I/O is any I/O (system I/O with or without O_D…

170518、FastDFS_配置文件详解

http://bbs.chinaunix.net/thread-1941456-1-1.html 首先是 tracker.conf # is this config file disabled # false for enabled # true for disabled disabled=false # 这个配置文件是否不生效,呵呵(改成是否生效是不是会让人感觉好点呢?) false 为生效(否则不生效) true反之 # bind an address of this host # empt…

OpenResty 最佳实践（2）

此文已由作者汤晓静授权网易云社区发布. 欢迎访问网易云社区,了解更多网易技术产品运营经验. lua 协程与 nginx 事件机制结合文章前部分用大量篇幅阐述了 lua 和 nginx 的相关知识,包括 nginx 的进程架构,nginx 的事件循环机制,lua 协程,lua 协程如何与 C 实现交互:在了解这些知识之后,本节阐述 lua 协程是如何和 nginx 的事件机制协同工作. 从 nginx 的架构和事件驱动机制来看, nginx 的并发处理模型概括为:单 worker + 多连接 +…

hdparm - get/set SATA/IDE device parameters

hdparm(8) - Linux man page Name hdparm - get/set SATA/IDE device parameters Synopsis hdparm [ flags ] [device] .. Description hdparm provides a command line interface to various kernel interfaces supported by the Linux SATA/PATA/SAS "libata" s…

Attempting to track I/O with systemtap

https://glandium.org/blog/?p=1476 Attempting to track I/O with systemtap There are several ways a program can hit the disk, and it can be hard to know exactly what’s going on, especially when you want to take into account the kernel caches. This incl…

GitHub: Oracle Database on Docker 为测试改天试试

Oracle Database on Docker https://github.com/oracle/docker-images/tree/master/OracleDatabase/SingleInstance Sample Docker build files to facilitate installation, configuration, and environment setup for DevOps users. For more information about Oracle…

man(2) readv writev

#include <sys/uio.h> ssize_t readv(int fd, const struct iovec *iov, int iovcnt); unix高级环境编程中的定义: [ssize_t readv(int filedes,const struct iovec iov[ ],int iovcnt) ;ssize_t writev(int filedes,const struct iovec iov[ ],int iovcnt) ; ] -----------------…

详解linux io flush

通过本文你会清楚知道 fsync().fdatasync().sync().O_DIRECT.O_SYNC.REQ_PREFLUSH.REQ_FUA的区别和作用. fsync() fdatasync() sync() 是什么? 首先它们是系统调用. fsync fsync(int fd) 系统调用把打开的文件描述符fd相关的所有缓冲元数据和数据与都刷新到磁盘上(non-volatile storage) fsync() transfers ("flushes") all modifie…

Dubbo入门到精通学习笔记（八）：ActiveMQ的安装与使用（单节点）、Redis的安装与使用（单节点）、FastDFS分布式文件系统的安装与使用（单节点）

文章目录 ActiveMQ的安装与使用(单节点) 安装(单节点) 使用目录结构 edu-common-parent edu-demo-mqproducer edu-demo-mqconsumer 测试 Redis的安装与使用(单节点) 安装(单节点) 使用 FastDFS分布式文件系统的安装与使用(单节点) FastDFS介绍安装(单节点) 使用 FastDFS配置文件详解 ActiveMQ的安装与使用(单节点) 安装(单节点) IP:192.168.4.101 环境:CentOS 6.6.…

sync/fsync/fdatasync的简单比较

此文主要转载自 http://blog.csdn.net/zbszhangbosen/article/details/7956558 官网上有关于MySQL的flush method的设置参数说明,但可能很多人不太明白.下文就详细说明此问题. 首先官网的说明如下: http://dev.mysql.com/doc/refman/5.6/en/innodb-parameters.html#sysvar_innodb_flush_method innodb_flush_method Command-…

python doc os 参考

os --- 操作系统接口模块源代码: Lib/os.py 该模块提供了一些方便使用操作系统相关功能的函数. 如果你是想读写一个文件,请参阅 open(),如果你想操作路径,请参阅 os.path 模块,如果你想在命令行上读取所有文件中的所有行请参阅 fileinput 模块. 有关创建临时文件和目录的方法,请参阅 tempfile 模块,对于高级文件目录处理,请参阅 shutil 模块. 关于这些函数的适用性的说明: 所有 Python 内建的操作系统相关的模块的设计都是为了使得在同一功能可…

MAGIC XPA最新版本Magic xpa 2.4c Release Notes

New Features, Feature Enhancements and Behavior ChangesSubforms – Behavior Change for Unsupported Task ModeStarting with this version, if an Online task that is running in a Subform control cannot be executed, the task and the host task will remain o…

Git for Windows v2.11.0 Release Notes

homepage faq contribute bugs questions Git for Windows v2.11.0 Release Notes Latest update: December 1st 2016 Introduction These release notes describe issues specific to the Git for Windows release. The release notes covering the history of the core…