应用需求:

在网盘开发过程中有这样一个需求,即对文件版本进行控制,即记录文件版本的更替信息,这里说的更替信息仅仅是记录不同时刻的文件变化,即文件的增、删、改、重命名等操作。在每个待监控的目录下都会保存一份文件,记录文件变化的增量信息,每次低版本到高版本升级的时候就可以通过消元合并操作快速地进行。关于文件版本控制的具体实现方案会在开发完善后列出,这里仅仅指出它的保存方式,即将文件操作的实例对象序列化后保存在文件中。

序列化的实现:

这里我们采用QDataStream来实现序列化,QT针对不同的实例化对象有不同的要求。这里主要分两类,即:QT中原生的数据类型,例如:QString、QMap、QHash等,这对这种原生数据类型的序列化,我们不需要做其它额外的操作,直接就可以序列化到文件中。还有一类特殊的就是我们自己定义的数据结构或类,这种方式利用QDataStream不能直接实现序列化,我们必须重载<<和>>操作符,只有重载完之后才可以按我们的要求实现序列化。下面就举例来说明一下,我们自定义的数据结构或类应该如何实现序列化:

自定义的类:LHTFileVersionItem,该类用来记录某一个操作,它的定义为:

  1. #ifndef LHT_FILEVERSIONITEM_H
  2. #define LHT_FILEVERSIONITEM_H
  3. #include <QDataStream>
  4. struct FileVersionItem
  5. {
  6. QString               m_sFileAbsolutePath ;
  7. QString               m_sFileOrgName ;
  8. QString               m_sFileNowName ;
  9. int               m_sFileType ;
  10. QString               m_sFileMoveFromAbsolutePath ;
  11. QString               m_sFileMoveToAbsolutePath ;
  12. };
  13. class LHTFileVersionItem
  14. {
  15. public:
  16. LHTFileVersionItem();
  17. ~LHTFileVersionItem();
  18. void setVersion(int version);
  19. void setOp(int op);
  20. int  GetVersion();
  21. int  GetOp();
  22. FileVersionItem* GetFileVersionPointer();
  23. friend QDataStream &operator<<(QDataStream & , const LHTFileVersionItem &);
  24. friend QDataStream &operator>>(QDataStream & , LHTFileVersionItem &);
  25. private:
  26. int                   m_iVersion;
  27. //!-1:delete   1:crate           2:change
  28. //!3:rename    4:move
  29. int                   m_iOp;
  30. FileVersionItem       *m_hFileVersionPointer ;
  31. };
  32. #endif // LHT_FILEVERSIONITEM_H

其中,friend QDataStream &operator << 和 friend QDataStream &operator >>就是声明的对操作符的重载。注意:这里我们使用了friend来声明为友元函数,这里对friend关键字做些介绍:

何谓友元?为什么要使用友元?我们知道,采用类的机制后实现了数据的隐藏和封装,类的数据成员一般定义为私有成员,成员函数一般定义为公有的,依此提供类与外界间的访问接口。但是,有时需要定义一些函数,注意:这些函数并不是类的一部分(因此在cpp文件中实现该函数时,函数前不需要使用,类名::函数名的方式),但又需要频繁地访问类的私有数据成员,这是可以将这些函数定义为友元函数。除了友元函数外还有友元类,两者统称为友元。友元的作用是提高了程序的运行效率(即:减少了类型检查和安全性检查等,这些操作都需要时间开销),但是它同时也破坏了类的封装性和隐蔽性,使得非成员函数可以访问类的私有成员。

其实,这里理解友元关注friend就可以了,friend代指“朋友”、“关系友好”的意思,只有两者(函数与类友好形成友元函数;类与类友好形成友元类)关系友好,我才允许它访问我的私有成员。

自定义的类:LHTFileVersionItem的实现:

  1. #include "lht_fileversionitem.h"
  2. LHTFileVersionItem::LHTFileVersionItem()
  3. {
  4. m_hFileVersionPointer = new FileVersionItem();
  5. }
  6. LHTFileVersionItem::~LHTFileVersionItem()
  7. {
  8. }
  9. void LHTFileVersionItem::setVersion(int version)
  10. {
  11. this->m_iVersion = version ;
  12. }
  13. void LHTFileVersionItem::setOp(int op)
  14. {
  15. this->m_iOp = op ;
  16. }
  17. int LHTFileVersionItem::GetVersion()
  18. {
  19. return this->m_iVersion ;
  20. }
  21. int LHTFileVersionItem::GetOp()
  22. {
  23. return this->m_iOp ;
  24. }
  25. FileVersionItem* LHTFileVersionItem::GetFileVersionPointer()
  26. {
  27. return this->m_hFileVersionPointer;
  28. }
  29. //! 重载操作符<<的实现
  30. QDataStream &operator<<(QDataStream &output , const LHTFileVersionItem & item)
  31. {
  32. output << item.m_iVersion << item.m_iOp << item.m_hFileVersionPointer->m_sFileAbsolutePath << \
  33. item.m_hFileVersionPointer->m_sFileMoveFromAbsolutePath << item.m_hFileVersionPointer->m_sFileMoveToAbsolutePath << \
  34. item.m_hFileVersionPointer->m_sFileNowName << item.m_hFileVersionPointer->m_sFileOrgName ;
  35. return output ;
  36. }
  37. //! 重载操作符>>的实现
  38. QDataStream &operator>>(QDataStream & input, LHTFileVersionItem & item)
  39. {
  40. input >> item.m_iVersion >> item.m_iOp >> item.m_hFileVersionPointer->m_sFileAbsolutePath >> \
  41. item.m_hFileVersionPointer->m_sFileMoveFromAbsolutePath >> item.m_hFileVersionPointer->m_sFileMoveToAbsolutePath >> \
  42. item.m_hFileVersionPointer->m_sFileNowName >> item.m_hFileVersionPointer->m_sFileOrgName ;
  43. return input ;
  44. }

继承自Object后会出现的问题:

如果我们自定义的类继承自QObject,在使用时可能会出现这样的编译错误:error C2248 'QObject::QObject' : cannot access private member declared in class 'QObject'如下所示:

为什么加了继承自QObject就会出现这种问题呢,肯定是QObject的问题,查看源码中在private中有这样一句:

  1. private:
  2. Q_DISABLE_COPY(QObject)
  3. Q_PRIVATE_SLOT(d_func(), void _q_reregisterTimers(void *))
  4. /*
  5. Some classes do not permit copies to be made of an object. These
  6. classes contains a private copy constructor and assignment
  7. operator to disable copying (the compiler gives an error message).
  8. */
  9. #define Q_DISABLE_COPY(Class) \
  10. Class(const Class &); \
  11. Class &operator=(const Class &);

从上面的注释和实现可以看出继承自QObject后它不允许对象的赋值操作,即=,我查找我所有调用的函数里面没有看到直接赋值的操作啊,那为什么会出现这样的问题呢?原因在于在函数调用时形参的传递也会被认为是赋值操作。因此,出现这样问题,直接将QObject的继承去掉就可以,我们没有使用到QObject独特的特定。

局部变量使用对性能的影响以及进程的堆和栈:

由于在代码中我使用了QMulitHash<QString , LHFilteVersionItem> tmp;这一局部变量来保存某一目录下的文件,由于在写测试代码期间,我利用循环模拟了50万的数据序列化后保存在文件中,在运行期间我发现读取函数耗费很长的时间,而函数里面最耗时的读取操作也只花费了很短的时间,但是函数一直无法立即退出,在等待了大约30s后才能退出,相关代码如下:

  1. void LHTWORKFLOW::ReadAllDataFromFile(QMultiHash<QString, LHTFILEITEM> &m_hFileItemInfo)
  2. {
  3. if (NULL == m_fFileInfoHandle)
  4. {
  5. OpenFile(m_sFileItemInfoAbsolutePath , 0);
  6. }
  7. m_fFileInfoHandle->seek(0);
  8. QDataStream input(m_fFileInfoHandle);
  9. QMultiHash<QString, LHTFILEITEM> final;
  10. while (!input.atEnd())
  11. {
  12. QMultiHash<QString, LHTFILEITEM> tmp ;
  13. input >> tmp ;
  14. final += tmp ;
  15. }
  16. m_hFileItemInfo = final ;
  17. CloseFile(m_fFileInfoHandle);
  18. }

经过仔细分析和思考,发现问题就出在局部变量final上,由于是局部变量,因此当函数执行完毕后局部变量就要销毁,由于是QMultiHash类型的变量,我们知道Hash相比数组来说它的一大好处是数据地址不连续,元素在内存控件中占用的内存地址是不连续的,而数据量又大,因此在销毁的过程中应该是逐步遍历去释放内存指针去了。如果是数组这种连续的数据结构的话,释放会很快,只需要把该块内存的标志设为无用它就又可以被系统回收利用了。这种情况还是我第一次碰到,感到很有意思,对我以后的代码编写也有一定的知道意义,于是我就查阅了进行相关堆和栈的相关内容。

以下内容的参考链接:http://blog.csdn.net/hairetz/article/details/4141043 ,为了加深理解我这里再列出一点吧。

1> 预备知识—程序的内存分配

一个由C++编译的程序占用的内存分为一下几个部分:

1) 栈区(stack)— 由编译器自动分配释放,存放函数的参数值,局部变量的值等。其操作方式类似于数据结构中的栈。

2) 堆区(heap)— 一般由程序员分配释放,若程序员不释放,程序结束时可能又操作系统回收。

3) 全局区(静态区)(static) — 全局变量和静态变量的存储是放在一起的,初始化的全局变量和静态变量在一块区域,未初始化的全局变量和未初始化的静态变量在相邻的另一块区域,程序结束和由系统释放。

4) 文字常量区— 常量字符串就是放在这里的。程序结束后由系统释放。

5) 程序代码区— 存放函数体的二进制代码。

2> 堆和栈的对比

1) 申请方式

栈(stack)由系统自动分配。例如,声明在函数中的一个局部变量 int b ; 系统自动在栈中为b开辟空间。

堆(heap)需要程序员自己申请,并指明大小,在c中malloc函数如:p1 = (char *)malloc(10) ; 在C++中用new运算符如:p2 = new char[10];

但注意:p1、p2本身是在栈中的,只是通过malloc和new分配的空间是在堆中的。

3> 申请后的系统响应

栈(stack):只要栈的剩余空间大于所申请的空间,系统将为程序提供内存,否则将报异常提示栈溢出。

堆(heap):首先应该知道操作系统有一个记录空闲内存地址的链表,当系统收到程序的申请时,会遍历该链表,寻找第一个空间大于所申请空间的堆节点,然后将该节点从空闲节点链表中删除,并将该节点的空间分配给程序,另外,对于大多数系统,会在这块内存空间中的首地址处记录本次分配的大小,这样代码中的delete语句才能正确的释放本内存空间。另外,由于找到堆节点的大小不一定正好等于申请的大小,系统会自动的将多余的那部分重新放入空闲链表中。

4> 申请大小的限制

栈:在Windows下,栈是向低地址扩展的数据结构,是一块连续的内存的区域。这句话的意思是栈顶和栈的最大容量是系统预先规定好的,在windows下,栈的大小是2M,如果申请的空间超过栈的剩余空间时,将提示溢出,因此,能从栈获得的空间较小。

堆:堆是向高地址扩展的数据结构,是不连续的内存区域。这是由于系统使用链表连存储的空闲内存地址的,自然是不连续的,而链表的遍历方向是由低地址向高地址。堆的大小受限于计算机系统中有效的虚拟内存。由此可见,堆获得的空间比较灵活,也比较大。

5> 申请效率的比较

栈:由系统自动分配,速度较快。但程序员是无法控制的。

堆:是由new分配的内存,最好的方式是用VirtualAlloc分配虚拟内存,它既不是在堆也不是在栈,而是直接在进程的地址空间中保留一块内存,虽然用起来最不方便,但是速度快也最灵活。

6> 堆和栈中的存储内容

栈:在函数调用时,第一个进栈的是主函数中后的下一条指令(函数调用语句的下一条可执行语句)的地址,然后是函数的各个参数,在大多数的C编译器中,参数是由右向左入栈的,然后是函数中的局部变量。注意:静态变量是不入栈的。当本次函数调用结束后,局部变量先出栈,然后是参数,最后栈顶指针指向最开始存的地址,也就是主函数中的下一条指定,程序由该点继续运行。

堆:一般是在堆的头部用一个字节存放堆的大小。堆中的具体内容由程序员安排。

总结:

通过这块内容的分析,对影响程序执行性能的几个方面有了更清除的了解,对进程的堆栈也有了更深入的了解,感觉自己开始慢慢关注那些实质性的东西,这点我感觉是很好的,加油,对每个不懂的问题都要认真总结 。

http://blog.csdn.net/houqd2012/article/details/25070987

QT序列化操作(比较复杂和完善)的更多相关文章

  1. 【大话QT之七】QT序列化操作

    应用需求: 在网盘开发过程中有这样一个需求.即对文件版本号进行控制,即记录文件版本号的更替信息,这里说的更替信息不过记录不同一时候刻的文件变化,即文件的增.删.改.重命名等操作.在每一个待监控的文件夹 ...

  2. QT 序列化/串行化/对象持久化

    本文以一个实例讲解Qt的序列化方法: Qt版本 4.8.0 Qt序列化简介 Qt采用QDataStream来实现序列化,QT针对不同的实例化对象有不同的要求.这里主要分两类,即:QT中原生的数据类型, ...

  3. Python json.dumps 特殊数据类型的自定义序列化操作

    场景描述: Python标准库中的json模块,集成了将数据序列化处理的功能:在使用json.dumps()方法序列化数据时候,如果目标数据中存在datetime数据类型,执行操作时, 会抛出异常:T ...

  4. Qt QAxObject操作excel文件过程总结(转):

    正好同事问道Qt下操作excel. 转自:http://blog.csdn.net/a156392343/article/details/48092515 配制方面: 1.确保Excel软件在本地服务 ...

  5. C# XML序列化操作菜单

    鉴于之前写的一篇博文没使用XML序列化来操作菜单,而且发现那还有一个问题,就是在XML菜单的某个菜单节点前加上一些注释代码的就不能读取,现在使用XML序列化后可以很方便的读取,故在此写一写.   XM ...

  6. 2.大约QT数据库操作,简单的数据库连接操作,增删改查数据库,QSqlTableModel和QTableView,事务性操作,大约QItemDelegate 代理

     Linux下的qt安装,命令时:sudoapt-get install qt-sdk 安装mysql数据库,安装方法參考博客:http://blog.csdn.net/tototuzuoquan ...

  7. Qt之操作系统环境

    来源:http://blog.sina.com.cn/s/blog_a6fb6cc90102uy9k.html Qt中操作系统环境,官方解释如下: QStringList QProcess::syst ...

  8. Java 持久化之 --io流与序列化操作

    1)File类操作文件的属性 1.File类的常用方法 1. 文件的绝对完整路径:getAbsolutePath() 文件名:getName() 文件相对路径:getPath() 文件的上一级目录:g ...

  9. Asp.Net Core 2.0 项目实战(8)Core下缓存操作、序列化操作、JSON操作等Helper集合类

    本文目录 1.  前沿 2.CacheHelper基于Microsoft.Extensions.Caching.Memory封装 3.XmlHelper快速操作xml文档 4.Serializatio ...

随机推荐

  1. SASS安装的那些事

    *:first-child { margin-top: 0 !important; } body>*:last-child { margin-bottom: 0 !important; } /* ...

  2. [译]Stairway to Integration Services Level 9 - Control Flow Task Errors

    介绍 在本文中,我们会实验 MaximumErrorCount和ForceExecutioResult 故障容差属性,并且还要学习Control Flow task errors, event han ...

  3. RPC框架——简单高效hessian的使用方式

    RPC(Remote Procedure Call Protocol) RPC使用C/S方式,采用http协议,发送请求到服务器,等待服务器返回结果.这个请求包括一个参数集和一个文本集,通常形成“cl ...

  4. UIView 设置阴影(属性说明)

    以下代码实现: 第一个图片的代码 //加阴影--任海丽编辑 _imageView.layer.shadowColor = [UIColor blackColor].CGColor;//shadowCo ...

  5. codeforces 620E. New Year Tree dfs序+线段树+bitset

    题目链接 给一棵树, 每个节点有颜色, 两种操作, 一种是将一个节点的子树全都染色成c, 一种是查询一个节点的子树有多少个不同的颜色, c<=60. 每个节点一个bitset维护就可以. #in ...

  6. 用JS判断用户使用的是手机端还是pc端访问

    最近项目中用到一个应用,当访问同一个网站地址的时候,例如:www.xxx.com的时候,如果当前客户端是pc则跳转到专注于pc的部分,如果当前客户机是手机,则跳转到专注于手机的部分,秉承一贯的习惯,b ...

  7. QT学习 之 对话框 (四) 字体对话框、消息对话框、文件对话框、进程对话框(超详细中文注释)

    QMessageBox类: 含有Question消息框.Information消息框.Warning消息框和Critical消息框等 通常有两种方式可以来创建标准消息对话框: 一种是采用“基于属性”的 ...

  8. Exploring the MapBox stack: MBTiles, TileJSON, UTFGrids and Wax

    转自:http://blog.thematicmapping.org/2012/11/exploring-mapbox-stack-mbtiles-tilejson.html In my last b ...

  9. [置顶] ios 360度旋转效果demo

    demo功能:用UIimageView实现360度旋转效果. demo说明:iPhone6.1 测试成功.主要代码在:FVImageSequence.m中.在touchesMoved事件中,通过替换U ...

  10. veridata实验例(5)在更改主键列值,update操作将被分成两个语句

    veridata实验例(5)更改主键列值,update操作将被分成两个语句 续接"veridata实验举例(4)验证veridata查找出updata.delete操作导致的不同步现象&qu ...