基于内存映射文件的复杂对象快速读取方法

当前内存数据库(NoSQL)、嵌入式数据库技术在高并发高性能系统中得到了广泛的应用,但对于复杂对象数据的读取效率仍然低下,研究发现主要性能瓶颈有两个:一是内核态与用户态间的内存拷贝,拷贝消耗时间与复杂对象的数据量成线性增长;二是从数据库数据到运行时数据对象的格式转化操作,不但需要开辟新的内存空间存储运行时数据对象,而且还需要解析原始数据并拷贝至新对象之中。为此,提出了一种基于内存映射(memory mapping)文件的复杂对象共享读取方法。借助内存映射文件与自定义内存分配器,实现了结构复杂的C++标准模板库容器对象跨进程无拷贝、无格式转化的共享,有效降低了数据读取延时。通过性能的分析比较表明,与NoSQL内存数据库、嵌入式数据库比,读取性能效率提升10倍以上。再加上底层技术成熟稳定,复用了标准模板库,具有开发成本低、可维护性强、实用性高等优点,因此,适用于高并发高性能的高可用后台服务系统。     

C程序设计语言中文件读取问题探析

围绕C程序设计语言中有关文件读取任务这一主题,从文本文件和二进制文件两种类型文件的读取任务入手,对使用C语言标准库函数进行文件读取的操作进行剖析,以求纠正开发人员对该部分知识内容的错误认知,增强程序员使用C语言编写逻辑严谨的商用代码的实战能力.     

研发动态

正新数学模型或可打破内存"存储墙"美国华裔科学家、伊利诺伊理工学院计算机系主任孙贤和教授最近提出一种新的数学模型,可大幅提高数据读取速度,帮助解决"大数据"时代面临的数据处理和分析难题。孙贤和于1990年提出了"内存制约加速比"定律。在这一定律基础上,孙贤和新近提出一种叫做C-AMAT的数学模型,通过平行内存读取方式,把计算机的缓存和存储系统并行处理,可以极大减少计算机在数据读取方面的延迟,让计算机读取速度最多     

网络多媒体通信技术在网络教学系统中的应用

本文针对一个实际网络教育应用系统中所涉及的图像、视频、音频等多媒体信息的特点，提出了一套网络教学方案。对采用直接读取内存主页面的方式提取多媒体信息的技术，以及屏幕广播、多媒体同步技术进行了比较深入的探讨与分析。     

在LabVIEW中读取多列数据文件的通用方法

针对LabVIEW中提供的文件读取函数功能的不足．介绍了一种读取多列数据文件的通用方法。     

基于顺序读取的分布式top-k查询算法

top-k查询是一种被广泛应用的操作,通过把已有top-k算法作为分析和研究的基础,根据现有算法所存在的不足提出自己的解决方案。提出SRTA( Sequential-Read Threshold Algorithm),相比NRA算法对数据的存储进行了重新的规划,创建一个新的表将内存上的开销转换到较廉价的外存开销,只需顺序读取就可以进行有效的top-k查询,同时将表进行了划分,在并行处理的情况下更能提高程序的效率,能够很好地运行在内存有限的环境中。在SRTA基础上提出的DSRTA(Distributed Sequential-Read Threshold Algorithm),适用于分布式环境中。 DSRTA先采用ID划分的方式把原有数据集划分为多个子空间,然后再进行数据规划,发挥分布式的性能优势,进一步提高了SRTA的查询效率。     

嵌入式文件系统的随机读取性能优化

本文通过整体分析随机读写和文件缓冲区具体实现过程,提出取消在文件指针移动时文件缓冲区释放和状态改变的机制,添加根据读取文件和原文件大小动态改变文件缓冲区尺寸的随机读取优化方法,并建立随机读取性能模型,验证此方法的可行性和推导动态文件缓冲区最佳尺寸.最后搭建嵌入式文件系统测试平台,成功完成该优化方法的两种情况验证,验证结果表明该随机读取优化方法能有效提升嵌入式文件系统在使用文件缓冲区时随机读取性能.     

基于HBase的瓦片索引和读取方法设计

地理信息瓦片数据规模庞大，传统的关系型数据库不足以满足对瓦片数据容量、速度的支持。针对这种情况，选取HBase存储瓦片数据，在以四叉树编码作为索引进行数据存储的基础上，提出一种多层级瓦片数据索引设计方法，该算法通过“异层级再编码”的方式，使在地图中空间相邻的瓦片数据在物理存储中也尽可能相邻，以达到瓦片数据的空间连续性在物理存储中得以保持的目的；提出一种邻域预读取方法，该方法配合索引设计，以批量读取的方式预先将邻域瓦片读取至缓存。实验表明，在用户连续读取相关联的地图数据的情况下，该方法比传统的缓存算法具有更高的命中率，且比传统的数据索引设计响应更快。     

光驱技术的新进展

光驱的转速随着时间的流逝而不断地加快,现在50倍速的光驱已不再是神话了。以前的低倍速光驱多采用“恒线速度”(Constant LinearVelocity,CLV)方式,即在读取光盘内外圈的数据时采用不同转速(也就是角速度不同但线速度相同)的方法。它虽然可以保证在读取数据时有相对稳定的传输率,但是对电机的损耗较大且易老化,造成不易向更高的速度迈进。所以,现在的读取技术已经转为“局部恒角速度”(Partial Constant     

DDR2极速狂飙——5款DDR2533内存测试

DDR2是由JEDEC（Jornt Eiectran Devrace Engineering Coupcil。电子元件工业联合会）定义的下一代DDR内存技术标准。和DDR相比。DDR2内存可进行4bit预读取，这就意味着DDH2拥有两倍于DDR的预读数据的能力，     

智能电表的数据抄读新方法

智能电表大多采用MODBUS协议或者645协议进行通信,通信速率不高,这对于智能电表大量数据的传输不方便。提出基于PROFIBUS的智能电表数据抄读方法及系统,此系统包括基于PROFIBUS通信的主站--可编程逻辑控制器(PLC)和从站,主站和从站是基于PROFIBUS总线通信连接的,主站由西门子PLC/CP5611网卡和STEP 7编程软件、WINCC监控软件等组成,从站为具有PROFIBUS模块的智能电表;该PROFIBUS模块与智能电表中的微控制单元(MCU)进行连接,作为智能电表的一部分。这种基于PROFIBUS的智能电表数据抄读方法及系统易于实施,数据传输快,且通信速率可以达到12Mb/s。     

加密技术在远程抄表系统中的研究与应用

现行的远程抄表系统中,数据传输大多是以明文的形式进行,对于有经济价值的数据而言,无疑存在着隐患。由于人工抄表方式存在诸多弊病,远程自动抄表系统的应用日益普及,数据传输的安全性则变得尤为重要。主要就远程电力抄表通信协议的加密方法进行了讨论,采用DES算法对传输内容中的有效数据进行加密,从而提高系统数据传输的安全性。     

基于灰色分析的电力四表合一数据智能集抄系统研究

为了提高电力四表合一数据智能集抄能力,提出一种基于灰色分析的电力四表合一数据智能集抄系统设计方法,采用多维传感器进行电力四表合一数据智能采集,对采集的电力四表合一数据进行智能信息融合处理,提取电力四表合一数据的灰色关联特征量,根据特征提取结果进行电力四表合一数据的智能融合和传输控制,结合嵌入式设计方法,进行电力四表合一数据的智能集抄系统设计,采用模糊集成控制方法,进行电力四表合一数据智能集抄系统的输出稳定性调节,结合灰色分析方法,实现电力四表合一数据智能集抄系统的大数据信息处理和智能开发设计。测试结果表明,设计的电力四表合一数据智能集抄系统具有很好的数据信息融合处理能力,系统的输出稳定性较高,可靠性较好。     

图书馆的数字资源与阅读推广

文章以吉首大学张家界学院“图书馆的数字化阅读推广”为例,探究了图书馆数字化阅读推广的需求与实施方法﹐并从数字资源方面对推广阅读提出对策与建议。     

基于大数据的小型智能电表自动抄表方法研究

针对人工抄表方法速度慢,且易出现误抄、漏抄等问题,提出并设计了一种基于大数据的小型智能电表自动抄表方法。利用大数据技术对电表数据进行采集,在经过降噪统计后,分析电表数据的增益结果,然后建立远程通信逻辑,并引入电能计量理论,设计自动抄表算法,同时简化计算步骤,完成小型智能电表的自动抄表方法设计。实验结果表明,采用自动抄表方法进行智能电表的抄表工作时,其抄表速率比人工抄表方法的抄表速率高38.7%,且误抄率极低,具备极高的有效性。     

Empirical Evaluations of Usage-Based Reading and Fault Content Estimation for Software Inspections

This thesis describes six empirical investigations of two techniques applied to software inspections, namely reading techniques and fault content estimation techniques. The first part of the thesis presents a series of experiments of a novel reading technique called usage-based reading. The second part investigates fault content estimation applied to the software inspection process. The estimation methods used are capture-recapture and curve fitting.     

新媒体环境下智慧化阅读推广研究——以重庆第二师范学院为例

开展智慧化阅读推广,紧跟时代步伐,有效提升读者多重阅读体验和满意度,增强智慧化阅读推广的价值,促进智慧化阅读推广服务的有效化、规范化、科学化、常态化、长期化发展,已成为当前阅读推广研究中一个重要的切入点。文章基于智慧化阅读研究,结合"新媒体"高新技术环境,提出智慧化阅读推广的内容分析、具体实施、环境构建、推广评估与效果、推广改进等几个方面组成的以读者为中心的核心服务体系。本文分析了智慧化阅读基本方面,以我校图书馆实际运用推广效果,智慧化阅读存在的优、劣势及相应的对策。     

基于文献阅读研讨的研究生专业课程教学评价方法

研究生文献阅读研讨课是上海大学研究生专业课程改革的一次有益尝试,该课程在教学内容和教学方式上与传统的教师主导型课堂教学模式有较大差异,文章在介绍研究生文献阅读研讨课教学特点的基础上,提出一种以文献阅读和研讨为主的研究生专业课程,通过分析近三年计算机学院的评估结果,提出改进措施。     

面向垂直领域的阅读理解数据增强方法

阅读理解问答系统是利用语义理解等自然语言处理技术,根据输入问题,对非结构化文档数据进行分析,生成一个答案,具有很高的研究和应用价值。在垂直领域应用过程中,阅读理解问答数据标注成本高且用户问题表达复杂多样,使得阅读理解问答系统准确率低、鲁棒性差。针对这一问题,该文提出一种面向垂直领域的阅读理解问答数据的增强方法,基于真实用户问题,构造阅读理解训练数据,一方面降低标注成本,另一方面增加训练数据多样性,提升模型的准确率和鲁棒性。该文用汽车领域数据对本方法进行实验验证,其结果表明,该方法对垂直领域中阅读理解模型的准确率和鲁棒性均得到有效提升。     

基于外部知识和层级篇章表示的阅读理解方法

阅读理解指的是基于给定文章自动回答相关问题,这是人工智能及自然语言处理领域的一个研究热点。目前已提出许多基于深度学习的阅读理解方法,但是这些方法对问题理解及篇章建模不充分,导致模型获取答案准确率不高。为了解决上述问题,该文提出一个基于外部知识和层级篇章表示的阅读理解方法。该方法特点有: ①通过引入问题重要词的字典释义、HowNet义原,并结合问题类型,加强问题理解; ②使用层级篇章表示,提升模型对篇章的理解; ③在一个框架下联合优化问题类型预测与答案预测两个子任务。在DuReader数据集上的实验结果表明,该方法与基线系统性能相比最大提升了8.2%。