电力计量采集系统中分布式缓存系统研究

提出Redis数据库的分布式扩展机制并引入新的Key过期处理策略,构建了能够满足大规模数据应用场景下的缓存系统。经布署在广东等地系统的运行结果表明,该动态分布式缓存系统解决了原有计量采集系统中计量记录入库性能差的问题,能够满足海量数据的处理需求,具有高效、可靠、扩展方便的特点,对于构造提高关系数据库事务型操作能力的缓存系统具有指导意义。     

D2D协作边缘缓存系统中基于传输时延的缓存策略

为了满足5G系统低时延高可靠的需求,针对单缓存终端直传(D2D)协作边缘缓存系统,提出了一种基于传输时延的缓存策略。运用随机几何理论,将请求用户和空闲用户的动态分布建模为相互独立的齐次泊松点过程,综合考虑内容流行度、用户位置信息、设备传输功率以及干扰,推导出用户的平均传输时延与缓存概率分布的关系式。以平均传输时延为目标函数建立优化问题,提出了一个低复杂度的迭代算法,得到平均传输时延次优的缓存策略。仿真结果表明,该缓存策略在传输时延方面优于常见的几种缓存策略。     

缓存系统在实际应用中的重要性

Memcached是一个开源的、高性能的、分布式的内存对象缓存系统,用于在动态Web应用中提升访问速度,在很多高访问量的大型网站及在基础数据的转换中得到广泛应用;通过缓存数据库查询结果,减少数据库访问次数,降低数据库负载;提高动态Web应用的访问速度、增强可扩展性。     

基于多元混合准则模糊算法的高校教育信息推荐系统设计

伴随教育信息化工作逐渐深入,网络教学信息出现爆炸性增长,如何在大量教育资源中准确提取用户所需教育信息是教与学过程中亟待解决的问题。文中设计基于多元混合准则模糊算法的高校教育信息推荐系统,系统核心功能模块分为检索模块、数据库模块以及推荐显示模块。用户在检索模块输入检索信息后,检索模块将用户检索指令传输至数据库模块,数据库模块通过多元混合准则模糊决策模型按照用户偏好提取推荐度最高的教育信息传输至推荐显示模块,推荐显示模块在推荐资源列表将推荐信息反馈至用户。应用结果显示,该系统可根据用户偏好向用户推荐教育信息,且用户发现准确度和推荐召回率都较高。     

基于FPGA具有自适应功能的数据采集系统设计

为了满足工业上数据采集的自适应需要,本文采用FPGA设计实现了高速数据采集,整个系统分为高速数据采集模块、数据缓冲模块、数据存储模块。其中数据采集模块对滤波放大后的输入信号进行采样,采样率可调;数据缓冲模块负责对采样得到的数据进行缓存：数据存储模块负责将缓存后的数据传输至存储器进行存储。使用Quartus Ⅱ仿真工具对...     

云计算分布式缓存技术在海量数据处理平台中的应用

随着云计算和大数据时代的到来,在满足用户对系统访问量、访问速度、访问安全的要求的同时,系统必须实时准确地处理迅猛增长的海量数据,而传统的缓存技术无法满足海量数据处理和用户高并发访问的需求.分布式缓存技术是最好的高性能缓存解决方案.本文研究如何利用云计算下分布式缓存技术在海量数据处理平台中解决该问题,分析研究了分布式缓存的关键技术、分布式缓存的一致性和分布式内存数据管理.在此基础上,分析并设计了分布式缓存系统的部署和整体架构.并将该分布式缓存系统的设计模式应用在某团购网上,进行了POC测试.测试结果证明分布式缓存技术可以缓解服务器的压力,解决海量数据和超高并发数据访问所带来的问题,提升了系统的性能、访问速度、可靠性以及降低响应延迟.     

海量图书检索信息的快速查询系统优化设计研究

以往依据关键词的检索方法,在对海量图书检索信息进行查询过程中,无法满足海量信息的大批量检索需求,存在查询效率低和误差高的缺陷。因此,设计基于分布式架构的海量图书检索信息的快速查询系统,系统中的各组件通过并行数据库和分布式存储实现交互。该系统的功能模块包括用户管理模块、数据抽取模块、索引创建模块、文本查询模块及索引检索模块。分析了系统各功能模块的设计和实现过程,这些功能模块共同对外提供图书信息的快速查询服务。实验结果表明,所设计系统可实现海量图书检索信息的快速、精确查询,并且具有较高的索引创建和索引检索性能。     

缓存模块设计浅谈

随着社会和计算机水平的不断的发展,人们在日常生活和工作中处理的数据越来越多,这给数据库服务器带来很大的负担,并且大量的数据传送造成网络传输瓶颈。大量的用户都需要通过数据库来查询符合自己需求的数据,而且很多的用户查询的是相同的数据。开始人们用提升服务器的配置来解决工作负担大的问题,但这是换汤不换药的做法,没有从根本上解决这个问题。可采用缓存减轻服务器的负担,把以前查询过的结果存放在客户端,再有相同的查询时不用去请求服务器返回结果,而是由客户端直接返回结果给用户。这篇论文主要讨论缓存模块中数据库返回的查询结果如何存取。     

基于缓存共享的分布式宽带数字接收技术

为满足宽带数字接收系统对海量实时数据缓存的需求,提出了一种基于数据缓存共享和流控式轮询的技术方案.该方案构造了一种高效的数据存储结构和缓存机制,为系统采用分布式并行处理架构提供了基础,并使系统具有均衡的吞吐率性能.硬件实现的测试结果表明,该方案能够实现高达144Gb/s实时数据的缓存与处理,可以较好地满足实际应用需求.     

基于闪存阵列的缓存容量确定方法

针对低成本、小型化的数据记录系统的应用,提出了一种数据缓存技术解决方案。存储模块是由闪速存储器芯片（NAND Flash）组成的存储阵列,以FPGA为载体的SOPC系统作为存储模块的控制核心。分析存储系统的结构及控制平台的实现过程,并对系统工作原理及并行分路技术进行讨论。深入研究Flash阵列的存储过程,提出最小FIF...     

基于云计算环境的GIS软件缓存技术实现方法的研究

在介绍基于云计算环境的GIS软件特点的基础上,指出缓存技术是影响基于云计算GIS软件发挥强大功能的关键因素,进而对各缓存技术进行比较,GIS软件缓存技术的主要目的就是减少对云数据库的查询,降低数据库的压力。通过研究,提出了基于云计算环境的GIS软件分布式缓存技术及其实现方法,给出了云计算GIS软件分布式缓存系统的结构以及数据交输的技术实现方法,提高了云计算GIS软件的用户体验度,降低了数据库的负担,充分利用了资源。     

基于可重构路由器上缓存的流媒体协作分发策略

提出一种新颖的基于可重构路由器上缓存的协作分发策略来加速流媒体。通过网络存储即多个边缘路由器节点对热点视频数据进行合作缓存,就近为用户提供服务,从而使得流媒体服务器的性能要求尤其是带宽需求得到巨大的降低,骨干网传输的流量也明显减少,同时用户响应延迟也得到明显的改善。此外,实现了一个原型系统来评价基于路由器上缓存的流媒体协作分发策略的性能,结果表明该方案相比于现有的方案在改善网络性能以及用户体验方面取得很大的提升。     

一种新型分布式代理缓存系统—双层集群缓存

为了提高代理系统的整体性能,基于内部网络用户访问时间的局部性和相似性,并结合现有的分布式缓存系统,本文提出了一种新型的分布式代理缓存系统——双层缓存集群.双层缓存集群系统分为网内集群缓存层和代理集群缓存层,采用双层代理缓存结构,充分利用现有内部网络资源,分散了代理的负担.降低了代理之间的通信开销,还增强了缓存资源的利用...     

基于数据库算法的Web软件应用框架设计

Web软件应用多将数据存储于数据库当中,当数据和请求量庞大时容易造成响应迟缓,数据库性能下降的问题。为此文章提出一种基于缓存数据库算法的Web软件应用框架设计方法,在采用缓存层的同时引入websocket数据响应处理方式,进一步改善数据库的缓存性能。在实际应用中采用了这种框架设计方法,对其缓存性能进行了研究。结果表明,采用该方法可以有效地提高数据库缓存性能,从而提高数据库性能和Web软件应用的响应灵敏性。     

图书馆不同领域的电子标签敏感信息智能过滤系统设计

针对当前图书馆内电子标签存在大量敏感信息,书籍保存环境质量差的现象,设计图书馆不同领域的电子标签敏感信息智能过滤系统。系统中的电子标签信息采集模块采用RFID技术获取图书馆借阅、管理以及检索等领域的电子标签信息;电子标签信息存储模块依照借阅、管理以及检索领域划分网关层内不同网关,各领域中均采用LHBase数据库实时存储电子标签信息;通过本体推理方法识别电子标签语义模板内敏感信息,采用贝叶斯电子标签敏感信息过滤器,过滤电子标签敏感信息。经实验证明,所设计系统敏感信息过滤结果的正确率和召回率分别高于其他系统20.4%和15.2%以上,说明该系统能准确过滤图书馆不同领域的电子标签敏感信息,具有很好的现实应用价值。     

基于空间信息支持的图书馆个性化资源集成系统设计

当前图书馆信息资源日益增多,大多图书馆未能有效集成海量资源,无法向用户提供更多感兴趣个性化资源信息。因此,设计基于空间信息支持的图书馆个性化资源集成系统,用户输入查询指令后,个性化数据源集成模块提取并集成各类数据源,构建统一查询接口,通过findAPI的规定建立检索请求将集成数据源上传至服务器后存储到后台数据库,空间信息管理模块在后台数据库结果集里提取包含各数据库检索标记信息,融合空间信息和属性信息,依据读者待检索资源属性判断资源空间位置,准确提取与属性相符数据资源。采用一种本体驱动的图书馆个性化资源空间相关信息自动检索策略,通过个性化资源空间信息本体概念匹配、常规检索和扩展检索提高系统查全率与查准率。实验结果证明,所设计系统的查全率和查准率都高于98%,使用价值高。     

面向5G技术应用的纵向协作缓存技术研究

5G技术的应用,改善了网络尤其是移动网络的使用效果,使活跃于网络中的数据信息以指数级的速度增长,而现有的信息传输网络很难完全满足5G技术应用的信息传输与显示要求,容易出现诸如网络拥塞、时延较大、清晰度不够等问题,影响了用户的网络体验。对此,基于当前5G技术应用的实际,提出一种纵向协作的缓存技术方案,通过将终端、基站、核心网进行纵向位置的部署,来实现纵向协作缓存的目的,从而提高5G技术应用中的网络传输与网络存储能力,改善用户使用网络应用的体验。     

基于HBASE分布式存储的通用海量日志系统设计方法研究

运用HBASE分布式系统的强大存储、查询能力以及高性能的REDIS分布式缓存来实现通过海量日志系统。该系统将通用性的配置信息存储在REDIS分布式缓存,个性化的日志信息存储在HBASE分布式系统。用户只需要调整配置信息就可以方便的形成个性化的海量日志系统。最后本文给出海量日志系统详细的设计方法。     

面向分布式缓存系统的无线资源管理:动机、挑战与方法

移动社交网络平台的多元化发展与推广,使得移动用户对数据传输的需求呈爆发式增长趋势,并对匮乏的频谱资源及高负荷基站的管理提出了新挑战.为了解决这些问题,将分布式缓存系统引入无线协作网络中,鼓励移动用户间协作缓存热门内容,以实现用户间低能耗、高可靠、低时延的内容共享,同时为基站和回程链路减负.分析了无线分布式缓存系统中无线资源管理所面临的机遇和挑战,针对频谱高效、能量高效及安全传输等关键问题,围绕图论和匹配理论对无线资源管理方法展开了讨论和总结.此外,讨论和分析了挖掘和利用社交信息有效提升无线资源效率的可行性,同时对社会学和无线网络领域的交叉研究进行了展望.     

大规模网络数据存储系统的设计与实现

当前的网络数据存储系统在处理大规模数据时需要较长时间,增加了网络数据存储周期,存储性能较差。因此设计并实现一种大规模网络数据存储系统,该系统主要包括A/D高速采集模块、FLASH存储模块和FPGA数据接收模块。A/D高速采集模块采集大规模网络数据,采用FPGA数据接收模块对采集到的网络数据进行接收和处理,过滤其中的噪声因素,再将处理好的网络数据保存在FLASH存储模块中。依据三层架构模式设计大规模网络数据存储系统软件架构,并给出了业务逻辑层完成数据传递的关键代码。实验结果表明,所设计的大规模网络数据存储系统具有较高的数据存储和读取速度,能够实现网络数据的负载均衡存储。