互联网延迟队列解决方案设计

针对互联网中广泛存在的延迟任务处理问题,本文分析了技术难点和常见的解决方案,并基于Redis中间件设计和实现了延迟队列系统。该系统具有轻量级、高可用、低耦合、高性能等特点,能够支撑业务系统的稳定运行。     

HMSST+:基于分布式内存数据库的HMSST算法优化

为了解决HMSST(HashMapSelectivityStrategyTree)算法在集中式环境下受限于有限内存的问题,提出了一种新的分布式SPARQL查询优化算法HMSST+。该算法基于Redis提出了一种分布式存储方案,通过平行扩展存储节点和分布式调度,使得海量RDF数据的查询得以在分布集群的内存中实现。采用LUBM1000所大学的测试数据集对查询策略进行了实验,结果表明提出的方法与HMSST算法相比具有更好的扩展能力,与现有的分布式查询方案相比也具有更好的查询效率。     

面向网上商城的单点登录系统的研究与实现

文章对现有单点登录模型作出了优缺点分析,设计了一种基于SOA架构的单点登录系统。系统基于SOA架构使用Dubbo作为分布式服务框架,Zookeeper作为注册中心。系统将自定义生成的用户登录凭证(Ticket)保存到Redis缓存数据库和浏览器的Cookie中。登录校验时,拦截器会将浏览器中Cookie的值与Redis中的数据进行比对,以达到校验效果。本系统充分吸收了现有模型的优点,不仅具有很好的灵活性和易于管理用户数据的优势,而且维护简单,更重要的是它非常适用于高并发高可用需求的应用场景。     

基于 Redis 的水务云系统缓存替换策略设计

水务云系统在海量数据高并发访问情况下存在Web服务性能急剧降低的问题,对此,设计一种基于Redis的水务云系统数据库缓存方案,对影响数据库缓存效率的关键因素进行分析、提取和量化计算,将水务数据类型、用户对数据对象的兴趣度及用户访问行为等因素与缓存数据替换过程结合,对现有GDSF缓存替换算法加以改进,并结合实际的水务云系统数据集实现该缓存方案和仿真实验。实验结果表明,基于Redis的水务云系统数据库缓存方案可以有效改善水务云系统的服务性能,也可为类似水利数据管理平台建设提供有益的借鉴。     

基于Redis的分布式锁的实现方案

文章对锁展开探讨,讨论其中的超时、并发、故障可能带来问题,并提出具体基于Redis的解决方案。     

Cluster-based distributed dynamic cuckoo filter system for Redis

ABSTRACT

With the exponential growth of network data storage scale, the issue of uniform distribution and efficient retrieval of data in the distributed storage systems such as the Redis cluster has received increasing attention in recent years. In view of the existing problems in scalability, usability and other aspects of the solution in current researches, we propose the distributed dynamic cuckoo filter system based on Redis cluster. On one hand, we introduce an efficient hash indexing structure–dynamic cuckoo filter (DCF), which only stores the fingerprint information of data, and has the automatically scalable capacity to meet the demand of data storage on a dynamic scale. On the other hand, we use an improved consistent hashing algorithm to construct Redis cluster and use the thorough communication mechanism of Redis cluster to achieve the data sharing and efficient utilisation of multi-machine filters. The scheme proposed in this paper can take the time and space efficiency into account, greatly promote the retrieval performance of massive data, and improve the reliability and availability of Redis cluster.     

成长守护系统管理端的设计与实现

学生身心的健康发展,受到了社会各界人士的广泛关注。如今智能手机在中低龄学生人群中的使用率越来越高。青少年自我控制能力不强,极易对手机产生依赖,因此需要引导学生健康合理地使用手机。与此同时手机作为终端设备还可以提供实时位置数据,为实现对学生人身安全监管提供了基础。基于此,设计了一种基于SpringBoot技术框架的学生成长守护系统。系统采用多服务模块的方案进行开发,使用Nginx作为反向代理服务器,MySQL、Redis作为数据库服务器。系统实现了对手机使用策略的设置,使用地理围栏技术对学生到校离校时间、轨迹等进行记录并实现消息推送。该系统有效管理了手机的使用情况并保证学生在校期间的人身安全。     

基于NoSQL的海量航空物流小文件分布式多级存储方法

为了解决航空物流领域海量小文件存储效率和访问效率不高的问题,提出一种基于Nosql的海量小文件分布式多级存储方法,充分考虑到数据的时效性、本地性、操作的并发性以及文件之间的相关性,先根据相关性将文件合并,然后采用分布式多级存储,使用内存式Redis数据库做缓存,HDFS做数据的持久化存储,其过程采用预取机制。实验结果表明,该方法有效提高了小文件的存取效率和磁盘的利用率,显著地降低了网络的带宽占用和集群NameNode的内存消耗,适合解决航空领域海量小文件存储问题。     

基于Socket．io＋Node．js＋Redis构建高效即时通讯系统

随着互联网技术的发展,市场上已有一些比较成熟的即时通讯系统,但大多数都是基于C／S结构,而基于B／S结构的即时通讯系统还处于发展阶段,主要受制于不同浏览器版本的兼容问题,且该类系统对高并发和数据快速存取有着较高的要求。而基于Socket．io、Node．js和Redis的技术,可以较好地解决B／S结构所遇到的问题。     

基于缓存和分库组件的在线培训数据系统研发与应用

在当前的培训行业中,在线培训已经成为一种趋势,尤其在上海市浦东软件园里,众多园内企业更希望通过在线 培训平台得到各种职业技能培训服务。对此上海市浦东软件园职业技能培训中心研发了一套在线培训平台。为应对高并发 的培训访问量,本系统的数据服务子系统一方面引入了MyCAT组件实现了海量数据的分库存储,提升了操作培训相关数据 的性能;另一方面引入了基于Redis哨兵框架的缓存机制,提升了数据服务的性能。系统在投入使用后,能满足线上高并发和 大数据量的要求,在数据服务层面为本在线培训平台提供了坚实的保障。