共查询到20条相似文献,搜索用时 31 毫秒
1.
Spark性能优化技术研究综述 总被引:2,自引:0,他引:2
近年来,随着大数据时代的到来,大数据处理平台发展迅速,产生了诸如Hadoop,Spark,Storm等优秀的大数据处理平台,其中Spark最为突出。随着Spark在国内外的广泛应用,其许多性能问题尚待解决。由于Spark底层 的执行机制极为复杂,用户很难找到其性能瓶颈,更不要说进一步的优化。针对以上问题, 从开发原则优化、内存优化、配置参数优化、调度优化、Shuffle过程优化5个方面对 目前国内外的Spark优化技术进行总结和分析。最后,总结了目前Spark优化技术新的核心问题,并提出了未来的主要研究方向。 相似文献
2.
3.
4.
SEO技术研究 总被引:4,自引:0,他引:4
范彦忠 《计算机应用与软件》2010,27(1):160-164
为了利用搜索引擎优化SEO(Search Engine Optimization)技术给网站带来高质量的流量并将其转化为商业利益,理解搜索引擎的算法和排名原理十分必要。通过对网站的结构优化、关键词优化、单页优化、防止被搜索引擎惩罚和挽救被惩罚网站等技术的研究,达到提高网站排名,实现网站的价值目的。 相似文献
5.
如何迅速、有效地进行XML数据查找,关键问题是避免对无关元素进行查询.通过合并元素,可以减少文档中元素的数目,同时还能够避免查找冗余结点,有效提高查询效率.提出一种基于Ctree的新索引结构FC-Index,它通过合并结构中"相同"元素压缩结构,从而在查询过程中过滤掉与查找无关的元素.基于FC-Index索引结构提出一种新的查询方法,能够有效地针对FC-Index进行快速查找. 相似文献
6.
7.
文章主要针对数据库系统查询优化进行探讨,其目的为探查最小执行代价(时间和费用)的策略,最优化系统性能。优化方法的应用选择一定要适当,并且要科学的权衡便捷度与执行代价,从而确定最佳的优化方案,提高系统执行率。 相似文献
8.
提出了一种新型无约束全局优化方法。主要是从当前常用算法的优化过程中总结出共性—反馈特性,然后利用反馈控制系统来实现这种优化特性。在这种智能计算系统中,将无约束优化问题的目标函数作为控制对象,将PID控制器作为一种优化算法。由于传统PID方法容易达到局部极小点,提出了多系统并行PID优化方法。最后采用基准函数对此优化算法进行测试,并与几种不同类型的改进优化算法进行对比,数值实验结果验证了此种算法的有效性。 相似文献
9.
逐次逼近动态规划法在水库优化调度中的应用 总被引:1,自引:0,他引:1
动态规划法是一种在多段决策序列中选取最优的一种方法,它根据最优性原理,能有效减少状态序列的枚举数量,可以对其进行改进以适应特定领域的应用需要。在水库优化调度中的一般做法是选取某一固定步长的水位来划分决策点,进行动态规划进而求出最优决策序列。这种方法难免会产生很多不必要的枚举和计算。本文实现了用变步长逐次逼近的动态优化法,能较好地解决此类具有线性上下限状态的决策过程,能较好适应三峡水库短期优化调度中的应用。 相似文献
10.
本文针对WCDMA无线网络优化进行了全面的分析和阐述,通过对网络优化流程、工程网络优化、运维网络优化等方面的研究,指出了目前存在的问题和采取的网络优化措施,同时,分析了WCDMA与其他移动通信系统之间的干扰,并提出相应的解决思路. 相似文献
11.
优化编译技术在现代处理器的研究中表现出越来越重要的作用。文章从现代编译器的结构入手,综合介绍现代编译器所普遍采用的优化技术,并提出了一种有效的优化编译器实现策略。 相似文献
12.
基于ASP.NET平台的网站和应用越来越广泛,用户对网站的访问速度要求也越来越高。分别从程序编码优化、数据操作优化和配置优化等三个方面入手,介绍在实际应用开发中网站性能优化的若干方法和技巧,主要针对响应时间、吞吐量和资源利用率等性能指标优化网站,以提高访问速度和网站性能。 相似文献
13.
14.
生物地理学优化算法综述 总被引:8,自引:2,他引:8
生物地理学(Biogeography)是一门研究自然界种群迁移机制的科学,Dan Simon用生物地理学的方法和机制来解决工程优化问题,提出了生物地理学优化算法(BBO,Biogeography-Based Optimization).生物地理学优化算法以其独特的搜索机制和较好的性能在智能优化算法领域得到了广泛的关注.对生物地理学优化算法的设计原理、迁徙模型、算法流程及相应迁移和突变操作进行了综述.通过BBO算法在14个基准函数下与传统算法,如遗传算法、蚁群算法和粒子群等优化算法的性能比较,表明生物地理学优化算法是有效的.论述了算法与传统优化算法之间的差异以及BBO算法有待解决的问题. 相似文献
15.
魏敏 《网络安全技术与应用》2014,(6):56-56,58
数据库性能的优化取决于多方面的因素,越庞大的数据库,优化方案越复杂。性能优化可以从服务器硬件配置、MySQL服务器的系统参数设置,以及数据表的设计这三方面来进行。 相似文献
16.
数据库性能问题已经成为数据库研究的焦点之一,如何让数据库高效的运行是数据库管理中必须重点考虑的问题。该文以企业ERP系统的SQL Server数据库为主要研究对象,在分析优化的目标和步骤流程,提出了适合ERP数据库的优化方法。 相似文献
17.
针对Web前端性能低下的问题,通过分析归纳Web中从后端到前端的B/S架构原理、浏览器缓存、浏览器的加载方式、服务器关于HTTP相关的配置等过程中一些影响前端性能优化的因素,系统地提出一个旨在提高网页加载速度、呈现速度和用户体验,整体性、通用性强的完整Web前端性能优化解决方案。该解决方案包括服务器端优化、HTML优化、Java Script优化、CSS优化、图片优化等内容。并在HTTP代理工具Fiddler搭建的512 KB慢网速下通过Speed Tracer监测UI Thread,寻找基于HTML5技术的Web移动电子商务项目"指尖点餐系统"的点餐页面前端性能中的瓶颈,根据所提出的Web前端性能优化解决方案对其进行优化实践。优化前后的Timeline以及UI Thread对比分析表明,优化后加载时间降低了82%,页面渲染降低了32%,脚本执行减少了79%。 相似文献
18.
灰狼优化(Grey Wolf Optimization,GWO)算法是近年被提出的一种新型智能优化算法,具有收敛速度快和优化精度高的特点,但对于一些复杂优化问题易陷入局部最优。差分进化(Differential Evolution,DE)算法的全局搜索能力强,但其性能对参数敏感,且局部搜索能力不足。为了发挥二者各自的优点并弥补存在的缺陷,提出了一种灰狼优化与差分进化的混合优化算法。首先使用嵌入趋优算子的GWO算法搜索,以便在更短的过程中获得更高的优化精度和更快的收敛速度;然后采用自适应调节参数的差分进化策略来进一步提高算法对复杂优化函数的寻优性能,从而获得一种高性能的混合优化算法,以便能更高效地解决各种函数优化问题。对12个高维函数的优化结果表明,与标准GWO,ACS,DMPSO及SinDE相比,新的混合优化算法不仅具有更好的收敛速度和优化性能,而且具有更好的普适性,更适用于解决各种函数优化问题。 相似文献
19.
20.
高级程序变换是提高程序性能的重要手段,很多涉及到优化参数的选择问题,如为循环分块选择适当的分块因子。由于优化参数搜索问题本身是NP难问题,目前尚没有确定性的算法可以有效解决该问题,针对于此,将该问题转化为一个非线性全局最优化问题,提出一种基于改进模拟退火算法的程序性能优化参数搜索算法,实验结果验证了算法的有效性。 相似文献