使用Spark＋MLlib构建用户标签系统

对用户需求的了解是电子商务企业服务好用户的关键。而随着用户量和数据量的不断增长,传统的单机算法越来越难以满足业务的需求,而基于Spark＋MLlib的分布式机器学习算法可以给我们提供很大帮助。本文主要分享使用Spark＋MLlib构建用户标签系统的实现方法和实践经验等。     

基于FILTERSIM算法的油藏沉积微相模拟研究

为了解决复杂油田沉积微相传统模拟算法无法体现油藏连通性的特性,在对传统建模方法综合分析的基础上,利用FILTERSIM算法,对Stanford V沉积相进行了实际建模,并在建模中结合了地震数据,将模拟结果与SNESIM算法进行了比较。研究结果表明,在河流相储层建模中,该方法能够在较少的内存占用下实现与SNESIM算法相近的模拟效果,同时FILTERSIM算法还具有时间复杂度低、可以模拟连续参数等优点。     

基于力学模型的曲面展开通用算法

为了解决曲面展开算法实现复杂、累积误差和通用性不佳的缺点,提出一种在三维空间内基于能量模型的曲面展开算法,待展开的曲面以三角网格形式表示,将曲面简化为三角网格的顶点组成的质点系统,通过在每个质点上加上适当的力使得三角网格产生相应的变形,达到将曲面展开的效果.与现有算法相比,该曲面展开算法适用于任意形状曲面,不需要使用投影平面,整个变形完全由网格顶点受力来驱动,便于实现、适用面广、对于不可展曲面也能得到较好的展开效果,而不会出现裂纹现象.     

基于Impala构建实时大数据查询系统实践

Impala是Cloudera公司研发的新型准实时大数据查询系统,用于交互式数据查询和分析,提供快速即席查询的功能,便于快速获取数据和决策支持。