基于新浪微博的公交系统数据采集及分析

为充分利用大数据时代的海量数据,提出一种基于新浪微博的公交系统数据采集及分析方法。通过Web Crawler从新浪微博抓取所需时空范围内的公交微博,分析公交微博发布的时间与空间分布规律;随后采用KMP算法统计并剔除冗余转发及回复微博,提取并分析公交相关的热点话题;基于中科院ICTCLAS算法进行中文分词处理,删除停用词后统计词频,生成关键词的词云。最后通过南京市范围内的8 913条公交微博进行实例验证与分析,结果表明,该方法可以从海量的微博数据中提取公交相关数据并进行分析,分析数据量大且有时效性,分析结果可为公交系统管理的优化与改善、公交政策的制定提供数据支撑。     

微博视听节目的传播分析技术研究与系统实现

本文简单介绍了微博用户的使用情况,分析了微博的传播特点,说明了微博传播中存在的隐患,阐述了建立一个智能化传播分析系统对微博视听节目内容分析研究的必要性,并提出对建立这一传播分析系统架构的设想.     

多微博平台用户数据采集

本文介绍了利用新浪、网易、腾讯、搜狐微博开放平台API,获取微博关键人、关键话题、传播态势数据的方法,针对多微博平台返回结果差异,给出了数据融合办法,提出通过接口封装、访问令牌切换、任务调度等技术,达到提高微博API调用效率、降低系统消耗的目的。     

微博热点话题检测系统的设计与实现

本文描述了一个微博热点检测系统。管理者通过它可以快速了解正在发生的或是已发生的微博热点事件。系统采用调用微博API接口与改进爬虫程序相结合的方式获取网页数据;由于网络数据量巨大,为了提高效率,还采用了网页清理技术;重点介绍了话题活性模型的方法,系统可以根据时间坐标快速寻找热点话题,提高了热点话题发现的效率,大大降低了热点话题发现的时间复杂度。     

基于微博数据采集的Web信息集成系统研究

使用模块化构建了一种特定领域的Web信息集成系统,设计实现一种基于领域关键词的新闻、微博数据采集处理系统,通过用户提供的关键词,结合人工筛选进行关键词扩展,对全网相关新闻、微博数据进行采集与抽取。设计实现了一种基于关键词和转发数的新闻排序方法,对特定领域采集的新闻数据进行处理排序,遴选重要信息进行定向推送。以气候变化领域为例,设计了Web信息集成系统。     

微博营销新发展与研究

2011年微博快速崛起,微博的出现和发展给网络营销带来了新的营销模式和实践。该文通过诠释微博的特点,结合微博营销案例,分析阐述微博营销的价值,提出微博营销在网络营销中的应用,展望微博营销发展前景。     

基于Scrapy的新浪微博数据爬虫研究

为了快速获取到新浪微博中的数据,在学习和分析当前爬虫技术的原理、核心模块和运行过程的基础上,文章将探索实现一个基于Scrapy框架的网络爬虫工具,以完成数据捕获等目标。该工具可根据一个或多个微博关键词搜索相关微博信息,并将搜索结果写入本地文件。实验结果显示：该爬虫拥有较好的加速比,可以快速地获取数据,并且这些数据具有一定的实时性和准确性。     

基于Hadoop的微博热点话题挖掘系统研究与设计

本文首先介绍了Web数据挖掘理论、Hadoop技术理论及国内外微博热点话题挖掘领域研究现状。在此基础上对传统微博热点话题挖掘方法进行综合及改进,旨在研究与设计基于Hadoop的微博热点话题挖掘系统。     

南阳医专校园微博系统模块设计

传统的微博模块主要以个人模块、企业模块以及明星模块三种,无论哪种模块,在校园内网微博中都不适用,毕竟对于高校来说,如何能够应用于教学生活、学生文化生活中,这才是关键。本文通过分析高校微博的应用环境,总结出校园网微博系统在建设时所需要注意的几大模块设计。     

联机计费数据采集系统及其应用

本主要介绍了采用联机计费数据采集系统的必要性，以及该系统所能提供的功能，然后介绍了在黑龙江省实施联机计费的方案。     

遥测数据采集系统的设计与实现

本文介绍一种遥测数据实时采集系统的设计与实现。该系统在地面综合实验中，用于高速度、大容量的采集、显示、处理和存储来自空间应用实时系统相应的数据。文中讨论了系统设计的特点及软、硬件设计方法。     

基于网络监听的无接口数据采集初探

以基站告警数据采集为例,论述在没有数据采集接口和数据格式未知的情况下,如何利用网络监听技术,捕获MOTOROLA告警客户端和华为告警客户端与服务器之间的网络通讯数据包,并对数据包内容进行由简到繁的筛选过滤和对比分析,逐步将数据包中有用的信息分离出来,实现数据采集。这种数据采集方法具有无需数据采集接口、无需数据格式资料、实时性高、对原有系统没有任何影响的优点。     

基于VB的数据采集系统

在用微机进行数据测量和控制时，必须将信号输入到微机里和将微机里数据输出去。数据采集卡功能强大，可以实现多种信号的输入和输出；Visual Basic简单易学的程序语言，多家硬件厂商都支持。介绍VB程序控制的数据采集卡对数据进行采集。介绍数据采集系统的组成及各部分的作用；数据采集卡驱动程序的安装；对数据采集的全过程及编程实现的方法。     

远程数据采集系统的设计与实现

讨论了两种远程数据采集系统设计方案，重点介绍了有线链路方案，该方案采用AT89C51与通用异步收发器8251接口和MODEM实现单片机与PC机在有线公共电话网中进行远程数据通信技术。并在工程上将其实现。本系统结构简单，性能稳定，适用范围广，可扩展性强，市场前景广阔。     

基于光纤的多级数据采集传输系统设计

介绍了一种远端多级数据采集传输系统，并将该系统的某些部分和国外同类系统在设计方法和性能上做了对比。该系统具有精度高，分布式，传输距离长，采样频率高，数据量大等特点，可用于石油探测、地震测量等需要对远程模拟信号进行高性能采集和处理的场合。     

基于MAXl55的同步数据采集系统

在电力系统信号的测量中，常需对多路信号进行同步采集，而基于常规采样芯片的数据采集模块通常存在系统复杂、体积大、非完全同步采样等不足。MAXIM公司推出的MAX155是一种高速、8住8输入通道的同步采样A／D转换器，非常适合电力系统信号同步测量的要求。详细介绍了基于MAX155A／D转换器和AT89S51单片机的同步数据系统的硬件和软件的设计方法。实验结果表明该系统不仅采样精度高，而且能实现完全同步采样。     

油田计量数据采集及监控系统设计

文章从系统结构、硬件组成、网络构造及软件设计等对油田计量数据采集及监控系统进行研究.选取PLCWAT05对油田的油、气、水三相分离器的压力、流量、温度等数据进行采集、处理、存储.上位机通过串行接口与PLC进行通信,通过组态软件编制组态界面以实现工业控制计算机现场实时数据的监视、预警及对PLC运行参数的整定.同时,阐述通...     

多通道接收机数据采集系统

探讨了基于 PCI总线的多通道接收机数据采集系统开发中的关键技术 ,包括硬件和软件     

单片机矿井多路数据采集监测系统

介绍了一种基于8031单片机的多路数据采集监测系统，该系统适用于中、小型矿井，采用双CPU控制，上位控制机和下位监测机均采用8031单片机，下位监测机采集数据，上位控制机控制下位监测机，并进行数据处理、数据显示、键盘输入和系统报警等工作。通过单片机通讯的方式实现数据与控制指令的远距离传输。