-
实时大数据处理Storm(一)
所属栏目:[大数据] 日期:2021-01-31 热度:107
自从Google发表了3篇举世瞩目的论文(Google File System、BigTable和MapReduce)以后,大数据被引爆了。如果说计算机的威力相当于一枚大炮的威力的话,那么互联网的威力相当于一颗原子弹,而大数据的威力则相当于氢弹,大数据成为了IT发展史上的又一次浪[详细]
-
ZZNU 1988 (大数取余)
所属栏目:[大数据] 日期:2021-01-31 热度:194
1988: Sn 时间限制: 1 Sec??内存限制: 128 MB 提交: 19??解决: 8 [提交][状态] 题目描述 给你两个数 n,p(0 n,p = 10^15); a1 = 1;? a2 = 1+2;? a3 = 1+2+3;? ... an = 1+2+3+...+n? Sn = a1+a2+a3+...+an; 求(6*Sn) % p; 输入 ?输入一个数 T表示有T组实例;[详细]
-
HDU 5351 MZL#39;s Border(大数 + 找规律)——2015 Multi-Uni
所属栏目:[大数据] 日期:2021-01-31 热度:113
传送门 MZL’s Border Time Limit: 2000/1000 MS (Java/Others)????Memory Limit: 65536/65536 K (Java/Others) Total Submission(s): 1374????Accepted Submission(s): 452 Problem Description As is known to all,MZL is an extraordinarily lovely gir[详细]
-
哈佛商评 :使用大数据为消费者创造价值
所属栏目:[大数据] 日期:2021-01-31 热度:58
大数据为市场提供大的保证。显而易见,大数据自推出以来就回答以下两个阻碍市场发展的最烦人的问题:1)谁买,买什么,什么时候买,什么价位买?2)是否能将消费者所听,所知,所看的东西和他们所购买和所消费的东西联系起来? 通过提高目标市场和鉴别、排[详细]
-
大数据分析平台架构(Big Data Analytics Platform)
所属栏目:[大数据] 日期:2021-01-31 热度:78
一、数据分析平台层次解析 ? 大数据分析处理架构图 数据源:?除该种方法之外,还可以分为离线数据、近似实时数据和实时数据。按照图中的分类其实就是说明了数据存储的结构,而特别要说的是流数据,它的核心就是数据的连续性和快速分析性; 计算层:?内存计[详细]
-
序列模式挖掘——GSP算法
所属栏目:[大数据] 日期:2021-01-30 热度:173
序列模式挖掘的基本概念 项目全集I、项集X和事务集合T的概念和文章关联规则挖掘——Apriori算法 中定义的一致。一个序列(Sequence)是一个有序的项集列表,这个有序通常是指时间有序。我们将序列s表示为: a1a2...ar 其中, ai 是一个项集,也称为s的一个元[详细]
-
科普丨五个角度浅析大数据与BI的区别,教你迅速把握大数据的精髓
所属栏目:[大数据] 日期:2021-01-30 热度:105
副标题#e# 作者:咨行天下 BI(Business Intelligence),中文翻译是商务智能,是一套完整的解决方案,用来将组织中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助组织做出明智的业务经营决策。 大数据(Big Data)是从收集的海量数据中,[详细]
-
开源大数据查询分析引擎现状
所属栏目:[大数据] 日期:2021-01-28 热度:149
文|叶蓬 【按:此文是与我的《基于大数据分析的安全管理平台技术研究及应用》同期发表在内刊上的我的同事们的作品,转载于此。这些基础性的研究和测试对比分析,对于我们的BDSA技术路线选定大有帮助。】 引言 大数据查询分析是云计算中核心问题之一,自从G[详细]
-
【数位DP】HDU3565-Bi-peak Number
所属栏目:[大数据] 日期:2021-01-28 热度:66
题目链接:http://acm.split.hdu.edu.cn/showproblem.php?pid=3565 Problem Description A peak number is defined as continuous digits {D0,D1 … Dn-1} (D0 0 and n = 3),which exist Dm (0 m n - 1) satisfied Di-1 Di (0 i = m) and Di Di+1 (m = i n[详细]
-
LightOJ1282 Leading and Trailing 大数取首尾
所属栏目:[大数据] 日期:2021-01-28 热度:136
任何一个数都可以转换为10^k,k是一个小数,k的整数部分决定了这个数的位数,小数部分决定了每一位的值,根据此可以快速找到前三位。 通过快速幂取模可以快速找到后三位。 题目链接:http://acm.hust.edu.cn/vjudge/problem/26992 #pragma comment(linker,[详细]
-
数据处理之——data.table
所属栏目:[大数据] 日期:2021-01-28 热度:53
副标题#e# data.table简介 关于 R 中的数据处理,我们接着介绍 data.table 包。上期我们介绍的 dplyr 有类似于sql的一套数据处理的语法,而 data.table 则有着它自己的一套语法,它能处理几乎所有 dplyr 可以处理的数据,而且代码量更少,效率更高,特别是[详细]
-
日均请求量百亿级数据处理平台的容器云实践
所属栏目:[大数据] 日期:2021-01-28 热度:198
from:?http://geek.csdn.net/news/detail/97887 声明:本文为CSDN原创投稿文章,未经许可,禁止任何形式的转载。? 作者:袁晓沛,目前在七牛云的主要工作是基于容器平台构建分布式应用,借助容器的优势,实现大规模分布式应用的自动化运维以及高可用,以Pa[详细]
-
如何计算文档相似性
所属栏目:[大数据] 日期:2021-01-28 热度:180
最近课题需要,整理一下文档相似性的一些研究,主要是参考知乎上面的回答和52nlp的相关文章。以备后期综述使用。具体还需要好好细读链接。 主要思路 01/one hot representation,BOW+tf-idf+LSI/LDA体系. docsim方法:gensim包,使用corpora.Dictionary(te[详细]
-
关联规则挖掘——Apriori算法
所属栏目:[大数据] 日期:2021-01-28 热度:75
前言 大二的时候,一个老师为了勾起我们对数据挖掘的兴趣,老是问我们这个问题:你们知道超市为什么要把啤酒跟尿布放在一起吗?但是从来没告诉我们答案。现在,很多人都听过这个问题,觉得很平常,但是那时的我真觉得挺神奇的。直到后来,了解了关联规则挖[详细]
-
在「不稀缺」的商业世界,如何挖掘稀缺的资源?
所属栏目:[大数据] 日期:2021-01-28 热度:102
副标题#e# 要生存壮大,就要找到新的稀缺资源, 并且想尽办法掌握在自己手中。 文 | 曲凯 编者按:本文来源42章经(ID:MyFortyTwo),一家生产原创优质内容的科技媒体,誓同有趣、有料、有企图心的灵魂共成长。 “Technology increases access to what is[详细]
-
新闻中文本地域信息标签的抽取
所属栏目:[大数据] 日期:2021-01-28 热度:158
这里主要是基于规则的新闻地域提取方法,这里简要记录一下思路。 首先我们拥有了地域信息数据库,并且标注了省市的layer层信息。主要思路是利用nlp库,分词得到标有地名属性词,在于地域数据库匹配。 第一步,提取正文分词得到标注为地名的词语。 第二步,[详细]
-
视音频数据处理入门:H.264视频码流解析
所属栏目:[大数据] 日期:2021-01-28 热度:136
===================================================== 视音频数据处理入门系列文章: 视音频数据处理入门:RGB、YUV像素数据处理 视音频数据处理入门:PCM音频采样数据处理 视音频数据处理入门:H.264视频码流解析 视音频数据处理入门:AAC音频码流解析[详细]
-
Hdu 5834 Magic boy Bi Luo with his excited tree(从树上每个点
所属栏目:[大数据] 日期:2021-01-25 热度:51
传送门:Hdu 5834 Magic boy Bi Luo with his excited tree 题意:给你一棵树,有n个点,每个点都有一个利润,每条边都有一个花费,问从每个点出发,获得的最大的利润为多少(每个点上的利润只能取一次,每条边每走一次就要花费) 思路:我们任意选取一个根,每个点都[详细]
-
业务渗透思路总结
所属栏目:[大数据] 日期:2021-01-25 热度:129
-
Dynamic CRM BI Report
所属栏目:[大数据] 日期:2021-01-25 热度:200
BI综述: BI(Business Intelligence)即商务智能,它是一套完整的解决方案,用来将企业中现有的数据进行有效的整合,快速准确的提供报表并提出决策依据,帮助企业做出明智的业务经营决策。转自百科。 Dynamic CRM: Microsoft Dynamics CRM是全球唯一以销[详细]
-
原来地铁都用这个挖!盾构机,简直是挖掘神器!
所属栏目:[大数据] 日期:2021-01-24 热度:144
副标题#e# (点击上方公号,可快速关注) 转自:cax360 演示视频 ↓↓↓ 盾构隧道掘进机,简称盾构机。是一种隧道掘进的专用工程机械,现代盾构掘进机集光、机、电、液、传感、信息技术于一体,具有开挖切削土体、输送土碴、拼装隧道衬砌、测量导向纠偏等功[详细]
-
机器学习物语(2):大数定理军团
所属栏目:[大数据] 日期:2021-01-24 热度:136
副标题#e# 机器学习理论帝国崛起,大数定理军团功不可没,称之为军团毫不夸张,在前军先锋强大数定理和副将弱大数定理后面,是铠甲上刻着“Concentration of Measure”的古老印记的战士们,不妨暂且忽略他们之间乱七八糟的“血缘”关系,而罗列一些名字:Ch[详细]
-
hdu5834 Magic boy Bi Luo with his excited tree(树形dp)
所属栏目:[大数据] 日期:2021-01-24 热度:82
副标题#e# Magic boy Bi Luo with his excited tree Time Limit: 8000/4000 MS (Java/Others)????Memory Limit: 131072/131072 K (Java/Others) Total Submission(s): 723????Accepted Submission(s): 192 Problem Description ? Bi Luo is a magic boy,he[详细]
-
HDU 1042 N! N的阶乘(大数)
所属栏目:[大数据] 日期:2021-01-24 热度:72
N! Time Limit: 10000/5000 MS (Java/Others)????Memory Limit: 262144/262144 K (Java/Others) Total Submission(s): 75303????Accepted Submission(s): 21981 Problem Description Given an integer N(0 ≤ N ≤ 10000),your task is to calculate N! ?[详细]
-
如何在企业硬件设备中挖掘安全漏洞
所属栏目:[大数据] 日期:2021-01-24 热度:123
副标题#e# 研究发现,亚马逊上销量最好的50种消费级路由器都存在有安全漏洞,其中20款是出厂固件就可被黑客利用。但功能之战和利润收窄可能会导致进入不安全路由器时代。为确定该问题是否仅局限于消费市场,有必要对企业网络应用的无线路由器进行评估。 买[详细]
