-
大数据的技术生态概述（转载）
所属栏目：[大数据] 日期：2020-12-24 热度：101
如何用形象的比喻描述大数据的技术生态？Hadoop、Hive、Spark 之间是什么关系？ 大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆，各有[详细]
-
九种常见的数据分析模型
所属栏目：[大数据] 日期：2020-12-24 热度：185
1. 漏斗分析模型 漏斗分析是一套流程式数据分析，它能够科学反映用户行为状态以及从起点到终点各阶段用户转化率情况的重要分析模型。 运营人员可以通过观察不同属性的用户群体（如新注册用户与老客户、不同渠道来源的客户）各环节转化率，各流程步骤转化率[详细]
-
大数据领域常用技术栈
所属栏目：[大数据] 日期：2020-12-24 热度：187
提起大数据，不得不提由IBM提出的关于大数据的5V特点：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性），而对于大数据领域的从业人员的日常工作也与这5V密切相关。大数据技术在过去的几十年中取得非常迅速的[详细]
-
Databricks说的Lakehouse是什么？
所属栏目：[大数据] 日期：2020-12-24 热度：90
? 在过去的几年里，Lakehouse作为一种新的数据管理范式，已独立出现在Databricks的许多用户和应用案例中。在这篇文章中，我们将阐述这种新范式以及它相对于之前方案的优势。 数据仓库在决策支持和商业智能应用方面有着悠久的历史。自20世纪80年代末问世以[详细]
-
[bigdata-045] redis故障处理 #34;Can#39;t save in backg
所属栏目：[大数据] 日期：2020-12-24 热度：68
发现官网出错了。经过检查，发现连接不到redis。检查redis的log，发现错误 Can't save in background: fork: Cannot allocate memory 搜索相关资料，这里说的比较详细 http://www.cnblogs.com/qq78292959/p/3994341.html http://blog.csdn.net/zqz_zqz/art[详细]
-
[bigdata-046] eclipse+spring开发web然后部署到tomcat
所属栏目：[大数据] 日期：2020-12-24 热度：111
1. 用eclipse开发spring，需要使用相关的ide 2. spring官网的ide https://spring.io/tools/eclipse 3. spring的tool suite https://spring.io/tools/sts 这个是专用开发spring的。 选择 https://spring.io/tools/sts/all 这里的linux64版本。 4. 在eclipse[详细]
-
新飞电器的BI建设案例
所属栏目：[大数据] 日期：2020-12-24 热度：194
一、河南新飞电器简介 河南新飞电器在制造行业内属于领先地位，其信息化程度较高，面对系统多且杂乱的情况，一个集中展示数据的平台就显得尤为重要。使用BI就是为了在一个相对统一的平台展示需要查看的数据，供决策层进行分析查看，从而做出更加有依据的判[详细]
-
Gartner发布2017年商业智能（BI）魔力象限报告――云商业智能工
所属栏目：[大数据] 日期：2020-12-24 热度：145
对我来说，等待Gartner发布最新一期的Gartner商业智能魔力象限报告，看看有哪些最新的意外总是一件令人兴奋的事情。 今年的魔力象限报告包括几个意外，并且对这个市场的现状以及未来发展方向发表了几点想法。 2017年的魔力象限看起来像这样： Gartner还没[详细]
-
BigData数据可视化软件及工具
所属栏目：[大数据] 日期：2020-12-24 热度：147
副标题#e# 摘要：大量繁杂的数据在经过可视化工具处理后，就能以图形化的形式展现在用户面前，清晰直观。随着各种数据的增加，这种可视化工具越来越得到开发者们的欢迎。本文向大家推荐30款数据可视化工具。 各个互联网公司通过大量的用户数据、信息进行统[详细]
-
ArcGIS Desktop 无法录入数据处理一例
所属栏目：[大数据] 日期：2020-12-24 热度：131
最近，搭建了一个DB2的测试环境，装完系统后，发现有一个美国带的样例数据无法导入，详细环境如下： 桌面:Desktop 10.3.1 DB2: V97 FP8 X64 For NT 从错误信息上得不到任何的提示，继续做测试 导入数据的时候出了空间字段，属性字段全部删除，可以导入进去[详细]
-
URAL - 1153 Supercomputer 大数开方
所属栏目：[大数据] 日期：2020-12-24 热度：192
??????? 题意：给定m，m = n * (n+1) / 2，计算n值。 ????? 思路：n = SQRT(m*2) ???? 注意m很大，需要自己实现大数开方。我用的是自己写的大数模板：大数模板 AC代码 #include cstdio#include cmath#include algorithm#include cstring#include utility#i[详细]
-
[bigdata-047] 禅道 ubuntu 配置开机自启动服务 开机启动
所属栏目：[大数据] 日期：2020-12-24 热度：73
1. 在/etc/init.d目录下创建chandao文件 内容如下： #!/bin/bash /opt/lampp/lampp restart 然后增加全选 chmod 755 chandao 2. 运行runleve命令，查看现在的run level是多少，通常是2 3. 既然是2,就在/etc/rc2.d目录下，创建一个链接 ln -s /etc/init.d/c[详细]
-
[bigdata-048] git使用 上
所属栏目：[大数据] 日期：2020-12-24 热度：118
0. 主要参考 http://www.liaoxuefeng.com 1. git是分布式版本管理器，每个人的电脑都是一个完整的版本库。你修改了文件A，你同事修改了文件A，你们可以将各自的修改推给对方，可以互相看到对方的修改。 2. 创建版本库repository ? 2.1 在一个合适的地方，[详细]
-
商业智能BI和报表的区别？
所属栏目：[大数据] 日期：2020-12-24 热度：57
报表是数据展示工具，商业智能BI是数据分析工具。 报表工具是一类报表制作工具和数据展示工具，用于制作各类数据报表、图形报表。或者制作特定格式的电子发票联、流程单、收据等等。 商业智能的重点在于商业数据的分析，集成了数据统计、数据展示、数据分[详细]
-
大数运算（大数加法and大数乘法）
所属栏目：[大数据] 日期：2020-12-24 热度：186
副标题#e# 大数模板 -- 万进制 为基础的 模板 #include algorithm#include stdlib.h#include cstring#include iostream#include stdio.h#define ll long long#define MAXN 10000#define DELD 4using namespace std;int a[MAXN];int b[MAXN];struct Bignum{[详细]
-
如何打造高性能大数据分析平台
所属栏目：[大数据] 日期：2020-12-24 热度：51
副标题#e# 原文：Building High Performance Big Data Analytics Systems 作者：Rohit Dhall 译者：袁璞，圣特尔?E店宝大数据架构师，关注高性能或可用架构、大数据技术、机器学习。 转自：CSDN 导读 大数据分析系统作为一个关键性的系统在各个公司迅速崛起[详细]
-
nyoj517 最小公倍数 （大数）
所属栏目：[大数据] 日期：2020-12-24 热度：55
描述 为什么1小时有60分钟，而不是100分钟呢？这是历史上的习惯导致。 但也并非纯粹的偶然：60是个优秀的数字，它的因子比较多。 事实上，它是1至6的每个数字的倍数。即1,2,3,4,5,6都是可以除尽60。 我们希望寻找到能除尽1至n的的每个数字的最小整数m. 输[详细]
-
撇开技术，初识实时数据处理
所属栏目：[大数据] 日期：2020-12-24 热度：91
hello！艾瑞巴蒂！ 今天俺给大家换换心情，撇开技术，聊聊实时数据处理的前世今生。 曾经有那么几年的光阴，整个业界（大数据）言必称Hadoop，撩个妹不懂点Hadoop都被人看不起。 当然，hadoop在海量数据处理上绝对是毫无争辩的霸主： 比如 百度用户短时间[详细]
-
BigData学习4_内部攻击实验数据集浅析
所属栏目：[大数据] 日期：2020-12-24 热度：126
杨光+吴钰 摘要：获取用户行为数据集是内部威胁研究的前提和基础，该文深度调研了当今公开的内部威胁实验数据集，通过分析KDD99、SEA、WUIL以及CERT-IT四种主流的数据集，提出上述数据集的优缺点，并指出未来数据集构建的研究方向。 关键词：内部威胁；网[详细]
-
数据处理的统计学习（scikit-learn教程）
所属栏目：[大数据] 日期：2020-12-24 热度：143
副标题#e# 数据挖掘入门与实战 ?公众号： datadw Scikit-learn 是一个紧密结合Python科学计算库(Numpy、Scipy、matplotlib)，集成经典机器学习算法的Python模块。 一、统计学习：scikit-learn中的设置与评估函数对象 （1）数据集 scikit-learn 从二维数组描[详细]
-
大数版的斐波那契数列
所属栏目：[大数据] 日期：2020-12-24 热度：176
光棍的yy http://acm.nyist.net/JudgeOnline/problem.php?pid=655 时间限制：1000?ms ?|? 内存限制：65535?KB 难度：2 输入 第一行输入一个n表示有n个测试数据 以下n行，每行输入m个1 (1 = n,m = 200) 输出 输出这种组合种数，占一行 样例输入 31111122222[详细]
-
A-B Problem 大数相等
所属栏目：[大数据] 日期：2020-12-24 热度：189
A-B Problem http://acm.nyist.net/JudgeOnline/problem.php?pid=524 时间限制：1000?ms ?|? 内存限制：65535?KB 难度：3 输入 有多组测试数据。每组数据包括两行，分别代表A和B。 它们的位数小于100，且每个数字前中可能包含+,- 号。 每个数字前面和后面[详细]
-
大数据时代必不可少的大数据分析和制作工具大全
所属栏目：[大数据] 日期：2020-12-24 热度：58
1.微信大数据分析工具 新媒体指数：http://www.gsdata.cn 2.数据可视化工具 百度ECharts：http://echarts.baidu.com/ Cytoscape：http://www.cytoscape.org/ 图表秀：http://www.tubiaoxiu.com/ 数据观：http://shujuguan.cn/ 微博足迹可视化：http://vis.[详细]
-
A+B Problem II 大数加法
所属栏目：[大数据] 日期：2020-12-24 热度：167
A+B Problem II http://acm.nyist.net/JudgeOnline/problem.php?pid=103 时间限制：3000?ms ?|? 内存限制：65535?KB 难度：3 输入 The first line of the input contains an integer T(1=T=20) which means the number of test cases. Then T lines follow[详细]
-
NBA篮球运动员大数据分析决策支持系统
所属栏目：[大数据] 日期：2020-12-24 热度：149
package com.dt.spark.sparksql import org.apache.hadoop.conf.Configuration import org.apache.hadoop.fs.{FileSystem,Path} import org.apache.spark.SparkConf import org.apache.spark.sql.SparkSession /** ? * NBA篮球运动员大数据分析决策支持系[详细]
