-
81个开源大数据处理工具汇总（下），包括日志收集系统/集群管理/
所属栏目：[大数据] 日期：2021-02-24 来源：DaWei
上一部分：http://my.oschina.net/u/2391658/blog/711016 第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大数据开源工具。 ? 日志收集系统 一、Facebook?Scribe 贡献者 ：Faceb[详细]
-
81个开源大数据处理工具汇总（上），包括查询引擎/流式计算/存储
所属栏目：[大数据] 日期：2021-02-24 来源：DaWei
本文一共分为上下两部分。我们将针对大数据开源工具不同的用处来进行分类，并且附上了官网和部分下载链接，希望能给做大数据的朋友做个参考。下面是第一部分。 查询引擎 一、Phoenix 贡献者：：Salesforce 简介：这是一个Java中间层，可以让开发者在Apache H[详细]
-
文本挖掘的基本流程
所属栏目：[大数据] 日期：2021-02-24 来源：DaWei
一、获取文本 ??我们获取网络文本，主要是获取网页HTML的形式。我们要把网络中的文本获取文本数据库(数据集)。编写爬虫（Spider）程序,抓取到网络中的信息。可以用广度优先和深度优先；根据用户的需求，爬虫可以有垂直爬虫和通用爬虫之分，垂直爬取主要是在[详细]
-
Mondrian 4 测试的简单demo（Saiku简单测试Schema文件）
所属栏目：[大数据] 日期：2021-02-24 来源：DaWei
##?整理此文章方便大家做测试（手写Mondrian?Schema自测），不必每次都向saiku上传文件了 ##?关键文件 *?foodmart4.xml??测试对应的schema文件 *?foodmart-sql.zip????测试对应的数据库脚本 maven项目： pom文件 project?xmlns=" http://maven.apache.org/PO[详细]
-
EMC存储上的大数据 – 大数据分析实施路线
所属栏目：[大数据] 日期：2021-02-24 来源：DaWei
? ? ?企业一直在处理快速增长的数据量（也称为大数据）的存储和管理问题。本文为系列的第十篇，介绍了发现适当的大数据业务机会并制定利用该机会的全面路线图。 ? ???? 大数据时代，各公司都在努力挖掘有关他们业务的令人信服的见解，以赢得竞争优势。他们在[详细]
-
O2O产品质量保障体系（四）| 基于学习的线下商户质量挖掘
所属栏目：[大数据] 日期：2021-02-24 来源：DaWei
一、 线下商户问题迫在眉睫 糯米不仅仅是团购，它是O2O的生活服务平台，糯米的产品质量可以定义为线上和线下，线上主要是在线商品的售卖情况，所对应的质量问题也就是商品类的badcase，这些会直接影响我们的流水。而线下主要是商家服务的接待质量，会直接影[详细]
-
LightOJ 1045 Digits of Factorial（大数进制）
所属栏目：[大数据] 日期：2021-01-28 来源：DaWei
http://lightoj.com/volume_showproblem.php?problem=1045 1045 - Digits of Factorial ??? PDF (English) Statistics Forum Time Limit:? 2 second(s) Memory Limit:? 32 MB Factorial of an integer is defined by the following function f(0) = 1 f(n) =[详细]
-
为什么进入大数据领域这么难
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
title: 为什么进入大数据领域这么难 summary: 说起热门技术没有什么比得上大数据领域,可为什么这么多人天天谈大数据,大部分人还是只能浮于表面?想要进入大数据领域,认真地做份工作为什么这么难? tags: - BI - ETL - DW - 大数据 … 想做大数据为什么这么难?[详细]
-
消除数据障碍 云BI给企业定心丸
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
想让已经实现一般数据驱动功能的企业成为把数据分析作为产品服务核心部分的企业，最好的方式是什么呢？对于公司来说，第一步是减少对内部 IT 服务的依赖。 ? “商业智能是一个非常复杂的领域。从传统来看，业务群体中的每个人都被商业智能吓怕了，非常希望跳[详细]
-
HDU 1592 Half of and a Half（高精度）
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
Half of and a Half Time Limit: 1000/1000 MS (Java/Others)????Memory Limit: 32768/32768 K (Java/Others) Total Submission(s): 1139????Accepted Submission(s): 513 Problem Description Gardon bought many many chocolates from the A Chocolate Mar[详细]
-
大数运算——加法减法
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
http://www.cnblogs.com/leader/archive/2013/01/28/2880643.html 第一篇博文有点小鸡冻。在哈工程寒假集训中第一次模拟中唯一一道对我有价值的题就是大数加法，随后的几次模拟中大数运算不断，可见这是我们必须掌握的技能，本人智商较低，先讲解下大数加法[详细]
-
实时大数据处理Storm（一）
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
自从Google发表了3篇举世瞩目的论文（Google File System、BigTable和MapReduce）以后，大数据被引爆了。如果说计算机的威力相当于一枚大炮的威力的话，那么互联网的威力相当于一颗原子弹，而大数据的威力则相当于氢弹，大数据成为了IT发展史上的又一次浪潮[详细]
-
ZZNU 1988 （大数取余）
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
1988: Sn 时间限制: 1 Sec?? 内存限制: 128 MB 提交: 19?? 解决: 8 [提交][状态] 题目描述 给你两个数 n,p(0 n,p = 10^15); a1 = 1;? a2 = 1+2;? a3 = 1+2+3;? ... an = 1+2+3+...+n? Sn = a1+a2+a3+...+an; 求(6*Sn) % p; 输入 ?输入一个数 T表示有T组实例;[详细]
-
HDU 5351 MZL#39;s Border（大数 + 找规律）——2015 Multi-Uni
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
传送门 MZL’s Border Time Limit: 2000/1000 MS (Java/Others)????Memory Limit: 65536/65536 K (Java/Others) Total Submission(s): 1374????Accepted Submission(s): 452 Problem Description As is known to all,MZL is an extraordinarily lovely girl.[详细]
-
哈佛商评 ：使用大数据为消费者创造价值
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
大数据为市场提供大的保证。显而易见，大数据自推出以来就回答以下两个阻碍市场发展的最烦人的问题： 1）谁买，买什么，什么时候买，什么价位买？2）是否能将消费者所听，所知，所看的东西和他们所购买和所消费的东西联系起来？ 通过提高目标市场和鉴别、排[详细]
-
大数据分析平台架构(Big Data Analytics Platform)
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
一、数据分析平台层次解析 ? 大数据分析处理架构图 数据源： ?除该种方法之外，还可以分为离线数据、近似实时数据和实时数据。按照图中的分类其实就是说明了数据存储的结构，而特别要说的是流数据，它的核心就是数据的连续性和快速分析性； 计算层： ?内存计[详细]
-
开源大数据查询分析引擎现状
所属栏目：[大数据] 日期：2021-01-26 来源：DaWei
文|叶蓬 【按：此文是与我的《基于大数据分析的安全管理平台技术研究及应用》同期发表在内刊上的我的同事们的作品，转载于此。这些基础性的研究和测试对比分析，对于我们的BDSA技术路线选定大有帮助。】 引言 大数据查询分析是云计算中核心问题之一，自从Goo[详细]
-
hdu5834 Magic boy Bi Luo with his excited tree（树形dp）
所属栏目：[大数据] 日期：2021-01-25 来源：DaWei
Magic boy Bi Luo with his excited tree Time Limit: 8000/4000 MS (Java/Others)????Memory Limit: 131072/131072 K (Java/Others) Total Submission(s): 723????Accepted Submission(s): 192 Problem Description ? Bi Luo is a magic boy,he also has a[详细]
-
HDU 1042 N！ N的阶乘（大数）
所属栏目：[大数据] 日期：2021-01-25 来源：DaWei
N! Time Limit: 10000/5000 MS (Java/Others)????Memory Limit: 262144/262144 K (Java/Others) Total Submission(s): 75303????Accepted Submission(s): 21981 Problem Description Given an integer N(0 ≤ N ≤ 10000),your task is to calculate N! ? In[详细]
-
机器学习物语(2)：大数定理军团
所属栏目：[大数据] 日期：2021-01-25 来源：DaWei
机器学习理论帝国崛起，大数定理军团功不可没，称之为军团毫不夸张，在前军先锋强大数定理和副将弱大数定理后面，是铠甲上刻着“Concentration of Measure”的古老印记的战士们，不妨暂且忽略他们之间乱七八糟的“血缘”关系，而罗列一些名字：Chebyshev 不[详细]
-
大数取模 HDU 5832
所属栏目：[大数据] 日期：2021-01-24 来源：DaWei
int mod(char str[],int num) { int remainder=0; int len = strlen(str); for(int i=0;ilen;i++) { remainder=(remainder*10+(str[i] - '0'))%num; } return remainder;} HDU 5832 题目链接：http://acm.hdu.edu.cn/showproblem.php?pid=5832 题意：能被73[详细]
-
原来地铁都用这个挖！盾构机，简直是挖掘神器！
所属栏目：[大数据] 日期：2021-01-24 来源：DaWei
（点击 上方公号 ，可快速关注） 转自：cax360 演示视频 ↓↓↓ 盾构隧道掘进机 ，简称盾构机。是一种隧道掘进的专用工程机械，现代盾构掘进机集光、机、电、液、传感、信息技术于一体，具有开挖切削土体、输送土碴、拼装隧道衬砌、测量导向纠偏等功能。盾构[详细]
-
【HDOJ 5834】Magic boy Bi Luo with his excited tree（树型DP
所属栏目：[大数据] 日期：2021-01-24 来源：DaWei
【HDOJ 5834】Magic boy Bi Luo with his excited tree（树型DP） Magic boy Bi Luo with his excited tree Time Limit: 8000/4000 MS (Java/Others)????Memory Limit: 131072/131072 K (Java/Others) Problem Description Bi Luo is a magic boy,he also ha[详细]
-
全自动挖洞？正确姿势看首届「CGC人机漏洞挖掘对战赛」
所属栏目：[大数据] 日期：2021-01-24 来源：DaWei
*本文原创作者：Arthur Sphinx，转载许可请联系editor@tophant.com 随着人工智能技术的进步，各种棋类高手一一被电脑斩落马下，围棋是人类硕果仅存的骄傲，但在 2016年3月 的世纪之战中，谷歌旗下的AlphaGo电脑却成功击败韩国九段棋手李世石，而这也被认为是[详细]
-
多数组k大数 -- 二分思路
所属栏目：[大数据] 日期：2021-01-24 来源：DaWei
多数组k大数 给定两个有序数组arr1和arr2，在给定一个整数k，返回两个数组的所有数中第K小的数。 例如： arr1 = {1,2,3,4,5}; arr2 = {3,5}; K = 1; 因为1为所有数中最小的，所以返回1； arr1 = {1,3}; arr2 = {3,5,6}; K = 4; 因为3为所有数中第4小的数，所[详细]
