微信搜索bigdata029 | 邀请体验：数阅–数据管理、OLAP分析与可视化平台 | 订阅本站 | 赞助作者：赞助作者

热门排行

Hive

几个连接HiveServer的客户端界面工具

几个连接HiveServer的客户端界面工具
Hive的官网上介绍了三个可以在Windows中通过JDBC连接HiveServer2的图形界面工具，包括：SQuirrel SQL Client、Oracle SQL Developer以及DbVisualizer。之前有文章《http://lxw1234.com/archiv...

1年前 (2016-09-28) 13411℃ 8喜欢

HBase

HBase原理和设计

HBase原理和设计
一篇不错的介绍HBase基本原理的文章，转载自：http://www.sysdb.cn/index.php/2016/01/10/hbase_principle/ ，感谢原作者。   简介 HBase —— Hadoop Database的简称，Google BigT...

1年前 (2016-09-19) 4406℃ 21喜欢

大数据平台

AdMaster 如何驾驭百亿级Key实时Redis 集群

AdMaster 如何驾驭百亿级Key实时Redis 集群
注：本文转载自公众号AdMaster   作为技术驱动的营销数据公司，AdMaster每天处理超过100亿的数据请求，每天对1000亿数据进行上千种维度计算，每天增加超过5T数据量，为来自各行业的客户提供7*24小时数据应用服务。在这样领先的技术布局下，无论是数据实时...

1年前 (2016-09-06) 2350℃ 5喜欢

Kylin

Apache Kylin中对上亿字符串的精确Count_Distinct示例

Apache Kylin中对上亿字符串的精确Count_Distinct示例
上篇文章《在Apache Kylin中使用Count Distinct》中介绍了Apache Kylin中Count Distinct的实现，如果业务中能接受1.22%的误差，那么肯定首选近似算法，因为它能节省很多资源和时间。如果业务中必须使用精确去重，那么就看看本文的例子（针对...

1年前 (2016-08-26) 4735℃ 17喜欢

Kylin

在Apache Kylin中使用Count Distinct

在Apache Kylin中使用Count Distinct
在OLAP多维分析中，Count Distinct（去重计数）是一种非常常用的指标度量，比如一段时间内的UV、活跃用户数等等; 从1.5.3开始，Apache Kylin提供了两种Count Distinct计算方式，一种是近似的，一种是精确的，精确的Count Distinct...

1年前 (2016-08-25) 3612℃ 7喜欢

Kylin

Apache Kylin使用手册和管理手册中文版

Apache Kylin使用手册和管理手册中文版
Apache Kylin使用手册和管理手册中文版，很实用。 使用手册： 链接: http://pan.baidu.com/s/1nuLz3Bz 密码: b93d 管理手册： 链接: http://pan.baidu.com/s/1skX26L3 密码: s2s4 如果觉得本博...

1年前 (2016-08-23) 4466℃ 18喜欢

Hive

Java写本地ORC文件(Hive2 API)

Java写本地ORC文件(Hive2 API)
Hive2.0以后，使用了新的API来读写ORC文件（https://orc.apache.org）。 本文中的代码，在本地使用Java程序生成ORC文件，然后加载到Hive表。 代码如下： package com.lxw1234.hive.orc; import org....

1年前 (2016-07-25) 3951℃ 5喜欢

大数据平台

大数据环境下互联网行业数据仓库/数据平台的架构之漫谈-续

大数据环境下互联网行业数据仓库/数据平台的架构之漫谈-续
关键字：互联网、大数据、数据仓库、数据平台、架构 导读： 整体架构 数据采集 离线计算 实时计算 多维分析OLAP 机器学习 Ad-Hoc查询 数据可视化 上次写的《大数据环境下互联网行业数据仓库/数据平台的架构之漫谈》一文，已是一年前的事了，经过一年的沉淀与公司业务的发展，...

1年前 (2016-07-21) 7585℃ 23喜欢

大数据平台

一站式用户自助数据接入与分析平台

一站式用户自助数据接入与分析平台
一站式用户自助数据接入与分析平台，也可以当做一个提供大数据分析服务的云平台，用户可以基于平台数据仓库中已有的事实表和维度表（有访问权限），自助建立分析模型，进行OLAP分析与可视化；也可以将自己的数据接入到平台，在已接入的数据上自助建立分析模型，进行OLAP分析与可视化。对于前者...

1年前 (2016-07-13) 5445℃ 8喜欢

Hadoop

Yarn公平调度器Fair Scheduler根据用户组分配资源池

Yarn公平调度器Fair Scheduler根据用户组分配资源池
之前有文章《Hadoop多用户资源管理–Fair Scheduler介绍与配置》介绍过在Yarn中使用Fair Scheduler根据用户名为多用户管理分配资源。文本在其基础之上，介绍根据用户组管理分配资源池的配置。 假设在生产环境Yarn中，总共有四类用户需要使用集群，开发用户...

1年前 (2016-06-23) 4071℃ 6喜欢

Kylin

开源数据可视化工具（For Apache Kylin）使用说明

开源数据可视化工具（For Apache Kylin）使用说明
Apache Kylin，很好的解决了海量数据OLAP的底层存储与分析引擎，但还缺一个数据可视化工具，可以使用户非常方便的通过图形化分析探索海量数据，而不用写SQL。于是我们发现了Caravel。 原生的Caravel并不支持Kylin，也不支持多表关联，经过好友Rocky和我的...

1年前 (2016-06-20) 25870℃ 35喜欢

Kylin

开源OLAP+数据可视化工具–For Apache Kylin

开源OLAP+数据可视化工具–For Apache Kylin
关键字：caravel、olap、kylin、数据可视化 经过我和好友Rocky一段时间的修改和调试，现已将初版的Caravel For Kylin上传至Github，供大家使用，如有发现任何的问题，可通过本博客或github联系我们。 GitHub地址： https://git...

1年前 (2016-06-13) 9009℃ 8喜欢

Kylin

Apache Kylin中使用Streaming Table构建准实时Cube

Apache Kylin中使用Streaming Table构建准实时Cube
关键字：kylin、streaming table Kylin从1.5版本开始，引入了Streaming Table，目的是为了减低OLAP分析的延时（比如Druid、ElasticSearch都支持实时数据流）。 Streaming Table周期性的从Kafka中读取数据，根...

1年前 (2016-06-13) 6014℃ 8喜欢