阿里云LogHub与Kyligence Cloud深度整合，打造云上大数据分析全流程服务

时间：10-28 神话故事提交错误

大家好，今天给各位分享阿里云LogHub与Kyligence Cloud深度整合，打造云上大数据分析全流程服务的一些知识，其中也会对进行解释，文章篇幅可能偏长，如果能碰巧解决你现在面临的问题，别忘了关注本站，现在就马上开始吧！

大数据时代，越来越多的企业开始寻求实时数据分析的交互解决方案，涉及新软件的引入、数据流的完善等场景。基于上述场景，Kyligence Cloud 实现了与阿里云Loghub 的无缝对接，有效整合实时数据和历史数据，为云上准实时大数据分析提供一站式解决方案。

关于日志中心

LogHub是阿里云日志服务旗下的实时数据采集和消费服务。通过ECS、容器、移动终端、开源软件、JS等方式接入实时日志数据（如Metric、Event、BinLog、TextLog、Click等），并提供实时消费接口与真实的对接-时间计算和服务。此外，还提供数据清洗（ETL）、流计算（Stream Compute）、监控报警、机器学习、迭代计算等功能。与同类型的Apache Kafka相比，LogHub具有使用成本低、稳定性高、安全性强等优点。已广泛应用于阿里巴巴集团及众多客户的大数据场景。

关于Kyligence 云

Kyligence Cloud 是Kyligence 基于云的大数据分析服务。以Apache Kylin企业版（Kyligence Enterprise）为核心，为大数据分析平滑迁移到云端提供托管解决方案。使用Kyligence Cloud，您可以在公有云上快速建立大数据分析集群，实现海量数据的交互式OLAP 分析和高并发查询应用。

目前，Kyligence Cloud 支持在阿里云平台上自动部署大数据分析集群，并已实现与LogHub 的无缝集成。在全图形化界面下，您可以快速完成数据源绑定、事实表解析、数据采集、数据建模等步骤，实现LogHub日志流数据的近实时处理。

现在您只需4步即可轻松在云端实现准实时大数据分析！

前期准备：

申请Kyligence Cloud试用并选择阿里云平台一键申请

使用Kyligence Cloud 在阿里云上成功部署大数据分析集群。详细步骤请参考：Kyligence Cloud 用户手册

配置与LogHub数据源对接并进行后续建模分析

绑定数据源

集群部署成功后，点击Kyligence Cloud左侧导航栏的数据源，选择LogHub。填写相关参数后，单击“测试连接”。成功后即可完成数据源连接。

选择LogHub数据源事实表解析

连接到LogHub数据源后，您就可以开始构建LogHub的表结构了。大多数LogHub日志服务都以CSV格式记录。建表结构时，CSV格式的流数据没有对应的列名和列类型。在Kyligence Cloud 中构建LogHub 表结构时，呈现在熟悉的表结构页面上。用户只需在每行、列值前添加相应的列名并选择列值类型即可完成LogHub日志流作为事实表的定义。

Kyligence Cloud 解析LogHub 表结构

建模分析

Kyligence Cloud 大数据分析引擎以Apache Kylin 企业版为核心，基于成熟的OLAP 建模理论，结合创新的自动建模技术，实现海量数据分析和高并发分析应用的高效查询加速。您可以手动基于数据进行多维度建模，也可以让系统基于业务查询SQL自动建模，高效实现大数据分析应用。

Kyligence Enterprise 多维模型截图

点击查看完整视频

总结：