概述

• XL-LightHouse是针对互联网领域繁杂的流式数据统计需求而开发的一套集成了数据写入、数据运算、数据存储和数据可视化等一系列功能，支持大数据量，支持高并发的【通用型流式大数据统计平台】。
• XL-LightHouse目前已基本涵盖了常见的流式数据统计场景，包括count、sum、max、min、avg、bitcount(distinct)、topN/lastN等多种运算，支持多维度计算，支持分钟级、小时级、天级多个时间粒度的统计，支持自定义统计周期的配置。
• XL-LightHouse内置丰富的转化类函数、支持表达式解析，可以满足各种复杂的条件筛选和逻辑判断。
• XL-LightHouse是一套功能完备的流式大数据统计领域的数据治理解决方案，它提供了比较友好和完善的可视化查询功能，并对外提供API查询接口，此外还包括数据指标管理、权限管理、统计限流等多种功能。
• XL-LightHouse支持时序性数据的存储和查询。

背景

以互联网行业来说，在移动互联网发展比较成熟的现在，流量见顶，红利消失，企业竞争日趋惨烈，获取新增用户的成本日益增高。很多企业开始意识到不能一味的通过补贴、价格战、广告投放这种简单粗暴的方式抢占市场，这样的运作模式很难长时间维系。而通过精细化和数据化运营来降低成本、提升效率、最大化单用户价值的理念逐渐被越来越多的企业所接受。精细化和数据化运营的前提是要建立起一套完善的数据指标体系，借助这个数据指标体系企业可以有多方面的用途:

• 1、排查问题：数据化运营是让企业业务进入到一种"可控"的状态，帮助企业在业务运转不正常的时候，能够快速的判断出问题所在。
• 2、业务洞察：数据化运营是让业务运转的各个环节更加透明，帮助企业更清晰的看到目前的"短板"是在什么地方，辅助产品的优化迭代。
• 3、明确方向：数据化运营是培养敏锐的嗅觉，让企业可以更加准确的判断出市场的走势、捕捉到其中具有业务价值的信息。
• 4、科学试错：在试错成本日益高企的今天，数据化运营是帮助企业改变以往靠"拍脑袋"来做决定的方式，打破过往的经验主义，辅助决策者思考，快速验证想法，让企业减少成本更加科学的"试错"。 随着企业对数据化运营重视程度的日益增加，必然会衍生出大量的数据统计需求。而XL-LightHouse是以流式大数据统计为切入点，推动流式统计在诸多行业内的快速普及和大规模应用，定位是以一套服务使用较少的服务器资源同时支撑数以万计、数十万计的流式数据统计需求的大数据平台，致力于应对这种呈现"井喷"态势的流式数据统计需求所带来的一系列问题，寄希望于通过更加贴合场景、更具有实用价值的技术方案帮助企业降低数据化运营方面的成本。

收益

XL-LightHouse可以帮助企业更快速的搭建起一套较为完善的、稳定可靠的数据化运营体系，节省企业在数据化运营方面的投入，主要体现在以下几个方面：

• 减少企业在流式大数据统计方面的研发成本和数据维护成本。
• 帮助企业节省时间成本，辅助互联网产品的快速迭代。
• 为企业节省较为可观的服务器运算资源。
• 便于数据在企业内部的共享和互通。 此外，XL-LightHouse对中小企业友好，它大大降低了中小企业使用流式大数据统计的技术门槛，通过简单的页面配置和数据接入即可应对繁杂的流式数据统计需求。

版权声明

为保障创作者的合法权益以及支持XL-LightHouse项目的发展，本项目在Apache2.0开源协议的基础上，增加如下补充条款，如果以下条款与Apache2.0协议内容有所冲突，以该补充条款为准。

• 1、企业或机构内部使用XL-LightHouse源程序以及XL-Formula标准不受任何限制，但不可删除源程序中的版权声明、原作者邮箱以及项目网址等信息。
• 2、企业、机构或个人如有以下行为需要得到本人许可并支付一定比例的授权费用。

a、销售直接或间接包含XL-LightHouse源程序（超过1000行源码）的软硬件产品或服务。

b、销售直接或间接借鉴XL-LightHouse系统设计方法的软硬件产品或服务。

c、销售直接或间接包含XL-Formula设计标准（包括在此基础上修改演变而来的标准）的软硬件产品或服务。

d、销售直接或间接依赖XL-LightHouse或XL-Formula相关的数据指标可视化产品或服务，包括但不限于插件、终端等任何形式的产品或服务。 如上所述的“服务”指为购买者提供统计数据类服务或提供相应产品的技术支持维护服务，为避免不必要的版权纠纷， 在销售相关产品或服务前请务必查阅【版权声明】，本协议最终解释权归原作者所有。

相关文档

1、Git地址

• https://github.com/xl-xueling/xl-lighthouse.git
• https://gitee.com/xl-xueling/xl-lighthouse.git

2、交流社区

• DTStep

3、项目设计

• dtstep.com/archives/4227.html

4、一键部署

• dtstep.com/archives/4257.html

5、XL-Formula使用

• dtstep.com/archives/4215.html

6、Web服务操作说明

• dtstep.com/archives/4233.html

7、Hello World

• dtstep.com/archives/4301.html

8、适用场景

• 资讯类场景使用演示 dtstep.com/archives/4262.html
• 电商类场景使用演示 dtstep.com/archives/4286.html
• 即时通讯类场景使用演示 dtstep.com/archives/4291.html
• 技术类场景使用演示 dtstep.com/archives/4298.html

9、版权声明

• dtstep.com/archives/4206.html

10、使用反馈

• dtstep.com/community/ldp-issue

11、依赖组件

• dtstep.com/archives/4445.html