前言大数据平台业务流程
1.数据仓库2.数据抽取(ETL/DataStream)3.数据展示
前言随着网络的不断发展,信息化对于企业尤为重要。数据在网络中乃是重中之重。
大数据平台业务流程 1.数据仓库
- 建立数据仓库优秀软件大数据数据库:Cassandra、Hbase、MongoDB、Hive、ClickHouse等
将数据从各式各样的数据来源中抽取到数据仓库
非结构化方式:Excel、Data、CSV等RMDBS数据库:MySQL、postgreSQL、Oracle、人大金仓、IoTDB等列式存储数据库:Cassandra、ClickHouse、Hbase等
数据清洗,空数据、非法数据等
数据处理,加密、脱敏、计算、拆分、合并等
数据入库
将数据仓库中的数据 通过BI、智慧屏、WEB大屏、硬件大屏等进行展现。



