大数据知识_大数据学习笔记

gitee 案例代码： https://gitee.com/xionggd/aiot-learning.git 场景： java调用sqoop 工具版本： hadoop3.0.0 + sqoop1.4.....

1、问题简述 使用es做分页检索，但在使用过程中发现，当es检索的数据偏移量达到1万条后，无数据返回，查看后台日志捕获到“a....

1. 简述Map包含哪些步骤？ 参考答案：（1）读取输入文件内容，解析成key、value对。对输入文件的每一行，解析成key、value....

短视频和电商如火如荼，各大电商渠道和短视频厂商对“短视频电商”的发展方式充满期待。淘宝高管曾表示，未来90%甚至更多的....

目录 建表内部表，外部表删除表的区别利用location改变表的存储位置truncate 清空表数据的情况加载数据的四种方式hadoop dfs....

一、MapReduce思想 MapReduce的思想核心是分而治之，适用于大量复杂的任务处理场景（大规模数据处理场景）。即使是发布过论....

SQL语言共分为四大类： 数据查询语言DQL数据操纵语言DML数据定义语言DDL数据控制语言DCL 一、DML 修改表： SELECt * ....

一、安装部署Hive 1.2 安装Hive 把 apache-hive-3.1.2-bin.tar.gz 上传到 linux 的 /opt/software 目录下 将 /opt/software/....

对于跨境电商来说，运营单店铺的卖家还是少数的，对于多账号运营是有一定风险的，防关联浏览器是如何解决这些风险的呢？ 一....

消息的确认，是指生产者投递消息后，如果 Broker(消息实体) 收到消息，则会给我们生产者一个应答。生产者进行接收应答，用来....

set hive.exec.dynamici.partition=true; set hive.exec.dynamic.partition.mode=nonstrict;  set mapreduce.map.java.opts....

先看问题 ssh-keygen -t rsassh-copy-id 主机名/usr/bin/ssh-copy-id: ERROR: No identities found 正常生成 rsa 与 rsa.pub....

企鲸客scrm销售管理功能 1活动管理 (1)通过企鲸客SCRM的强大活动管理功能，主动推送营销互动场景品牌方可节省大量获客成本和....

Ambari2.7.3 + HDP3.1.0 集群搭建 Ambari2.7.3 + HDP3.1.0 集群搭建 Ambari-2.7.5整合HDP-3.1.5集群完整安装记录 Ambari-2.7....

执法车的高清视频监控配置主要为执法车的日常巡逻、突发性事件或其它特殊情况的现场处理和控制，提供取证视频、回传和监控，....

2021年12月8-9日，由中国电子技术标准化研究院、苏州市金融科技协会、中国计算机用户协会政务信息化分会指导，企智未来科技....

这是白话区块链的第1493期原创 作者 | 梁文辉出品｜白话区块链（ID：hellobtc） 在区块链和加密货币的监管领域，各国监管部....

spark 广播类报java.lang.StackOverflowError 背景：需要广播一个167M的tree类，所以报栈内存不够 解决办法：在spark-submit....

8.用数据进行数据预处理 8.1数据清洗 在数据分析前，首先要进行数据采集。通常，采集到的原始数据大多数是不完整和不一....