大数据共44篇
数据库相关技术
开源BI-JoyCode 编程小战

开源BI

Apache Superset https://superset.apache.org/
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走3个月前
00
阿里云Redis使用Redisson锁的问题-JoyCode 编程小战

阿里云Redis使用Redisson锁的问题

阿里云官方文档: 集群架构与读写分离架构实例的命令限制 参考: 阿里云Redis代理模式对于Redisson锁的限制 first parameter of redis.call/redis.pcall must be a single literal string
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走3个月前
00
MySQL开启SSL连接-JoyCode 编程小战

MySQL开启SSL连接

参考: Mysql5.7开启SSL并且支持Springboot客户端验证
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走5个月前
00
RocksDB-JoyCode 编程小战

RocksDB

官网: https://rocksdb.org/ 参考: RocksDB实战:概念介绍、安装部署、Java API读写示例
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
doris基本sql命令示例-JoyCode 编程小战

doris基本sql命令示例

建表: CREATE TABLE IF NOT EXISTS test.table0 ( `user_id` LARGEINT NOT NULL COMMENT '用户id', `date` DATE NOT NULL COMMENT '数据灌入日期时间', `timestamp` DATETIME NOT NULL COMMENT ...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
10
doris安装-JoyCode 编程小战

doris安装

配置环境变量: vi ~/.bashrc 加入以下配置: export DORIS_HOME=/data/bigdata/doris/doris-2.0.2 export PATH=$PATH:$DORIS_HOME/fe/bin:$DORIS_HOME/be/bin 修改配置: vi $DORIS_HOME/fe/co...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
10
IoTDB安装及基本使用-JoyCode 编程小战

IoTDB安装及基本使用

官网: https://iotdb.apache.org/ 下载IotDB: wget https://www.apache.org/dyn/closer.cgi/iotdb/1.2.2/apache-iotdb-1.2.2-all-bin.zip 解压: unzip apache-iotdb-1.2.2-all-bin.zip 更名:...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
flink环境部署-JoyCode 编程小战

flink环境部署

首先安装好Hadoop环境配置环境变量:vi ~/.bashrc关键配置如下:export HADOOP_CONF_DIR=/data/bigdata/hadoop/hadoop-3.3.6/conf export FLINK_HOME=/data/bigdata/flink/flink-1.17.2 export ...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
MySQL 8 MRG集群-JoyCode 编程小战

MySQL 8 MRG集群

参考: mysql8 MGR集群安装,组复制,单主模式,多主模式
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
MySQL 8.0.34对其自带身份验证标记弃用-JoyCode 编程小战

MySQL 8.0.34对其自带身份验证标记弃用

如题,如果你的MySQL的用户还在使用mysql_native_password(密码插件)的认证方式,那么在MySQL更新到8.0.34后,每次数据库用户以mysql_native_password方式访问MySQL,日志就会输出mysql_nativ...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
MySQL 8压缩包形式安装-JoyCode 编程小战

MySQL 8压缩包形式安装

初始化: ./mysqld --user=mysql --basedir=/data/bigdata/mysql/mysql-8.0.35 --datadir=/data/bigdata/mysql/data --lower-case-table-names=1 --initialize 命令行连接: mysql -uroot -p'X;...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
hive-jdbc的jar包问题-JoyCode 编程小战

hive-jdbc的jar包问题

通过maven排除: <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc</artifactId> <version>3.1.3</version> <exclusions> <exclusion> <...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
hadoop应用slf4j日志冲突问题-JoyCode 编程小战

hadoop应用slf4j日志冲突问题

把reload4j的slf4j绑定jar包改名: cd $HADOOP_HOME/share/hadoop/common/lib mv slf4j-reload4j-1.7.36.jar slf4j-reload4j-1.7.36.jar.bak
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
10
hadoop运行报找不到类的问题-JoyCode 编程小战

hadoop运行报找不到类的问题

参考: hive 报 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
10
hadoop常用hdfs shell命令-JoyCode 编程小战

hadoop常用hdfs shell命令

列出目录: hadoop fs -ls / 创建目录: hadoop fs -mkdir /joycode 上传文件并移动: hadoop fs -moveFormLocal ./file1.txt /joycode 上传文件并拷贝: hadoop fs -copyFromLocal file2.txt /...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
docker部署hbase-JoyCode 编程小战

docker部署hbase

参考: docker安装hbase加挂载和文件映射 docker安装hbase集群 docker部署hbase Docker容器中运行HBase数据库
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走7个月前
00
Apache Hive安装-JoyCode 编程小战

Apache Hive安装

官网:https://hive.apache.org/ 下载安装包: wget https://dlcdn.apache.org/hive/hive-3.1.3/apache-hive-3.1.3-bin.tar.gz 配置环境变量: vi ~/.bashrc 配置hive-site.xml: <?xml versi...
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走8个月前
10
流处理-JoyCode 编程小战

流处理

参考: 数据架构的未来——浅谈流处理架构
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走1年前
00
MySQL图形化监控-JoyCode 编程小战

MySQL图形化监控

参考: 开源MySQL_Monito 图形可视化监控工具
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走1年前
00
开源集算器SPL-JoyCode 编程小战

开源集算器SPL

数速官网:http://www.scudata.com.cn/ GitHub: https://github.com/SPLWare/esProc
螃蟹横着走的头像-JoyCode 编程小战螃蟹横着走1年前
10