- 产品使用示例 星小环 官方人员 发表时间:2022-06-29 18:17:00 最新回复:2022-12-30 19:34:11
【教学视频】如何安装TDH社区版 精华 置顶
感谢大家对星环科技社区版的支持,为了便于用户的上手使用,我们录制了一个安装教程,包含如何配置集群域名、格式化docker盘、挂载分区的操作,以及如何安装manager,安装组件服务。 点击下方视频链接即可查看: https://transwarp-ce-1253207870.cos.ap-shanghai.myqcloud.com/%e7%a4%be..
866
1
- TDH社区版 星小环 官方人员 发表时间:2022-10-25 16:54:04
社区版相关资源指路 精华 置顶
社区版tdh常见的故障/问题排查攻略:https://community.transwarp.cn/thread?topicid=248 社区版tdh相关的产品包&驱动包获取:https://www.transwarp.cn/product/tdh-community-edition 相关教程 社区版tdh安装视频教程: ..
471
0
- TDH社区版 星小环 官方人员 发表时间:2022-10-25 17:04:44 最新回复:2022-10-25 17:31:34
常见错误排查攻略以及使用问题(问题持续更新中,最近更新时间为2023.1.31) 精华 置顶

385
2
- 知识分享 星小环 官方人员 发表时间:2023-01-12 14:39:45
Inceptor 数据导入导出之Insert overwrite
面对一些重要数据,很多场景下都需要将数据仓库进行复制,这可以是整个数据库的更广泛级别,也可以是较小的级别,例如表或分区。本案例将演示使用insert overwrite dirctory 然后sql 建外表的方式导入导出。 inceptor 数据导入导出方法大致分为以下几种: 1. export/import 2. insert overwr..
47
0
- 知识分享 星小环 官方人员 发表时间:2022-12-27 17:03:27
Inceptor对PL/SQL中分号的支持
inceptor中默认对pl/sql语句块的分号是不支持的,也就是说在inceptor的默认配置中会识别分号为sql语句块结束的符号,但是在beeline中默认的并不是以分号结束,所以当使用beeline命令进行编译存储过程时就会报错。我们可以通过命令语句手动打开支持。使用命令的时候,我们需要在pl/sql文件的头部和尾部各加一条命令,具体如下: 1. ..
22
0
- 知识分享 星小环 官方人员 发表时间:2022-12-27 16:47:41
beeline的常用操作命令
beeline cli支持以下命令行参数: -u <database_url> #要连接的jdbc url。如果需要,参数值中的特殊字符应使用url编码。 (例)beeline -u db_url -n <username> #连接的用户名 (例)beeline -n [valid_user] -p &l..
74
0
- 知识分享 星小环 官方人员 发表时间:2022-12-27 15:04:11
Docker 常用命令
docker 常用命令 1.容器使用 $ docker run -it ubuntu /bin/bash ● -i: 交互式操作 ● -t: 终端 ● ubuntu: 镜像名 ● /bin/bash: 启动 shell 交互式命令 其他参数: ● -d: 后台运行 # 查看正在运行的容器列表..
53
0
- 知识分享 星小环 官方人员 发表时间:2022-12-12 17:23:54 最新回复:2022-12-12 20:38:56
Compact那些事
1.背景 1.1 compact 是什么 用户在频繁的进行小数据量写入操作的时候,会产生大量的小文件(base/delta),并且内容很少(kb级别)。系统在必要的时候会将这些小的storefile合并成相对较大的storefile,这个过程就称之为compaction。 小文件过多可能导致io开销大,影响性能或者内存占用高,namenode崩溃..
77
1
- 知识分享 星小环 官方人员 发表时间:2022-11-26 18:52:43
linux操作系统下怎么关闭icmp,Linux 开启和关闭Ping的操作方法
linux 默认是开启 ping 操作的,通过以下两种方式可以开启和关闭 ping 操作 。关闭服务器上的ping可以在一定程度上在互联网上隐藏自己,防止一些批量扫描软件探测主机,减少被入侵的几率。 1、修改内核参数 通过内核参数设置也有两种方式,一种是临时修改,一种是永久修改。 1.1 临时设置 ping 操作 # 禁止 ..
85
0
- 知识分享 星小环 官方人员 发表时间:2022-11-26 15:27:24
【知识分享】Linux中查看主机名的10种方法 精华
主机名(也称为计算机名)是提供给连接到网络的设备(可以是系统、交换机、路由器等)的名称,用于通过网络对其进行标识。同一网络中不能有两个主机名相同的系统。linux系统给当前主机命名的目的是能够更容易记住,尤其是在部署集群的时候更加方便。一般主机名称都会有ip地址来关联,这样在其它集群中,主机换ip其它的集群机器不用相应的修改。 默认情况下,可以在终端中找..
96
0
inceptor部署环境问题
inceptor 连接出现java.sql.sqlexception: connection is closed!..
116
1
- 知识分享 星小环 官方人员 发表时间:2022-11-22 11:07:51
如何根据错误信息定位出现问题的发生阶段以及错误类别 精华
大家在使用inceptor的时候,可能会因为各种原因导致sql语句发生错误,一般错误信息会由如下几部分组成: 1. 错误发生阶段 compile failed:编译阶段(并未生成task) execution failed:执行阶段(已生成task,在task执行过程中出错) 2. 错误类别 parse error:词法/语法错误(由ant..
127
0
- 知识分享 星小环 官方人员 发表时间:2022-11-21 15:43:34 最新回复:2022-12-12 17:31:31
【知识分享】UDF那些事
背景: udf来源与hive,hive可以允许用户编写自己定义的函数udf,来在查询中使用。inceptor中udf的开发规范与hive相同,有3种udf: udf: 以单个数据行为参数,输出单个数据行; udaf: 以多个数据行为参数,输出一个数据行。 udtf: 以一个数据行为参数,输出多个数据行为一个表作为输出。 ..
99
1
beeline登录,报错hbase because of null user
beeline 登录报错,无法登录inceptor..
111
4
- 知识分享 星小环 官方人员 发表时间:2022-10-27 19:42:53
【知识分享】小文件相关的问题以及应该怎么处理
问题背景 很多客⼾在⽣产环境都会遇到⼩⽂件问题,⼩⽂件可能来⾃于上游系统,可能来⾃于书写不当的sql,也可能是错误数据导致join ⽣成⼤量⼩⽂件。 ⽤⼾侧观察到的现象就是,性能下降,任务报错,甚⾄executor lost。 问题分析 ⼩⽂件问题隐患: 1. 导致map 任务⾮常多,从而性能下降; 2. ⼩⽂件过多,可能会影响到后..
164
0
- 知识分享 星小环 官方人员 发表时间:2022-10-27 19:39:47
小文件合并以及automerge出现问题怎么解决
现有功能 改进的automerge 功能:https://community.transwarp.cn/thread?topicid=251 插入时候的全表/分区小文件合并功能:https://community.transwarp.cn/thread?topicid=252 现有功能可能出现的问题: 改进的automer..
147
0