如何合并小文件 使用SQL过程中，生成的小文件过多时，会导致作业执行时间过长，且查询对应表时耗时增大，建议对小文件进行合并。 设置配置项。 spark.sql.shuffle.partitions = 分区数量（即此场景下最终生成的文件数量） 执行SQL。 INSERT OVERWRITE

查看更多 →

传输数据时所用的文件格式，目前支持以下文件格式： CS V_FILE：CSV格式，用于迁移文件到数据表的场景。 JSON_FILE：JSON格式，一般都是用于迁移文件到数据表的场景。 BINARY_FILE：二进制格式，不解析文件内容直接传输，不要求文件格式必须为二进制。适用于文件到文件的原样复制。

查看更多 →

构建FTP站点 快速构建FTP站点（Windows 2012） 快速构建FTP站点（Windows 2019） 快速构建FTP站点（Linux） 搭建FTP站点（Huawei Cloud EulerOS 2.0） 父主题： 搭建应用

查看更多 →

操作全程，支持解析数据库操作指令，100%还原操作指令。 文件传输审计 基于远程桌面的文件传输操作审计，以及基于文件传输协议（FTP、SFTP、SCP）的传输操作审计，对Web浏览器或客户端文件传输全程审计，记录传输的文件名称和目标路径。 运维审计形式 实时监控 实时查看正在进行的运维会话，支持监控和中断实时会话。

查看更多 →

合、高亮显示等。能为用户提供实时搜索、稳定可靠的服务。适用于 日志分析 、站内搜索等场景。 云搜索服务 （Cloud Search Service，简称 CSS ）为 DLI 提供托管的分布式搜索引擎服务，完全兼容开源Elasticsearch搜索引擎，支持结构化、非结构化文本的多条件检索、统计、报表。

查看更多 →

利用合约查询数据 合约调用信息构建。 接口方法 ContractRawMessage.class public Invocation buildInvocation(String chainId, String name, String function, String[] args)

查看更多 →

利用合约查询数据 合约调用信息构建。 接口方法 ContractRawMessage.class public RawMessage buildInvokeRawMsg(String chainId, String name, String function, String[] args)

查看更多 →

利用合约查询数据 查询请求消息构建 接口函数 func (msg *ContractRawMessage) BuildInvokeMessage(chainID string, name string, function string, args []string) (*common

查看更多 →

-g grunt-cli 创建elk用户 elasticsearch不能通过root用户启动，创建es用户 adduser es passwd es 给es用户赋予权限 chown -R es:root /elk/elasticsearch-7.16.2/* chmod -R 755

查看更多 →

从关系型数据库导入数据到Hive表 从SFTP 服务器 导入数据到HDFS/OBS 从SFTP服务器导入数据到HBase 从SFTP服务器导入数据到Phoenix表 从SFTP服务器导入数据到Hive表 从FTP服务器导入数据到HDFS/OBS 从FTP服务器导入数据到HBase 从FTP服务器导入数据到Phoenix表

查看更多 →

从SFTP服务器导入数据到HDFS/OBS。 从SFTP服务器导入数据到HBase。 从SFTP服务器导入数据到Phoenix表。 从SFTP服务器导入数据到Hive表。 从FTP服务器导入数据到HDFS/OBS。 从FTP服务器导入数据到HBase。 从FTP服务器导入数据到Phoenix表。

查看更多 →

可能原因 现今很多服务器都支持HTTP和FTP协议的文件断点续传功能，即文件传输失败后，再次传输时可以从文件中间的某个断点开始，而不用从文件头开始。如果采用缺省配置，FW可能会放行从文件中间某个断点开始传输的流量。配置阻断文件断点续传后，FW可以识别出HTTP或FTP协议的断点续传流量并直接进行阻断。

查看更多 →

PostgreSQL本地Slave搭建步骤 手工安装宝塔面板（CentOS 7.2） 基于弹性云服务器安装及部署Jenkins 如何使用auditd记录Linux系统文件改动 通过Extundelete恢复弹性云服务器误删除数据（Linux） 搭建ThinkPHP框架

查看更多 →

登录Windows云服务器。 查看Windows云服务器的磁盘信息，如果有显示本地主机的磁盘设备，则表示您的本地主机与Windows云服务器之间可以互传数据了，如图5所示。 图5 查看磁盘设备 方法三：搭建FTP站点 搭建FTP站点，传输文件到云服务器。 父主题： 文件上传/数据传输

查看更多 →

ERROR_CLIENT_514 Code：C_514 文件传输响应时间过长，请重试或联系系统管理员 检查CBH系统与FTP服务的网络，是否存在传输丢包现象； 本地登录FTP服务器，检查是否能正常上传文件； 检查本地网络，是否限制上传文件的大小； 请填写工单反馈问题现象，联系技术支持。 ERROR_CLIENT_515

查看更多 →

读取文件报错，如何正确读取文件 问题现象 创建训练作业如何读取“json”和“npy”文件。 训练作业如何使用cv2库读取文件。 如何在MXNet环境下使用torch包。 训练作业读取文件，出现如下报错： NotFoundError (see above for traceback):

查看更多 →

用户建立EDS与第三方内网环境的FTP服务器的连接 远程登录云服务器。 账号：root；密码：您在创建云服务器时设置的密码。具体操作请参见登录Linux弹性云服务器。 在该节点部署ftp.proxy，用于打通EDS和第三方内网环境FTP服务器之间的连接，执行如下命令： 下载ctags插件，并进行安装。

查看更多 →

合、高亮显示等。能为用户提供实时搜索、稳定可靠的服务。适用于日志分析、站内搜索等场景。 云搜索 服务（Cloud Search Service，简称CSS）为DLI提供托管的分布式搜索引擎服务，完全兼容开源Elasticsearch搜索引擎，支持结构化、非结构化文本的多条件检索、统计、报表。

查看更多 →

监控指标转储配置”，查看“FTP用户名”、“保存路径”和“转储模式”配置项。 是FTP模式，执行6。 是SFTP模式，执行7。 登录服务器，在默认目录下查看相对路径“保存路径”是否有“FTP用户名”的读写权限。 是，执行9。 否，执行8。 登录服务器，查看绝对路径“保存路径”是否有“FTP用户名”的读写权限。

查看更多 →

MySQL迁移时报错“JDBC连接超时”怎么办？ 创建了Hive到DWS类型的连接，进行 CDM 传输任务失败时如何处理？ 如何使用CDM服务将MySQL的数据导出成SQL文件，然后上传到OBS桶？ 如何处理CDM从OBS迁移数据到DLI出现迁移中断失败的问题？ 报错“配置项[linkConfig

查看更多 →

选择时区后，datetime类型的数据同步到CSS/ES，会带上所选的时区。 索引名称 表名 选择为表名后，在目标Elasticsearch实例中创建的索引名称和表名一致。 库名+表名 选择为库名+表名后，在目标Elasticsearch实例中创建的索引名称为库名_表名。 同步对象 左

查看更多 →