百度360必应搜狗淘宝本站头条
linux文件压缩linux用户组查看linux磁盘mysql安装linuxlinux多线程
当前位置：网站首页 > 优雅编程 > 正文

linux超大文件如何从A服务器传输到B服务器

sinye56 2024-11-26 08:31 1 浏览 0 评论

目录

  • 概述
  • linux服务器A文件压缩
  • 压缩包A分割多个文件包
  • linux文件A传输到文件linux服务器B
  • 合并解压
  • php7进阶到架构师相关阅读

概述

这是关于php进阶到架构之Linux应用学习的系列课程：linux超大文件如何从A服务器传输到B服务器

学习目标：

解决工作中Linux超大文件传输问题

场景

将linux服务器A中的数据文件迁移到linux服务器B，当文件很大的之后，压缩直接传输会出现传输很久，且中间一段暂停，又得重新上传。这时候需要可以将压缩的文件的分割传输然后解压合并。

linux服务器A文件压缩

tar -czvp -f A.tar.gz A

压缩包A分割多个文件包

split -b 4000k A.tar.gz B.tar.gz

按4000k大小分割A.tar.gz 生成B.tar.gzaxxx
这时候，当前目录会生成
B.tar.gzaa B.tar.gzab B.tar.gzac B.tar.g.ad B.tar.gzae等文件

linux文件A传输到文件linux服务器B

登录服务器A终端，执行下面命令：

scp /path/B.tar.gzaa username@B:/path

scp /path/B.tar.gzab username@B:/path

scp /path/B.tar.gzac username@B:/path

...

更多scp命令，参考https://www.linuxprobe.com/linux-scp.html

合并解压

进入服务器B，进入文件相关目录
合并传输的压缩文件

cat B.tar.gza* >B_cat.tar.gz

或者一个一个的合并

cat B.tar.gzaa >B_cat.tar.gz
cat B.tar.gzab >B_cat.tar.gz
cat B.tar.gzac >B_cat.tar.gz
...

解压压缩的文件

tar -zxvf B_cat.tar.gz

如上几步操作，即可实现将linux服务器A中的大数据文件迁移到linux服务器B

php7进阶到架构师相关阅读

https://www.kancloud.cn/gofor/gofor

最后，欢迎大家留言补充，讨论~~~
喜欢小编的话，欢迎点赞、收藏和关注哦~~~///(^v^)\\\~~~

相关推荐

linux安装FTP

1、在nkftp目录下安装ftp，进入到nkftp里面[root@localhostbin]#cd/data/nkftp执行安装命令：[root@localhostnkftp]#rpm-i...

LINUX下搭建FTP服务器

FTP服务器介绍FTP是FileTransferProtocol（文件传输协议）的英文简称，而中文简称为“文传协议”。用于Internet上的控制文件的双向传输。同时，它也是一个应用程序（App...

Linux下如何进行FTP设置

目录：一、Redhat/CentOS安装vsftp软件二、Ubuntu/Debian安装vsftp软件一、Redhat/CentOS安装vsftp软件1.更新yum源yumupdate-y2.安...

推荐使用集串口 SSH远程登录和FTP传输三合一工具MobaXterm

来源：百问网作者：韦东山本文字数：1216，阅读时长：4分钟在以前的资料里，串口和SSH远程登使用SecureCRT，window与ubuntu数据传输使用filezilla，窗口切换来切换去，麻烦也...

如何搭建FTP服务器(Linux系统)

上次说了Windows操作系统下搭建的FTP服务器，那有朋友问我，说买的XX轻量应用服务器都是属于Linux的操作系统，我该如何为搭建FTP服务器呢？...

Linux 命令 ncftp(文件传输)——想玩转linux就请一直看下去

我是IT悟道，点击右上方“关注”，每天分享IT、科技、数码方面的干货。Linuxncftp命令...

如何用 ftp 实现一键上传

简介ftp是Internet标准文件传输协议的用户界面，它允许用户与远程网络站点之间传输文件...

Linux安装ftp

1安装vsftpd组件安装完后，有/etc/vsftpd/vsftpd.conf文件，是vsftp的配置文件。[root@bogon~]#yum-yinstallvsftpd2添加一个...

一天一点点:linux - ftp命令

linuxftp命令设置文件系统相关功能。FTP是ARPANet的标准文件传输协议，该网络就是现今Internet的前身。语法ftp[-dignv][主机名称或IP地址]参数：-d详细显示指令执...

Centos 7 搭建FTP

目录安装软件以及启动服务添加防火墙规则关闭selinuxftp配置常用常用参数详解特殊参数配置文件没有的参数也可以添加到配置中1.安装软件以及启动服务yuminstall-yvsftpdsys...

【Linux】Linux中ftp命令，没有你想的那么简单

本文介绍了Linux中FTP命令的基本用法，包括连接与登录远程服务器，以及解析了FTP协议中五个最常用的操作命令的使用和解析过程。同时，提供了一个包含常用FTP操作命令的表格，供读者参考。通过熟练掌握...

linux 命令行操作ftp

以下是linuxftp命令参数的详解。FTP>!从ftp子系统退出到外壳?FTP>?显示ftp命令说明??和help相同?格式:?[command]说明:[com...

多学习才能多赚钱之:linux如何使用ftp

linux如何使用ftp步骤1:建立FTP连接想要连接FTP服务器，在命令上中先输入ftp然后空格跟上FTP服务器的域名'domain.com'或者IP地址例如:ftpdom...

linux常用网络操作方法:ftp命令使用方法

常用网络操作方法Linux提供了一组强有力的网络命令来为用户服务，这些工具能够帮助用户登录到远程计算机上、传输文件和执行远程命令等。本节介绍下列几个常用的有关网络操作的命令：ftp传输文件tel...

Linux 5.15有望合并Memory Folios方案 内核构建速度可提升7%

甲骨文公司的长期内核开发人员MatthewWilcox已经研究了“内存对开区”概念相当长的一段时间，这可以改善Linux的内存管理，使其具有更大的效率。例如，使用内存对开的基准测试表明，内核的构建速...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表