物理学者(ポスドク)による日々の研究生活のメモ書きです ( python/emacs/html/Japascript/シェルスクリプト/TeX/Mac/C言語/Linux/git/tmux/R/ポケモンGO)
まずはtarで圧縮/解凍するときのコマンドメモ
gzipは単体のファイルには行えるが、ディレクトリには使えない(tarの内部でgzipを呼び出してはいるらしい)
# hogeというディレクトリをhoge.tar.gzに圧縮
tar czf hoge.tar.gz hoge
# hoge.tar.gzという圧縮ファイルを解凍する、名前は付けなくても自動的についた
tar xz hoge.tar.gz
tar czf hoge.tar.gz hoge
# hoge.tar.gzという圧縮ファイルを解凍する、名前は付けなくても自動的についた
tar xz hoge.tar.gz
これをscpの前後にやると30分掛かっていたディレクトリの転送が全部で10分ほどで終わった
ディレクトリの中身は30000個のファイルで、全部で2GB程度
圧縮するのに5分くらいかかって、転送自体は数分で終わった、解凍は一瞬で終わる
他にも転送時の暗号化を緩いものにするとかいう選択肢があるらしい
イントラネット内のファイル転送などのときは利用できるかもしれない
-c aes128-cbc -C
をscpにつける
今回は元から圧縮していたので、転送速度に大きな変化はなかった
■ 過去記事 : 大容量ファイルのSCP転送を高速にする方法
本来はこれをワンライナーでやりたいけどなぁ・・・
ローカルからリモートならワンライナーでできるっぽいけど、逆のリモートからローカルへのscpはどうしたらいいのかわからん。
メモだけしとく
(たぶんexample.comのあとにコロンが足りてない気がする？)
■ 過去記事 : SSH経由のディレクトリ転送を効率的に行う
(2021/09/14 追記)
■ scpの途中で通信が止まったときに続きから再開したい
# scpじゃなくてrsyncを用いればいい
rsync --partial --progress --rsh=ssh user@hoge.com:hoge.txt ./
rsync --partial --progress --rsh=ssh user@hoge.com:hoge.txt ./
PR
この記事にコメントする
プロフィール
ＨＮ：coffee
職業：物理屋（自称）
趣味：映画鑑賞、登山
出身：大阪府の南の田舎
自己紹介：
import MyProfile
import coffee_pote from TWITTER
import amazonのほしい物リスト from WISH_LIST
print "先月子供が産まれました！"
# 最終更新 2022/10/25
職業：物理屋
趣味：映画鑑賞、登山
出身：大阪府の南の田舎
自己紹介：
import MyProfile
import coffee_pote from TWITTER
import amazonのほしい物リスト from WISH_LIST
print "先月子供が産まれました！"
# 最終更新 2022/10/25
カウンター
カテゴリー
ブログ内検索
リンク
相互リンク募集中です
(Twitterにてお知らせください)
Demo scripts for gnuplot version 5 (gnuplotのさまざまなデモ画像と作り方がまとめられている、眺めているだけでできるようになった気分になれる)
gnuplotスクリプトの解説 (米澤進吾さんの個人ページ、gnuplotと言えばこのかた)
gnuplot のページ (Takeno Lab、うちのブログがリンクされていたのでリンク返し)
Twitterから映画の評価が分かる ＆ 映画の鑑賞記録が残せる coco (映画の感想をまとめられるサイト、いつもお世話になっています)
Astronomy Picture of the Day Archive (天文や宇宙関連の最新の話題について画像とともにNASAが説明しているページ)
今日のほしぞら (任意の時刻の空で見える星を表示してくれる、国立天文台が管理している)
GNUPLOTとアニメーション (応用の項目の「見せてあげよう！ラピュタの雷を！！」あたりからすごすぎる)
読書メーター (読んだ本をリストできる便利なサイト)
flickr難民の写真置き場 (20XX年、flickrは有料化の炎に包まれた。あらゆるflickr無料ユーザーは絶滅したかに見えた。 しかし、tumblr移住民は死に絶えてはいなかった。)
教授でもできるMac OS X へのLaTeX, X11, gccのインストレーションと環境設定 (阪大の山中卓さんのwebページ、タイトルにセンスが溢れている、内容は超充実してる、特にTeX関連、学振DCとかPDの申請書類作成時にはお世話になっております)
英語論文執筆用の例文検索サービス (とんでもないものを見つけてしまった・・・・ arXivに収録されている 811,761報の 英語論文から，例文を検索するための検索エンジン)
Demo scripts for gnuplot version 5 (gnuplotのさまざまなデモ画像と作り方がまとめられている、眺めているだけでできるようになった気分になれる)
gnuplotスクリプトの解説 (米澤進吾さんの個人ページ、gnuplotと言えばこのかた)
gnuplot のページ (Takeno Lab、うちのブログがリンクされていたのでリンク返し)
Twitterから映画の評価が分かる ＆ 映画の鑑賞記録が残せる coco (映画の感想をまとめられるサイト、いつもお世話になっています)
Astronomy Picture of the Day Archive (天文や宇宙関連の最新の話題について画像とともにNASAが説明しているページ)
今日のほしぞら (任意の時刻の空で見える星を表示してくれる、国立天文台が管理している)
GNUPLOTとアニメーション (応用の項目の「見せてあげよう！ラピュタの雷を！！」あたりからすごすぎる)
読書メーター (読んだ本をリストできる便利なサイト)
flickr難民の写真置き場 (20XX年、flickrは有料化の炎に包まれた。あらゆるflickr無料ユーザーは絶滅したかに見えた。 しかし、tumblr移住民は死に絶えてはいなかった。)
教授でもできるMac OS X へのLaTeX, X11, gccのインストレーションと環境設定 (阪大の山中卓さんのwebページ、タイトルにセンスが溢れている、内容は超充実してる、特にTeX関連、学振DCとかPDの申請書類作成時にはお世話になっております)
英語論文執筆用の例文検索サービス (とんでもないものを見つけてしまった・・・・ arXivに収録されている 811,761報の 英語論文から，例文を検索するための検索エンジン)
最新記事
(11/20)
(03/05)
(02/29)
(02/21)
(02/21)
(02/21)
(02/21)
(01/13)
(01/05)
(01/05)