テキストファイルの N行目以降を出力する方法のメモ。
tail -n +N で N行目以降を出力することができます。
$ cat test.txt 1 2 3 4 5 6 7 8 9 10
$ cat test.txt | tail -n +3 3 4 5 6 7 8 9 10
sed '1,Nd' で先頭の N行スキップします。
$ cat test.txt | sed '1,2d' 3 4 5 6 7 8 9 10
awk 'NR > N' で先頭N行をスキップします。
$ cat test.txt | awk 'NR > 2' 3 4 5 6 7 8 9 10
jq による JSONL データからのデータ抽出の例
$ cat test.jsonl
{"abc": "abc", "def": "def"}
{"abc": "ghi", "def", "jkl"}$ cat test.jsonl | jq -c '{abc: .abc}'
{"abc":"abc"}
{"abc":"ghi"}-c を指定しない場合は以下のような出力となります。
{
"abc": "abc"
}
{
"abc": "ghi"
}
実行中のプロセスをバックグラウンドで実行する方法のメモ。
いま以下を実行している状態です。
$ cat test.txt | python test.py > result.txt
このまま端末を終了すると、プロセスも終了してしまいます。
そのため、以下でバックグラウンドで実行します。
ctrl + z でプロセスを一時停止します。
$ bg
$ disown -h %1
これで端末を終了しても、バックグラウンドでプロセスが実行され続けます。
flask 等で作成したアプリケーションを apache の proxy の設定で 80 番ポートで公開する方法のメモ。
ここでは、5001 番ポートで /app/test/ ディレクトリでアプリケーションを作成したものとします。
LoadModule proxy_module modules/mod_proxy.so LoadModule proxy_http_module modules/mod_proxy_http.so ProxyPass /app/test/ http://127.0.0.1:5001/app/test/ ProxyPassReverse /app/test/ http://127.0.0.1:5001/app/test
$ sudo apachectl restart
/var/log/httpd/error_log に以下のログが出力されている場合には、setsebool コマンドで http 通信を許可します。
(13)Permission denied: AH00957: http: attempt to connect to ...
$ sudo setsebool -P httpd_can_network_connect 1
firewall-cmd による他ホストからの http アクセス許可方法のメモ。
Windows 上に VirtualBox でインストールした Linux の web サーバに、Windows からアクセスができなかったため、firewall-cmd でアクセス許可の設定を行いました。
以下で services に http が出力されていないため、http が公開されていません。
$ sudo firewall-cmd --info-zone public public (active) target: default icmp-block-inversion: no interfaces: enp0s3 sources: services: cockpit dhcpv6-client ssh ports: protocols: forward: yes masquerade: no forward-ports: source-ports: icmp-blocks: rich rules:
$ sudo firewall-cmd --info-service http http ports: 80/tcp protocols: source-ports: modules: destination: includes: helpers:
$ sudo firewall-cmd --permanent --zone public --add-service http success
$ sudo firewall-cmd --reload success
以下で services に http が出力されていることが確認できます。
$ sudo firewall-cmd --info-zone public public (active) target: default icmp-block-inversion: no interfaces: enp0s3 sources: services: cockpit dhcpv6-client http ssh ports: protocols: forward: yes masquerade: no forward-ports: source-ports: icmp-blocks: rich rules:
Rocky Linux に gcloud CLI をインストールする方法のメモ。
以下を参考にインストールします。
https://cloud.google.com/sdk/docs/install-sdk?hl=ja#rpm
$ sudo tee -a /etc/yum.repos.d/google-cloud-sdk.repo << EOM [google-cloud-cli] name=Google Cloud CLI baseurl=https://packages.cloud.google.com/yum/repos/cloud-sdk-el9-x86_64 enabled=1 gpgcheck=1 repo_gpgcheck=0 gpgkey=https://packages.cloud.google.com/yum/doc/rpm-package-key.gpg EOM
$ sudo yum install google-cloud-cli
インストール後に gcloud init を実行します。
$ gcloud init
コマンドラインで GCP の機能を利用するには以下を実行します。
less コマンドでタブの幅を変更する方法のメモ。
以下のファイルをタブの幅を変更して表示します。
1234567890123456789
abc
{TAB}def
{TAB}{TAB}ghiless -x{num} でタブを num 個分の空白文字に変更できます。
$ less -x8 test.txt
1234567890123456789
abc
def
ghi
$ less -x4 test.txt
1234567890123456789
abc
def
ghi
$ less -x2 test.txt
1234567890123456789
abc
def
ghi
Windows に Virtual Box をインストールして Rocky Linux を動かしてみました。
VirtualBox のインストールに必要な python をインストール
pip install pywin32
sudo yum install net-tools
$ od -tx1z mod_global_header_goo_logo.webp | head 0000000 eb 63 90 90 90 90 90 90 90 90 90 90 90 90 90 90 >.c..............< 0000020 90 90 90 90 90 90 90 90 90 90 eb 49 24 12 0f 09 >...........I$...< 0000040 00 52 be 1b 7c 31 c0 cd 13 46 8a 0c 84 c9 75 10 >.R..|1...F....u.< 0000060 be 39 7c e8 74 01 e9 3d 01 46 6c 6f 70 70 79 00 >.9|.t..=.Floppy.< 0000100 bb 00 70 8e c3 31 db b8 01 02 b5 00 b6 00 cd 13 >..p..1..........< 0000120 72 d3 b6 01 b5 4f e9 98 00 00 00 80 00 00 00 00 >r....O..........< 0000140 00 00 00 00 ff fa eb 05 f6 c2 80 74 05 f6 c2 70 >...........t...p< 0000160 74 02 b2 80 ea 79 7c 00 00 31 c0 8e d8 8e d0 bc >t....y|..1......< 0000200 00 20 fb a0 64 7c 3c ff 74 02 88 c2 52 be 80 7d >. ..d|<.t...R..}< 0000220 e8 17 01 be bf 7d b4 41 bb aa 55 cd 13 5a 52 72 >.....}.A..U..ZRr<
$ ENC=`echo -n 'abc あいう def' | jq -Rr @uri`
$ echo ${ENC}
abc%20%E3%81%82%E3%81%84%E3%81%86%20def
1 2 3 4 5 a1 b2 c3 d4 e5 A1 B2 C3 D4 E5
awk 'match($3, /^[a-z]([0-9]+)$/, m) {FS="\t"; OFS="\t"; print $1, $2, m[1], $4;}'
a1 b2 3 d4
npm install -g json-server
{
"path1": [
{"id": "1_1", "key": "key1_1", "value": "value1_1"},
{"key": "key1_2", "value": "value1_2"}
],
"path2":
{"key": "key2_1", "value": "value2_1"}
}
json-server db.json
$ curl http://localhost:3000/path1
[
{
"id": "1_1",
"key": "key1_1",
"value": "value1_1"
},
{
"key": "key1_2",
"value": "value1_2"
}
]
GET /path1 200 37.859 ms - 127
$ curl http://localhost:3000/path1/1_1
{
"id": "1_1",
"key": "key1_1",
"value": "value1_1"
}
GET /path1/1_1 200 8.266 ms - 59
$ update-alternatives --list libnssckbi.so.x86_64 auto /usr/lib64/pkcs11/p11-kit-trust.so python auto /usr/libexec/no-python ... java_sdk_1.8.0_openjdk auto /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.302.b08-0.el8_4.x86_64 google-chrome auto /usr/bin/google-chrome-stable
$ sudo update-alternatives --install /usr/bin/x-www-browser x-www-browser /usr/bin/google-chrome 1
$ update-alternatives --list libnssckbi.so.x86_64 auto /usr/lib64/pkcs11/p11-kit-trust.so python auto /usr/libexec/no-python ... java_sdk_1.8.0_openjdk auto /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.302.b08-0.el8_4.x86_64 google-chrome auto /usr/bin/google-chrome-stable x-www-browser auto /usr/bin/google-chrome
abc 1 def 11 ghi 5
cat test1.txt \
| awk '$2 >= 10 {FS="\t"; OFS="\t"; print $1, $2}'
def 11
■setenforce で permissive モードに変更 sudo setenforce 0 ■setenforce は一次的な設定変更のため、/etc/selinux/config を変更 #SELINUX=enforcing SELINUX=permissive
