2021-06-05

業務でよく使うコマンドの紹介

コマンド紹介

業務で頻繁に使用しているLinuxコマンドなどを紹介したいと思います。 MacまたはLinuxOSを使用している人が対象になります。

ファイル検索

find <ディレクトリ> -name <パターンマッチ>

例：hoge.txtの所在が全く分からないとき

sudo find / -name *hoge.txt*

sudo権限があるという前提ではありますが、ルートディレクトリ/を指定しつつパターンマッチにワイルドカードを使うことで全ディレクトリを対象に検索することができます。

テキスト処理

結果のフィルタ

catやlsコマンドなど、結果から特定の文字列を含むものを抽出したいときに便利です。

cat <ファイル> | grep <文字列>
ls <ファイル> | grep <文字列>

-vオプションをつけることで特定の文字列を含まないようにすることもできます。

cat <ファイル> | grep -v <文字列>

特定のデバッグログを抽出したいときに便利です。

JSONを整形して見やすくする

JSON(JavaScript Object Notation)とはJavaScriptのオブジェクト記法によるデータフォーマットです。メジャーなデータフォーマットでバックエンドのAPIなどでよく使われています。下記はJSONによるデータフォーマットの例ですが、データ量が増えると当然複雑になりやすいです。

{"hoge":{"huga": "test"}, "hogehuga": ["test", "example"]}

ターミナル上でファイルやcurlの結果などからJSONを読み込む際に上記の様な一列だと見づらいのでpython -m json.toolコマンドをパイプラインで繋げることで見やすくすることができます。このコマンドの利点としてはMac、Linuxに標準でpython2がインストールされているためすぐに使えるという点です。

cat <JSONファイル> | python -m json.tool
curl -X GET http://example.com/example.json | python -m json.tool

{
    "hoge": {
        "huga": "test"
    }, 
    "hogehuga": [
        "test",
        "example"
    ]
}

logファイルをリアルタイムで見る

動作確認などでlogファイルの出力をリアルタイムに確認したい場合lessコマンドを使うと便利です。 Ctrl+cを押すと通常のlessコマンドと同様のモードに戻ることができ、大文字Fを入力すると再度入力待ち状態にすることができます。

less +F <ログファイル>

2021-06-01

ssh_exchange_identification でリモートに接続できない問題の原因と対処

みなさんはsshコマンドを使ってサーバに接続しようとした際にssh_exchange_identification: connection closed by remote hostというエラーが表示された経験はないでしょうか。

今回はそのエラーが発生する大まかな原因とそれ毎の対処方法について述べていきたいと思います。
以下、接続元となるPCないしはサーバをローカル、sshで接続したい先のサーバのことをリモートと呼びます。

ssh_exchange_identificationとは何か

接続先が存在しない、またはセキュリティ違反によってリモートに接続できない場合に発生するエラーです。このエラーが発生しうる原因と対処について述べていきたいと思います。

ssh_exchange_identification: connection closed by remote hostの原因

リモートの情報が変更されてしまった場合

以下の様なメッセージが表示されている場合、リモートの情報とローカルに記録されたknown_hostsファイルの情報が異なっている可能性があります

@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
@ WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! @
@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@

known_hostsファイルとは何か

known_hostsファイルにはfingerprintと呼ばれる情報が記録されており、過去接続したことのあるサーバのIPアドレス、公開鍵、鍵の暗号方式が記録されています。

sshの際には単にリモートのホスト名だけではなく、これらの情報と合わせて識別を行っており、名前の通り指紋の役割として働いています。

何らかの理由により、fingerprintが異なる場合 REMOTE HOST IDENTIFICATION HAS CHANGED! というエラーが出るというわけです。

fingerprintが古い場合の対処

known_hostsに記録されたfingerprintが変わってしまう原因としては、サーバが再起動したことによってDHCPによりIPアドレスが変わったり、OS再インストールによって公開鍵が変わったりと様々です。

リモートの情報が変更された理由に心当たりがある場合は以下の2つの方法で対処が可能です。
原因に心当たりがない場合はなりすましの可能性があるので注意が必要です。

known_hostsに記録されたfingerprintを削除する

リモートが更新された原因に心当たりがあるなら直接fingerprintを削除してしまって問題ありません。

vim ~/.ssh/known_hosts

以下のsedコマンドを使って削除することも可能です

sed -i '/リモートのホスト名/d' ~/.ssh/known_hosts

警告を無視する

-o 'StrictHostKeyChecking no'オプションをつけることで無視することができます。shellやpythonなどのスクリプトから接続している際にはかなり有用ではありますが、万が一なりすましの場合セキュリティ上のリスクはあるので注意が必要です。

ssh -o 'StrictHostKeyChecking no' リモートのホスト名

リモートからアクセスが禁止されている場合

以上fingerprintが変更されている場合について説明いたしました。そのほかにもsshd(ローカルからのssh接続を受け持つデーモン)やdenyHostsというセキュリティツールで禁止されている可能性もあります。
接続先の/etc/hosts.denyにローカルのIPアドレスがないか確認が必要です。

vim /etc/hosts.deny
# denyhostsの場合
systemctl restart denyhosts # sshdの場合
systemctl restart sshd

まとめ

今回はssh_exchange_identification: connection closed by remote hostのエラーとその原因・対処について紹介いたしました。

エラーの原因と対処

リモートのfingerprintが変わったため：fingerprintを削除する
リモートから拒絶されているため：リモートサーバの接続設定を見直す

2021-03-02

本の要約サイトflierを使ってみた感想

そのほか

今回は息抜きとして本の要約サイトflier使った感想を述べたいと思います。

flierはビジネス書や教養書の要約を読むことができるサブスクリプション方式のサービスです。

コースは3種類あり、無料コースと有料コース2種になります。

無料コース無料で読める要約のみ閲覧可能
シルバープラン 500円一月に有料要約が5冊
ゴールドプラン 2000円無制限に読める

www.flierinc.com

使おうと思ったきっかけ

単純にインプットの量を増やしたいと思い使ってみました。

自分は技術書に限らずビジネス書なども勉強のために読むことがあるんですが、なかなかインプット量を増やせずにいました。

良著として知られているような本しか読まない
技術書よりも優先順位が低い
そもそもの読書量が少ない

知らない概念に出会えたらいいな～セレンディピティが得られると良いな～ぐらいの温度感です。

使ってみた感想

1か月ほどゴールドプランを利用してみましたが、1か月キリよく使って十分満足かなと感じました。

セレンディピティを得たいぐらいのモチベーションだとメリットがデメリットやコストを上回ることはないかな～という結論に至りました。

メリット

10-15分で読み終えられる
取り扱っている書籍数が多く範囲も広い

メリットとしては、喧伝されている通り10-15分ぐらいで1冊読み終えることができる点と、取り扱っている本の豊富さにあると感じました。

flierで読める本は約2000冊ほどだそうです。使ってみた印象としては、名著とされているものは大抵あるかなと感じました。思考の整理学やOKRの本やHARD THINGSなど、自分が好きな本(笑)はカバーしてくれていて安心しました。

一方で、自分があまり手に取らないような芸能人のエッセイや社会現象を使って説明しているような教養書なども充実していました。普段手に取らない本を、時間・金銭面でローコストで読めるというのは強みとしては十分じゃないでしょうか。

デメリット

要約者によって品質に差がある
本一冊につき要約者が一人
プランの料金が高め

要約者によって品質の差があるように感じました。読みやすい人はすらすら読めますが、そうでない人の場合は読みづらく尚且つ頭に入りづらいとさえ感じました。

2点目ですが、本一冊につき要約者が一人なのは少し不満に感じました。読み手のバイアスを考慮すると、2人はいると嬉しいなと感じました。せっかく要約者のプロフィールも書かれているわけですから、要約者のバックボーンも加味しつつ要約文の取捨選択や比較ができると面白そうに感じます。

3点目の”プランの料金が高め”ですが、これは単にセレンディピティぐらいの目的を満たすにはちょっと高いなと感じました・・・。

とはいえ、読みたい本が明確なユーザにとっても2000円はちょっと高いんじゃないかなと感じます。速読派で尚且つ選り好みしない読書家に適したサービスかもしれません。

まとめ

本要約サービスflierを紹介
2000冊のビジネス書・教養書の要約を読むことができる
無料コースと有料コース2種の3つのプランがある
本は流行りから名著まで網羅されている印象
要約者によって品質に差があり
速読派で本を選り好みしない人に向いてそうという印象

2021-03-01

新卒エンジニアにお勧めしたい本 5選

本紹介

今回はエンジニアになりたての方に向けて本を紹介していきたいと思います。

情報系の大学やオンライン学習コースで勉強してきたけど会社での開発を知らない、ギャップが気になる、という方を対象とした記事になります。

自分の仕事場での経験や観察上、組織論やコミュニケーション関係の課題のほうが比重としては大きく、かつ学生時代はなかなか意識できない部分が大きいかなと思いました。なので、以下の5冊を紹介したいと思います。

ストレングスファインダー

さあ、才能(じぶん)に目覚めよう新版ストレングス・ファインダー2.0

作者:トム・ラス
発売日: 2017/04/13
メディア: 単行本

まず紹介したいのはこちらの『さあ、才能に目覚めよう』という本です。これは”本”というよりは”自己診断ツール”になります。同封されているシリアルコードを使うことでWebサイトで自分の強みを診断することができます。

思考力・人間関係力・影響力・実行力の4つのカテゴリから成る34の資質のうち、強みの資質上位5つを知ることができます。