grep

grep コマンドを使っていたら、中身はテキストファイル なのに "binary file matches" というメッセージが出てきて処理できなかったので、その時の回避方法をここにメモします。 エラー 回避方法 オプション 「-a」 「–text」 「–binary-files=text」 エラー 実行したコマンドは以下のものです。 $ grep "HOGE" sample.txt Binary file (standard input) matches 原因は grep するファイルにバイナリと思われるデータが含まれていて、それがテキストファイルではなく、バイナリファイルとして処理されてエ…

こんにちは。Linuxコマンドライン大好き！ponです。 はじめに Linuxのコマンドの用途は、ファイルの管理、特定のコンテンツの検索、さまざまなタスクの実行など多岐に渡ります。 この記事ではコマンドラインの実行をより楽しいものとするために、出力に視覚的な魅力を加える色の設定について探ってみたいと思います。 今回はgrepの検索結果を黄色でハイライトすることから〜カラーテーマのカスタマイズまで、ターミナルを明るく彩るためのヒントをご紹介します。 そもそもgrepって？ まずは「grepってなに？おいしいの？」という方向けに、 そもそもgrepがどんなコマンドで、何に使うのかを説明します。 g…

コマンド 以下のコマンドで"カレントディレクトリ配下にあるファイルから対象の文字列が記載されたファイルをを検索できます。 $ find ./ -type f -print | xargs grep 'xxxxx' テスト memo04.txtに'hoge'を記載したうえで、'hoge'と書かれたファイルを検出する。 find ./ -type f -print | xargs grep 'hoge'> ./subtest/memo04.txt:hoge memo04.txtが検出できました。

(2023-04-06 初稿 - 2023-04-27 追記) ランキング参加中プログラミング ランキング参加中Debian ランキング参加中Linux はじめに 来年(2024年)から新NISAが始まるようで、投資するお金はないけど、投資の練習だけはしておこうと、Googleファイナンスをスクレイピングするbashスクリプトを作った。(笑) スクレイピングは、python等の高級言語で作るのが一般的みたいだが、bashで作ったのは趣味の問題。^^; ここでは、単純にするために、S&P500とドル円の為替レートを取得する方法を記述する。他の投資先でもURLを変更すれば、対応可能だと思う。 また…

概要 ディレクトリ内を検索する際のlinuxコマンドやその使い道をまとめる Command構文 find フォルダ・ファイルの検索 ※オプションに[-print0]を付けることで空白にも対応 find <DIR> <option> [条件A] <-print0> ls ファイル・ディレクトリを一覧出力 ls <option> <DIR> grep 文字列の検索が出来る grep [文字列] <DIR> xargs コマンドの出力結果を別のコマンドの引数として渡す ※オプションに[-0]を付けることで空白にも対応 <command1> | xargs <-0> <command2> [<comm…

はじめに 皆さんこんにちは、開発課のthree_yagiです。 現在の業務では不具合などが発生したときの原因調査を担当することが多く、本番環境のログの調査をよく行っています。 Linux上に存在するログを調査するにあたって、必須ともいえるのが文字列検索を行う grep コマンドです。 こちらの記事では、grep コマンドについて私が実務でよく使っている検索方法と併せて紹介していきます。 目次 はじめに 目次 grep コマンドの基本 基本構文 よく利用するオプションと正規表現 オプション 正規表現 利用例(基本編) 基本の検索 AND検索 OR検索 NOT検索 大文字と小文字を区別しないで検索…

・2つのファイルの中身の異なる部分を抽出する → diff ※対象ファイルの中身がソート済みであること $ diff file1 file2 ・2つのファイルの中身の同じ部分を抽出する → comm ※対象ファイルの中身がソート済みであること $ comm -1 -2 file1 file2 オプションの説明 1 : file1の中身のみの存在する行を出力しない 2 : file2の中身のみに存在する行を出力しない ・2つのファイルの中身の同じ行を抽出する → grep ※ソート済みの必要なし $ grep -x -i -f file1 file2 オプションの説明 x : 行全体を検索対象と…

■python-lambda-local を試してみる 余分な工程を減らすことが目的 後でgit管理出来るよう、PEP 8に準拠したソースをローカルに保持しておく コードを書く←ここ Zipでひとつにまとめてアップロード サンプルイベントをインプットにして Lambda 関数をテスト実行 CloudWatch Logs でログを確認してデバッグ ■まずは仮想環境(venv)に入る $ mkdir lambda-local && cd lambda-local $ python3 -m venv venv $ source venv/bin/activate $ pip --version pi…

picoCTFのReverse Engineeringについてまとめていく。頻度は少ないかも。 開閉 packer 知識(UPX) packer Reverse this linux executable? ということで、何かしらのファイルが渡された。 └─# file out out: ELF 64-bit LSB executable, x86-64, version 1 (GNU/Linux), statically linked, no section header 何かしらの実行ファイルのようだ。 PROT_EXEC|PROT_WRITE failed. $Info: This fi…

皆さんご無沙汰しています～ 職場の異動に伴う引っ越し等があり。。ここしばらくは超バタバタしていました～(^^;) 今回、知り合いの方からFortigate-60Dを譲っていいただきましたので稼働点検兼ねてブログに残そうかと思います！！ お品書きです！ １ Fortigate-60Dとは２ 今回の構成３ 今回の設定４ 通信確認 以上になります！それでは始めます～ １ Fortigate-60Dとは？ FortiGate-60Dは、小規模な拠点、支社、顧客構内設備（CPE）、 および小売業のネットワークに最適なエンタープライズ クラスの包括的な セキュリティ保護機能を提供します。 https://…

環境構築の部分を一応メモ。【３／３】 前回 hitkoto.hatenablog.com jupyterインストール 以下手順にてインストール # python のバージョン確認 which python3 python3 --version # anaconda インストール cd ~/ wget https://repo.anaconda.com/archive/Anaconda3-2024.02-1-Linux-x86_64.sh sh Anaconda3-2024.02-1-Linux-x86_64.sh # インストール先のパス設定 export PATH=/home/ec2-use…

あんまり不便に感じてこなかったけど、最近感じるようになったので。 clipboardに対応したvimを入れる WSLのUbuntuを使っているんだけど、以下で入れたvimだとクリップボードに対応していない。 sudo apt install vim 確認は以下で。-になってたら未対応。 $ vim --version | grep clipboard -clipboard +keymap +printer +vertsplit +eval -mouse_jsbterm -sun_workshop -xterm_clipboard 仕方ないので対応版を入れる。ビルドは面倒だからしたくない。 参考…

SREのクラシマです。 弊社ではGitHub - technote-space/get-diff-action: GitHub Actions to get git diffを多用していたのですが、2023年11月にarchivedになってしまいました。 同actionではnode16を利用していることもあり、git diffコマンドに書き換えることにしました。 ついでなので、terraformと一緒に利用しているecspressoについて、tfcmtのようにecspresso diffがPull Request上で見られると便利だね、ということで同僚が作ったecspresso diff ac…

mruby/edgeの進捗ブログです。 mruby/edgeとは、という話はここです: udzura.hatenablog.jp もっと聞きたい人は5月に沖縄にいくといいらしい。 rubykaigi.org

テキスト内の検索などはCtrl+Fを使っていることと思うが、フォルダ内のどこかにあるのは分かるけど、どのファイルなのかを知りたい時がある。 つまり、フォルダ内を全部検索したい場合だ。 テキストファイルは秀丸を使用しているが、「grep検索」という機能がその役割を果たしてくれる。 （他のテキストファイルにも搭載されていそうではある） 秀丸でのgrep検索の方法 メニューの検索→grep検索 検索したい文字、検索対象のファイル名や拡張子、検索対象のフォルダを指定 大文字・小文字の区別や、サブフォルダも検索対象とするかなどを指定 実行 grep検索ウィンドウ 検索するファイルはワイルドカード「*」も…

はじめに Ciliumとは CiliumのMonitoring & Metricsの動作確認 Cilium導入 Monitoringの確認 おわりに 執筆者 : 藤本 健 はじめに KubernetesのCNIプラグインの一つであるCiliumのMonitoring Metricsの機能について調べてみました。CNI(Container Network Interface)は、コンテナのネットワーク接続とコンテナが削除されたときに割り当てられたリソースを削除することを焦点とし、コンテナのネットワーク・インターフェースを設定するためのプラグインを記述するための仕様とライブラリ、多数のプラグインで…

この大会は2024/3/24 0:00(JST)～2024/3/25 7:00(JST)に開催されました。 今回もチームで参戦。結果は1910点で410チーム中26位でした。 自分で解けた問題をWriteupとして書いておきます。 Join our Discord (Tutorial 10) Discordに入り、#challenge-listのTutorialsを見ると、以下のようにフラグが書いてあった。 Tutorials - Join our Discord (texsaw{welcome_to_texsaw_2024_have_fun}) texsaw{welcome_to_texsa…

ルートが通っているか確認 php artisan route:list グレップとして見る場合は | grep images とすればimage関連の情報が確認できる

お久しぶりです cron、使ってますか？ 俺は初めて使いました（noob） cronでperlスクリプトを実行できない躓きを踏んだので、備忘します cronって？ やろうとしたこと なぜできなかったか？ 試したこと：script.plがコマンドライン上で動くか？ 試したこと：cronがactiveになっているか？ 試したこと：cron再起動 試したこと：perl以外の自動実行をcrontabに記述してみる 仮説：perl特有の現象なのでは？ 解決策 /path/to/perl を調べる crontabを編集して再起動 cronって？ Linuxに標準で備わっているプログラムの一種で、設定すると…