2021 Feb. 25. 2021 Feb. 11. 参考元 IBM Knowledge Center awk で動的に正規表現を変更する方法のメモ | 毎日の向こうに The GNU Awk User's Guide - 正規表現 基本構文 awk -F "フィールド区切り文字" -v 変数1=hoge1 -v 変数2=hoge2 'パターン{BEGINパターン時の初期化}{各行アクション}END{アクション}' FILE.txt ## シェル変数は -vオプションでawk上の変数に置き換える。-v var="${HOGE}" 文字列リテラルの記述は二重引用符で囲む（シングルクォートではダ…
はじめに 皆さん初めましてseahoseTです。 今回はLinux上で文字列を処理することに便利なawkについて紹介していきたいと思います。 目次 はじめに awkとは ここがすごいよ！awkのアレコレ！ 基本的な仕様 スクリプト パターン 正規表現 BEGIN,END 評価式 アクション 組み込み変数 オプション 注意点 問題編：行の指定 解決編：行の指定 問題編：複数のパターンを使用する 解決編：複数のパターンを使用する 問題編：NRとFNR 解決編：NRとFNR 問題編：awkでシェル変数を使用する 解決編：awkでシェル変数を使用する 実践 おわりに
はじめまして！2020年6月に中途入社したソフトウェアエンジニアのたろーです！ 皆さん、CSVやTSV形式のファイルの操作をする際にどのようなツールを使ってますか？ テキストエディタ、Excelやスプレッドシート 、拡張子毎の専用エディタなどなど色々な方法があると思います。 でも、 「簡単な集計程度であればわざわざツールでファイル開いて関数とかフィルタを組み込んでいくような作業したくないな〜」 なんて思うことありませんか？？？ そこで今回僕から推したいのはかの有名なawkです！ 普段CLIで作業を行っていなかったり、サーバサイドの開発をあまり行わなかったり、awkを使ったことない方からすると、…
前書き みなさまこんにちわ。技術統括部s-izuです。 前回の記事ではAWS内部のlinux（EC2インスタンス）からAWS CLIを実行しcsv形式のEC2資産管理表を生成する方法について紹介いたしました。 今回の記事ではAWSの外側にあるlinuxサーバーからAWS CLIを実行する方法と、cronをつかって資産管理表を定期的に生成する方法について説明いたします。 terilogy-tech.hatenablog.com terilogy-tech.hatenablog.com 概要 本作業はCentos7での作業を前提としています。またその他の前提は下記の通りです。 linuxサーバーか…
前書き みなさまこんにちわ。技術統括部s-izuです。 本記事ではAWS CLIでAWS上のアセットを一覧取得する方法について解説いたします。 AWSなどのクラウドを組織で利用するとインスタンスが乱立しがちです。簡単に作れて簡単に消せるのがクラウドの利点だから仕方ないのですが作りっぱなしで消さずにインスタンスをそのまま放置という事例をよく目にします。作ることは簡単でも消さなきゃならないことを覚えておくことは人間には難しいからです… またインスタンスは資産管理の対象となりづらいです。なぜならオンプレミス機器のように購入してから運用されるまでのプロセスにおいて台帳に記録されることは考えにくいからで…
2021 Feb. 21. 2020 Jun. 03. 2020 Apr. 19.(Linux上で)awkで条件に合致する列を出力して1つの変数に格納すると、出力される列の区切りはスペース／空白(0x20)となり、末尾に改行(0x0a)が付く。 STR=$(cat FILE | awk '{for (i = 2; i <= NF; i++ ) print $i }') 変数に格納せず標準出力に流すと各列は改行出力表示される。 cat FILE | awk '{for (i = 2; i <= NF; i++ ) print $i }'
節約投資家テツです。 【AWK】アメリカン・ウォーター・ワーク北米最大の水道会社で公共事業セクターに分類されます。AWKは水道水の供給、排水、設備の運用、メンテナンスを行いサービスを提供しています。 水道水は生活に欠かせないものであり、需要がなくなることはないと考えられます。安定した需要があるため、長期投資に向いている魅力ある投資先といえるでしょう。 また、公共事業は暴落場面でも強い傾向にあるためディフェンシング銘柄になると考えられます。 公共事業セクター記事 tetsuinvest.com では、AWKの攻めのリターンを見てみましょう 2015~2020年 S&P500(VOO)とAWK比較…
はじめに 第12回シェル芸勉強会の問題に挑戦してみた Q1 Question Answer Q2 Question 小問1 小問2 Answer 小問1 小問2 Q3 Question Answer Q4 Question Answer Q5 Question Answer Q6 Question Answer Q7 Question Answer Q8 Question Answer 参考サイト シェル力が圧倒的に足りてないのでシェル力を養うために第12回シェル芸勉強会の問題に挑戦してみた。 問題はすごく工夫してあってパズル感覚で解けて楽しいしシェル力を養うのにも役立ちそう。 自分が使ってる…
環境 Host OS : Windows 10 Pro Windows Subsystem for Linux (WSL2) : Ubuntu-20.04.2 LTS 既存の方法における問題 WSL2ではネットワーク構成が従来のWSL1と異なるため、X Window SystemでGUIをホストOSのWindows上に表示させるといったケースでは、DISPLAY環境変数を（:0.0などから）変更する必要がありました。 その指定方法として、多くのサイトでは次のような設定が提示されていました。 export DISPLAY=$(cat /etc/resolv.conf | grep nameser…
以下のtweetたちのようなことがありまして、気になったので、拗促音で使われる小書きの文字「ゃ」「ゅ」「ょ」「っ」を高い割合で含む単語にどのようなものがあるのかを調べてみました。この調査で得られた単語を社名として起業し銀行口座を作ると、取引先の人が困惑するという効果が得られるかもしれません（おすすめはしません🙅♀️）銀行の入出金明細を見ると「トツキヨチヨウ」という見慣れない費目での出勤があって不正アクセスか？！と思ったりした。よく考えたら特許庁だった😂正しい出費。難しいかもしれないけども、PayEasyとかは拗促音をきちんと処理できるようになって欲しい🙏— T.MOTOOKA (@t_mot…
■former2のdocker版を使ってみる。 Web版は以下。 ReadOnlyAccessとはいえ、エラーは出るしアクセスキーとシークレットキーを必要とするので、 まずはdocker版から確認してみる。 https://former2.com/ ■IAMグループ「former2」を作成して、「ReadOnlyAccess」のAWS1管理ポリシーを付与 ユーザやグループに適用する前にAWSが用意するポリシー名を検索してみる。 https://labunix.hateblo.jp/entry/20201223/1608723093 $ ./aws-policy-search ^readonly…
背景 awkはとても便利。 コマンド集 tsvファイルの読み込み。 例1: 1つめのカラムのみ出力する awk -F '\t' '{print $1}' test.tsv 例2: 3つめのカラムの値が1のとき、1つめのカラムを出力する awk -F '\t' '{(if $3 == 1){ print $3 }}' test.tsv
いつもは忘れてしまっているが思い出したら気になることがある。そのうち思い出せなくなってしまうまでに解決しておきたいものである。 そのひとつがテ料理本で、いまだに助けられることが多い（ので自炊して座右の銘にした）と書いているのに、座右に見つからないのである。 《伊藤博康：入門JGAWK:サンデープログラマのための言語型テキスト変換プログラム》や《プログラミング言語AWK》はちゃんとPDFがあって、macOSやLinux上のawkの使用には差し障りがあるわけではない。入門 JGAWK―サンデープログラマーのための言語型テキスト変換プログラム作者:博康, 伊藤メディア: 単行本プログラミング言語AW…
みなさんどうも 高配当株＆グロース株のハイブリッド長期投資戦略で海外移住を夢見る米国株投資家アイアーンマンです！ ２０１９年３月より投資をスタートさせて丸２年、ついに３年目へと突入しました！ たった２年間でも様々な市場の移り変わりを経験することができ、それがいまの自分の資産運用の礎となりつつあることを実感しています。 自分自身の資金で運用してはじめて得ることが出来る経験則って非常に貴重ですね。 その積み重ねで自分なりのスタイルを確立していくことが大切だと思います。 過去のチャートの動きなどを見て想像することと、実際に株を保有するのではまったく感覚が異なるからです。 例えば過去の暴落のチャートを…
WSL2上でUbuntuを動かし、さらにGnomeなどのデスクトップ環境を導入するための手順を紹介するブログ投稿は多い。一方、その多くはWSL1やUbunto 18.04 LTSを対象としていたり、どこか他のサイトで紹介されている手順通りに作業したものを、作業者なりに書き写したような、具体的な根拠に乏しい内容のものが散見される。この投稿では、WSL 2 + Ubuntu 20.04 LTSで最低限のGnomeデスクトップ環境を導入し、起動するまでの手順を紹介する。あくまでも起動するまでを目的としており、日本語対応やMaXX Interactive Desktopの導入は、別の機会に投稿する。 …
３月２９日→４月２日の株投資資産額推移 米国個別株 ・1,955,074円（＋7,477円） 米国ETF ・341,642円（＋6,500円） 投資信託 ・24,572円（＋971円） iDeCo ・1,195,640円（＋26,427円） トータル ・3,516,928円（＋41,375円／＋1.19％） 日経平均：29,854.00（＋2.32％） S＆P500：4,019.87（＋1.09％） 米ドル円：110.71円（＋0.98％） とりあえずのデータ更新。とりあえず今週はプラスになっていたようだ。でも個別株はAWK以外あまり調子は良くなかったのかな。為替も円安傾向が続いて110円台ま…
ip addr show | grep "scope global vpn_vpn" | awk '{print$2" "$5}' | awk -F'/' '{print$1" "$2}' | awk '{print$1" "$2" "$3}' | perl -wnle '@vpnip=split(/ /,$_);$cmd="ip addr del $vpnip[0]/$vpnip[1] dev $vpnip[2]";system($cmd) == 0 or die "$cmd : $!";' 途中からperlが入ってきて結局「perlでいいじゃん」という安易な思考になった。
docs.aws.amazon.com docs.aws.amazon.com FIELDS @message | PARSE @message "* [*] *" as loggingTime, loggingType, loggingMessage | FILTER loggingType IN ["ERROR", "INFO"] | DISPLAY loggingMessage, loggingType = "ERROR" as isError messageにたいしてawk的なやつはなくって、正規表現でいい感じに区切ることしかできなっぽい
Docker のコンテナ ID だけを表示する Docker のコンテナ ID だけを表示する --quiet オプションを知ったメモ。 Docker のコンテナ ID だけを表示する Docker のコンテナ ID だけを表示する --quiet オプションを知ったのでメモしておく。 Docker のコンテナはコンテナ ID を指定して stop したり restart することが多いけどコンテナ ID を調べようとして docker container ls コマンドを実行するとコンテナ ID 以外にもいろいろ情報が表示する。 対話的にやってるときはそれでいいけどシェルスクリプトとかはコン…
毎回するセットアップのメモ とりあえずインストール Google Chrome Google 日本語入力 半角全角切り替えの設定 Clibor Slack Zoom Microsoft PowerToys CapsLockをCtrlに変換 WSL Ubuntu RubyMine VS Code Docker Desktop WSL Ubuntuセットアップ # とりあえずパッケージアプデ sudo apt update sudo apt upgrade # ライブラリ系 sudo apt-get install -y libnss3-dev libatk1.0-0 libatk-bridge2…
■「lesc」で文字と2進、8進、10進、16進数への変換、逆変換 bashで8bit整数を10進,2進,8進,16進の順に並べてみる https://labunix.hateblo.jp/entry/20130923/1379923644 ASCII文字⇒16進数、16進数⇒10進数、16進数⇒ASCII文字変換 https://labunix.hateblo.jp/entry/20190405/1554394074 ASCIIコードの順序の性質と8進数エスケープの関係を整理してみる。 https://labunix.hateblo.jp/entry/20190721/1563655220 …
CNCFが認定するKubernetesの開発者向けの試験 CKAD(Certified Kubernetes Application Developer) に合格しました。 実は昨年9月に受験して一度不合格になっていて、今回のリベンジ受験でようやく合格を勝ち取りました。 失敗したことも踏まえてCKAD合格までにやったことを書き連ねます。 CKAD認定証 前提 私自身のKubernetes歴は約1年程度です。 学習を始めた段階ではPodとDeploymentは分かる、YAMLも読めばなんとなくわかる、けれど一からYAMLを書くのは自信がないといったレベルでした。 合格するまでにやったこと 試験を…
zariganitosh.hatenablog.jp
antibayesian.hateblo.jp
sechiro.hatenablog.com
yohei-a.hatenablog.jp
tapira.hatenablog.com
sleepy-yoshi.hatenablog.com
softantenna.com
techlife.cookpad.com
oretachino.hatenablog.com
