CSV

CSVファイルを読み込んで文字列の置換を行った後、 csv.readerに読み込ませたい。メモリ内のデータをStringIOに変換すると csv.readerに読み込ませることができた。「test.csv」の内容 a,b 1,&lt2&gt 3,&lt4&gtimport csv import io with open('test.csv') as f: #ファイルの1行目がタイトル行なので読み飛ばす header = f.readline() #ファイルの2行目以降を読み込む data = f.read() #文字列置換 data = data.replace('&lt', '<').rep…

ダブルクオーテーション内のカンマは無視してくれます。 (区切り文字として認識しない)CSVファイルの内容 A,B,C a,"b,b",c d,"e,e",fPythonプログラム import csv with open('test.csv') as f: header = f.readline() #1行目はタイトル行なので読み飛ばす csv_data = csv.reader(f) for row in csv_data: #CSVファイルの各行を処理する print(row[0]) print(row[1]) print(row[2]) print() プログラムの実行結果 a b,b …

CSVファイルをADOで扱う連載の22回目です。前回の記事はこちらになります。 hirocom777.hatenadiary.org 集計関数は便利だけど 前回は、集計関数についてご紹介しました。CSVファイルの内容を色々な形で集計できます。 でも、集計関数はWHEREの後に記述できないんです。つまり、集計関数で得た値を元にデータを絞ることができないんです。今日はこの問題の解決方法をご紹介したいと思います。 今回もSQLを指定してCSVファイルを確認できるツール（CSV_ReaderSQL）を使います。ツールは以下からダウンロードしてください。 CSV_ReaderSQL110.zip - G…

電子レセプトとは？ UKEファイルとは？ 電子レセプトってそもそもなに？ レセプトってなに？レセプトの仕組みって？はこちら参考に ざっくらばんに言うと レセプトは 国への7〜10割分の医療費請求用紙です 支払基金（大まかに言うと社保）、国保 が審査をし これ駄目じゃない？これ違うんじゃない？このレセプト見てなにか感じませんか？というのを 返戻してくる 全然駄目じゃん、こんなの受け付けませんよというのを 増減点 突合で返してくる（これに対して異議申し立て等あるが詳細はいつか） 支払基金、国保を通過したレセプト分を保険者に請求しその分 医療機関にお金が振り込まれる 支払基金、国保は医療機関の味方と…

はじめに みなさんこんにちは、三井情報株式会社です。ServiceNowのCatalog Itemでは、申請者側に可変的な情報を入力してもらうために Multi-row variable set（以下、MRVS）を使用するケースがあります。 しかし、 MRVS は1件ずつ登録や編集する形式ですので、入力してもらう情報が何十件、何百件となると申請者側へ負担がかかってしまいます。 そこで、申請者側の負担を軽減する方法として、申請者側 はcsvファイルに申請情報を登録し、そのcsvファイルをServiceNow内でインポートする形式を考え、今回Catalog Itemに添付されたcsvファイルを自動…

CSVファイルをADOで扱う連載の19回目です。前回の記事はこちらになります。 hirocom777.hatenadiary.org スマートな結合 前回は、交差結合と内部結合についてご紹介しました。複数のファイルから色々な結果を導きだせるのは魅力的です。 ところで、前回は交差都合で得られた結果から条件を指定して内部結合の結果を得ていました。でも、実際にはこの手法は使われることがほとんどありません。もっと効率よく同じ結果を得る方法があるからです。それがINNER JOINです。 今回もSQLを指定してCSVファイルを確認できるツール（CSV_ReaderSQL）を使います。ツールは以下からダウ…

これはなに？ Streamlit上で生成したデータフレームをCSVとして出力し、Excelで読み込むと日本語が文字化けして困ったので、Excelで文字化けしないCSVのダウンロードファイルリンクの生成方法をメモとして残します。

メールボックスには、送受信可能なプライマリアドレスと受信のみ可能なエイリアス(セカンダリアドレス)が登録可能です。 今回は複数のユーザーのエイリアス (セカンダリアドレス) を一括で削除する方法として、Powershellで以下のコマンドレットにて可能です。 個別で削除、および、複数のユーザーを一括で削除する手順をご紹介します。 ExchangeOnlineに接続してから実行してください。 it-bibouroku.hateblo.jp (adsbygoogle = window.adsbygoogle || []).push({}); 個別にエイリアスを削除する手順 [構文] Set-Mai…

最近一部の界隈でWordleという英単語当てゲームが流行っています。www.powerlanguage.co.uk5文字の英単語を最大6回のチャンスで当てるというシンプルなゲームです。ただし適当な文字を打ち込んでも存在しない英単語だと弾かれます。1日1単語が出題されるため、SNS上でシェアしあって楽しむことができます。Wordle 215 4/6⬛🟨🟨⬛🟩⬛⬛⬛⬛🟨🟨🟨🟩⬛🟩🟩🟩🟩🟩🟩— すてにゃん (@stefafafan) January 19, 2022 初手で使う単語は何が良いのか 適当な単語を入れるとあってる文字もしくは位置が違うけど合ってる文字は色がついてヒントとして使えます。（逆…

右の画像は、会議室を即座に納得させます。 その新しいクライアントを売り、上司の承認を得て、あなたの後ろにいるチームを結集させます。データ視覚化ツールは、混乱した数字全体を、すべてを伝える鮮明な画像に変換します。 適切な製品を使用すると、圧倒的な量のデータを指揮して、明確で説得力のあるストーリーを伝えることができます。プレゼンテーションが終了した後も、聴衆に響き渡るビジュアルを残してください。 この投稿では、最高のデータ視覚化ツールの完全な概要と、意思決定の際に何を探すべきかについて説明します。 ＃1 – Tableauレビュー—エンタープライズに最適最高のデータ視覚化ツールのためのTablea…

ペピイ（PEPPY）とは？ ペットの健康管理やしつけなど飼い主さんに知っていただきたい情報や8,000点ものペットグッズをご紹介している愛犬・愛猫の総合情報サイト「ペピイ」は、ドッグフード・キャットフードをはじめとしたペット用品通販やペットのお役立ち情報、ペットの施設検索など、ペットの総合情報サイトです。 スクレイピングツールの概要 ScrapeStormとは、強い機能を持つ、プログラミングが必要なく、使いやすく人工知能Webスクレイピングツールです。違う基盤のユーザーに二つのスクレイピングモードを提供し、1-Clickで99％のWebスクレイピングを満たします。ScrapeStormにより、…

機械学習の実践例として、プロ野球選手の成績と年俸のデータを使って、機械学習モデルの作成・予測実行してみました。イメージは以下のとおりです。 準備 Pythonの設定 プログラムはPythonを使用し、機械学習のアルゴリズムは、Kaggle等のデータ分析コンペでも人気のLightGBMを使用します。 Pythonの設定方法・使い方については、必要に応じて過去の記事をご確認ください。 データサイエンティストを目指す方向け Pythonセットアップ方法（Windows版） - Kevin's Data Analytics Blog Jupyter Notebook：データサイエンティストを目指す方に…

この記事で使用しているバージョン：Vroid2Pmx_1.00.04、PmxTailor_1.00.02 注意事項 こちらの記事を最初に読んで、ご理解いただけた方のみ作業を進めてください。 rio-vroidmmd.hatenablog.com はじめに 例に使うモデルの紹介 PmxTailorでスカートに物理を入れる さいごに はじめに この記事ではPmxTailorを用いた多重物理の設定方法を解説します。 Q：多重物理ってなに？A：スカートと内側のフリルスカート両方に物理を入れる…みたいな、ふたつ以上の重なる物理設定のことです VRoidで言うところの重ね着に物理を入れるような感じです。 …

本日1/20(木) 08:36、summary_by_date.csv更新されました。今日の4/12は4,689だそうです。https://vrs-data.cio.go.jp/vaccination/opendata/latest/summary_by_date.csvhttps://www.kantei.go.jp/jp/content/vaccination_data5.xlsx新型コロナワクチンの接種状況（一般接種（高齢者含む））グラフhttps://cio.go.jp/c19vaccine_dashboard今日の4,689、1/14(金)、9/28(火)の値と同じなのもさることなが…

ユーザーメールボックスを共有メールボックスに変換、または、共有メールボックスをユーザーメールボックスに変換することが可能です。 今回は、パブリックフォルダを共有メールボックスに変換できるかについてご紹介していきたいと思います。 結論から言うと、パブリックフォルダを共有メールボックスに変換する機能はありません。 そのため、パブリックフォルダを共有メールボックスとするには、以下の流れで共有メールボックスを作成し、メールデータを移行することで可能です。 (adsbygoogle = window.adsbygoogle || []).push({}); パブリックフォルダから共有メールボックスに変更…

はじめに 将棋のデータ分析をしてみたくて、Pythonのスクレイピングを学んでみた。目標は、棋士の戦法別勝率、同一局面検索、戦型ごとの対局数をグラフ化して流行している戦型を見つける、などができればと考えている。 勉強に使った教材 Python × スクレイピング https://www.youtube.com/playlist?list=PL4Y-mUWLK2t1LehwHVwAqxXTXw5xd-Yq8 スクレイピングに必要なselenium,BeautifulSoup,requestsなどの扱い方がわかりやすく説明されている。 将棋DB2サイトにある棋譜を自動で取得 shogidb2.co…

C#で作られているSDKとしてはUnity SDKがありますが、Unity以外の環境では利用できません。そこで有償のテクニカルサポートは提供していませんが、コミュニティSDKとしてC# SDKを開発中です。こちらは純粋なC#で作られており、Xamarinや.NETアプリケーション開発に利用できます。 今回はこのC# SDKがファイルストアへのアップロードに対応したので、使い方を紹介します。

読書メーターとは？読書メーターは、読んだページ数や冊数などの読書量をグラフにして、読書記録したり、日本中の読書家さんたちとコミュニケーションができるサービスです。グラフや、本棚、1800万件を超える感想・レビューも。新たな本との出会いや読書仲間とのつながりが、読書をもっと楽しくします。スクレイピングツールの概要ScrapeStormとは、強い機能を持つ、プログラミングが必要なく、使いやすく人工知能Webスクレイピングツールです。違う基盤のユーザーに二つのスクレイピングモードを提供し、1-Clickで99％のWebスクレイピングを満たします。ScrapeStormにより、大量のWebデータを素早…

本日1/19(水) 08:36、summary_by_date.csv更新されました。今日の4/12は4,691だそうです。https://vrs-data.cio.go.jp/vaccination/opendata/latest/summary_by_date.csvhttps://www.kantei.go.jp/jp/content/vaccination_data5.xlsx新型コロナワクチンの接種状況（一般接種（高齢者含む））グラフhttps://cio.go.jp/c19vaccine_dashboard また変えちゃったよ、せっかく4,690、4日連続続いたのに、、🤣🤣🤣 今日…