SQLite

はじめに 今回は、第11回 TOPSIC SQL CONTESTに参加してみました。 TOPSIC SQL CONTESTに参加するのは、はじめてです。 TOPSIC SQL CONTEST TOPSIC SQL CONTESTは、SQLのコンテストです。 コンテスト時間内に出題された問題に対する解答（SQL文）を作成し、提出します。 topsic-contest.jp モチベーション バックエンドの学習の一貫で、SQLやDBの書籍に触れています。 また、Golangを通じてAPI/DBを構築するときにSQLが必要になることもあります。 そのため、ふと試しに素のSQLを書きたいなと思っていまし…

総括 SQLiteにおいて、SQLの書き方によっては文法エラーにならずに、 意図しない値がDBにセットされる模様。 ※見解が間違っていたらごめんなさいm( "m) 背景 下記のようなPHP関数を実行する。 実行結果としては、特定IDのレコードのカラム値がUPDATEされてほしい。 function update($id, $manual_label1, $manual_label2) { var_dump($id, $manual_label1, $manual_label2); $pdo = new PDO(DB_DSN); $pdo->beginTransaction(); $sql = …

さて、DephiでTMS Webcoreでフロント作成を考えることに したと書いていますが、データ取得で悩んでいます。 バックエンドにはRESTサーバーが必要で、Noderedでも 簡単なデータなら大したことがないのですが、データ元が必要です。 そこでDBの登場となりますが、非永続なデータばかりを使う私です。 そうリアルタイムモニタですね。 こういう仕事する人はFAの人が多いのかと思いますが、DBにデータぶち込んで それを引っ張るのは私にはできません（笑） なぜならDISK I/Oが無駄だからですが そういう設計を見たことがあり、「有りなのか？」と自問自答しました。 普通に変数でいいじゃんとも…

ヤバいですね。前回記事からだいぶ時間が空いてしまった。前回記事時点から改良を加えたんで、それを記事にします。 mymemo8.hatenablog.com アプリ概要おさらい 使用端末：Pixel6a Termuxでpython, Flaskを使用したWebアプリを制作する アプリ上では過去の取引レコードを一覧表示し、キーワードで表示を絞ることができる。また、レコードを追加できる。 レコードはSqlite3を使ってデータベース化 editorはTermuxにｲﾝｽﾄｰﾙしたEmacs CSSにはフレームワークのmilligramを使用 レコード検索を簡単にしたいのでjavascriptライブラ…

こんにちは、やまだたいし( https://twitter.com/OrotiYamatano )です。 エクセルが嫌いすぎるので本記事を書くことにしました。 目次 なぜエクセルを辞めたいのか? 前提 インストールが必要なソフトウェア プログラマーがUnity環境に入れるライブラリ 導入手順 1. DBeaverのダウンロード 2. SQLiteに必要なセットをインストールする 4. SQLiteとUnityの接続設定 5. スクリプトからの一時データの書き出しとSQLiteデータの更新 まとめ なぜエクセルを辞めたいのか? 現在ゲーム業界ではエクセルにてデータマスターを更新するのが普通になっ…

これは はてなエンジニアアドベントカレンダー2023 3日目の記事です。 はてなエンジニア Advent Calendar 2023 - Hatena Developer Blog はてなエンジニアのカレンダー | Advent Calendar 2023 - Qiita 昨日は id:pokutuna さんの blog.pokutuna.com でした。私も若い頃に同僚とGitHub上で白熱してしまい観光名所になってしまっていたような気がします。気を付けていきましょう。 さて、この記事では SQLiteでLinderaを使った日本語全文検索をする話を紹介します。 モチベーション laiso.…

またまた備忘録。 やりたいこと ディレクトリ構成 sqlite3.OperationalError: no such table: pog_lists 実行したコード（NG） エラー原因 対処 修正後の test.py やりたいこと 作成済みのテーブルから任意のレコードを取得し、ブラウザで画面表示させること。 見た目がダサすぎるのはさておき。 ディレクトリ構成 C:. │ pog.db │ test.py │ │ └─templates test.html sqlite3.OperationalError: no such table: pog_lists エラー画面 以下のコードを実行したと…

Pythonのデータ分析ライブラリであるPandasは、多くのデータサイエンティストやエンジニアにとって欠かせないツールです。ここでは、Pandasを効果的に活用するためのチートシートを作成しましたので紹介します。体が覚えるまでブックマークして利用してみて下さい。 データの読み込みと表示 色々なファイルやデータソースからデータを読み込む 読み込みの際の条件を指定する データの表示 基本的なデータの表示方法 属性（アトリビュート）を利用した表示方法 データの基本統計量の確認 データの統計量の概要を確認する 特定の統計量を表示 データの選択とフィルタリング データのソートとグルーピング 欠損値の処…

Rubyの続きです。前回はRubyの分岐や反復など制御構造について書きました。今回からはWebフレームワークRuby on Railsに入っていきます！Railsチュートリアルにトライします。初回は環境構築編です。それではいきましょう！

Jetpack ComposeのUIのテストについてかなり詳しく聞きました。 よく分かりませんでしたが、ドラッグアンドドロップのような複雑な動作もテストできるようです。 Jetpack Composeのテストについて、createComposeRule() が返すオブジェクトを用いてできることの一覧を挙げてください。 それぞれのメソッドの使い方が分かるような例をお願いします。 4. waitForIdleの使い方をもう少し詳しく教えてください。 5. runOnUiThreadについても教えてください。 UIの検証や操作の例もお願いします。 もし、ブロック内のコードを直接実行した場合、結果はど…

Roomデータベースのテスト方法も聞いてみました。 コンテキストはInstrumentationRegistry.getInstrumentation().targetContextで取得します。データベースは、インメモリーデータベースを、RoomのinMemoryDatabaseBuilder()を使用して作成します。 以前、アプリを作成したときはこの方法を知らず、逐一本番環境で実行して間違えたら処理を書き直して再度実行という気の長いことをしていました。 公式ドキュメントを見てもやり方が分からなかったのですよね・・。 RoomデータベースをJUnit4でテストする方法を教えてください。 上記…

今回は、OSSのOptunaを使って、多目的最適化をやっていきます。 具体的には、書籍「Optunaによるブラックボックス最適化」の「3.1 多目的最適化」のサンプルコードを使います。 また、Pythonのmatplotlibで、3Dのグラフで可視化します。この可視化はマウスをドラッグすることで様々な視点から3Dグラフを見ることが出来ます。しかし、Google Colaboratoryの場合、通常の方法では3Dグラフを動かすことが出来ません。その対策についても説明していきます。 この内容が参考になれば幸いです。

Pythonのデフォルトの例外＋トレースバック表示は、主にターミナル表示向けに調整されています。（次のPython 3.13からはカラー表示にも対応する予定です。） ターミナル表示用にフォーマットされたトレースバックは、（もちろんカラーを使わなければ）非構造化ログに書いても特に問題ありませんでした。しかし、1行に1つのJSONの形で構造化ログを書くときにはあまり適していない気がします。 SQLAlchemyなどの複雑なライブラリを使うとトレースバックが巨大になり、ログ転送ツール等の1レコードあたり容量制限に気をつけないといけない。 エラーとエラーの発生元が最後にくるフォーマットはログが上に流れ…

こんにちは。スパイダープラスでiOSエンジニアとして働いているJです。モバイルアプリを開発している方にはなじみのある名前だと思いますが、iOS、Android両方開発する時に使えるモバイルDBである「Realm」について、今回はお話したいと思います。 ※なお、文中でスパイダープラスとカタカナの場合は会社のこと、SPIDERPLUSと英大文字の場合はサービスのことを指します。 1. Realmの概要 2010年度後半にAlexander Stigsen、Bjarne Christiansenという二人がTightDBというプロジェクト名でスタートして、2014年にRealmと名前を変更して現在ま…

Railsプロジェクトを新規作成する機会は多くないため意外とオプションって忘れがちだと思います。 rails new コマンドのオプションなんだったっけかな〜という時のために よく使うオプション、知ってると便利なオプションをまとめてみました。 DB編 使用するDBを指定する場合は -d ほげほげ で指定できます。 デフォルトは sqlite3 です。 PostgreSQLの場合 rails new mofmof -d postgresql MySQLの場合 rails new mofmof -d mysql Oracleの場合 rails new mofmof -d oracle DBを使用し…

2024/04/11分のコミットです。 CHANGELOGへの追加はありませんでした。 Use relative paths on AR basics guide [ci skip] rails guideのActive Record Basicsの修正です。 exampleファイルのパスに絶対パスを使用している箇所があったのを相対パスに修正しています。他の箇所と合わせるため。 Merge pull request #51537 from yahonda/diag_rails_nightly_391 railties/test/command/help_integration_test.rbの…

本日は朝から夜の１０時までぶっ続けでデータモデリングとSQLiteを使ったPythonのライブラリ開発。 データドリブンやるには、一旦、職場内のバラバラなExcelデータをSQLデータベースへ集約したい。テーブル間でリレーションを持たせたい。非構造化データはJSONでSQLへ保存したい。SQLで各種検索やデータ抽出をやりたい。 いやー、この手の仕事始めてから、データクレンジング、データ正規化、自然言語処理でキーワード抽出、辞書ベースのマッチングと分類、モデリング、SQLへ集約。。。気が遠くなるほど膨大な作業。いつになったら先が見えるのか。。。 この苦労、バラバラなExceデータをつくりだした方…

Jetpack Composeでは、EditViewではなく、TextFieldを用います。 また、保持するテキストは、SpannableStringではなく、AnnotatedStringです。 再表示周りの処理が従来のものと異なるので、似た機能の別コンポーネントが用意されているということだと思います。 データベースへの保存は、Kotlinx.serializationライブラリなどを利用してJson形式にシリアライズしたものを保存するようにすると良いようです。 Jetpack ComposeではEditViewにあたるComposable関数はありますか？ 従来の方法と同様に、Spanna…

4/6 - 4/10という日程で開催された。BunkyoWesternsで参加して6位。なかなかの開催期間の長さだった。 [Web 53] denied (856 solves) [Web 184] one-shot (282 solves) [Web 302] sculpture (95 solves) [Jail 207] sansomega (230 solves) [Jail 355] javajail2 (54 solves) [Web 53] denied (856 solves) what options do i have? (URL) 添付ファイル: index.js 以下の…