cles::blog

Google が AI によってファイルを判別するプログラム Magika^*1*2を公開していました^*3。

通常、Linux で拡張子がない不明なファイルの詳細を知りたい場合には、ほとんどの人はfile^*4 コマンドを使うことが多いと思います。ただし、ファイルがどのアプリケーションによって作成されたものなのかを判定するための一般的な方法はないため、file コマンドを使ったとしても内容が正しく判別されるとは限りません。file コマンドの場合には、ファイルの判定はファイルシステムテスト（ファイルが空か？特殊ファイルか？）、マジックナンバーテスト（ファイルの先頭にマジックナンバーが記載されているか？）、言語テスト（ファイルがテキストである場合には、どのような文字コードで書かれているか）の 3 つの判定が順に行われるとされています。つまり基本的にはヒューリスティックなルールを一定の順序で試してみて、該当するものがあるかどうかを判定していることになります。

これに対して、Magika は人間が作ったルールではなく、これをディープラーニングによるモデルで代替しようという試みです。

Googleが高精度かつ高速にファイル形式を判別するツール「Magika」公開 - PC Watch

Magikaはディープラーニングの力を活用し、平均精度99%以上を実現しつつ、1つのCPUで実行しても1秒間に120種類以上/数百万ファイルのファイル形式を判別できるツール。判別時間はわずか数ミリ秒で、モデル自体も比較的小さく、コアモデルは1MB未満だ。

† インストールは pip で

イントールは Python 環境があれば pip で一撃なので簡単に試してみることができます。

• ^*1: Magika
• ^*2: GitHub - google/magika: Detect file content types with deep learning
• ^*3: Magika: AI powered fast and efficient file type identification | Google Open Source Blog
• ^*4: Ubuntu Manpage: file - ファイルタイプを判定する

Google の検索結果には Googlebot がサイトをクロールしたときのキャッシュへのリンクが含まれていましたが、これがひっそりと削除されたようです。

サイトが落ちているけど内容をちょっと確認したい・・・みたいな時に便利だったんですが、まぁ使用頻度がそれほど高くない機能だったのでしょうがないという感じでしょうか。

Google検索のキャッシュリンクが廃止で過去のページが閲覧不可に - PC Watch

これまで検索結果の各Webページのキャッシュにアクセスできるリンクが用意されており、Webページの過去の状態や削除される前の状態などが確認できたが、このリンクが削除されたかたち。検索演算子「cache:」を使ったアクセスはまだ行なえるが、将来的にはこちらも利用できなくなる予定だという。

神奈川の入試ネット出願システムで Gmail での受信が正常にできない現象が発生していた件が、やっと解決したようなのでメモ。

こういう Google や Yahoo 等のフリーメールのサービスは日々 spam との戦を繰り広げているので、予告無しかつ不定期にフィルタリングのルールが変更されることがあり、メールが届かないと言われる送信側のシステム管理者にとっては常に頭痛の種です。Google は昨年、Gmail へのメール配信を行う場合のガイドラインを公表していて、実施が 2 月からに迫っていましたが、これとは関連関係ないはずです。

自分でメール配信するサービスを作るときには SendGrid などのサービスを使うというのが現在のベストプラクティスだとは思っています。

神奈川県公立高等学校入学者選抜インターネット出願システムの稼動状況について - 神奈川県ホームページ

令和6年1月10日掲載（第1報）
本システムからのメールの受信をする際、Gmailでの受信が正常にできない現象が発生しており、現在原因を調査中です。
Gmailを利用されている方は、Gmail以外のメールアドレスの利用をご検討ください。
利用者の皆様にはご迷惑をおかけして大変申し訳ございませんが、ご理解とご協力の程よろしくお願いいたします。

先日 RMA をかけた WD Black SN850 NVMe 1TB ですが、思ったよりも早く代替品が送られてきました。

・・・が、よく見ると容量が 2TB に倍増しています。
何かの間違いかと思って RMA のサイトを確認したら発送情報のところから 2TB になっているので、これはメーカ都合ということで良さそうです。

ほとんど使っていない WD Black SN850 NVMe 1TB が壊れました。

「こんな短期間で？」という感じなので、ちょっと驚きましたが Crystal Disk Info で確認すると確かに壊れています。総書込量は 201GB なので、本当にインストールしてちょっと使っただけです。

メーカーの 5 年保証がついているので RMA をかけようと思います。

Google が日本初のデータセンター (DC) を印西市に開設していました。
以前、グッドマンビジネスパークに用地購入^*1したことが報じられていたものが、やっと完成したということですね。

「すでに GCP には asia-northeast1 (東京) や asia-northeast2 (大阪) というリージョンがあるのに、なぜ国内初？」と思いましたが、これまでは equinix などのパートナーが運営している DC が利用されていたので、Google の自社所有として DC が国内初ということになるみたいです。

Google Japan Blog: 千葉県印西市にデータセンターを開設

Google は、千葉県印西市にデータセンターを開設し、本日開所式を行いました。
このデータセンターは、日本で初めてで、Google のツールやサービスを利用する際のアクセスを高速化し、より高い安定性を実現します。

• ^*1: グーグルが日本に自社データセンター建設へ、立地は首都圏屈指の「DC銀座」 | 日経クロステック（xTECH）

ストレージサーバにしていたマシンの SSD が壊れてしまったので WD Blue SATA SSD 2TB^*1に換装。

ディスク用は消耗品ですし、個人用のストレージなのでとりあえず容量重視でやすいもので行きます。

• ^*1: WD Blue™ SATA Internal SSD Hard Drive 2.5”/7mm cased | Western Digital

検索連動型広告を悪用してフィッシングサイトに誘導する手口がニュースになっていたのでメモ。
ユーザー視点から見ると「えきねっと」を検索すると、その結果のトップがフィッシングサイトへのリンクになってしまうのでかなり悪質です。

グーグル検索で偽「えきねっと」　悪用された広告枠、審査強化の訴え：朝日新聞デジタル

インターネットの「検索連動型広告」を悪用した詐欺が頻発している。昨年10月以降、JR東日本のサービス「えきねっと」をグーグルで検索すると、本物そっくりの偽サイトが画面最上部の広告枠に表示される問題が繰り返し起きた。

Fitbit Inspire HR がだいぶくたびれてきたので、新型のFitbit Inspire 3^*1 に買い換えてみました。
カラーはピンク。目立つ色の方がなくさないからという安直な理由です。

価格や重さ、大きさは　Fitbit Inspire HR とあまり変わりませんが、OLED はさらに明るく、カラー化されているので見やすくなりました。また、標準のバンドがシリコンの柔らかいタイプになったので、別途柔らかいバンドを用意する必要がなくなったところも個人的にはポイントが高いです。

Google に買収されてから初めての製品購入ですが、製品的にはそれほど変わった印象は感じませんね。

• ^*1: Fitbit Inspire 3 | 健康管理トラッカー

M.2 SSD (NGFF type 2230) を使って CFexpress Type B を作ることができるアダプタを見つけたのでメモ。

CFexpress のメモリーカードは価格的にはまだまだ高価ですが、これを使うと廉価な CFexpress カードを作ることができます。
M.2 → U.2 変換のようなものはこれまでにもありましたが、こういうアダプタは珍しいですね。
ただし、既製品と違って防水性能や放熱の問題があることには注意が必要です。

[5x Pack]SA-CFE1(B) - SSD to CFexpress Type B Storage Card Adapter – MonsterAdapter

MonsterAdapter SA-CFE1(B) is a card adapter product that can convert 2230 size M.2 SSD(Sold separately) to CFexpress Type B storage card. The converted CFexpress Type B storage card can be used in digital cameras and other devices.