cles::blog

Google が AI によってファイルを判別するプログラム Magika^*1*2を公開していました^*3。

通常、Linux で拡張子がない不明なファイルの詳細を知りたい場合には、ほとんどの人はfile^*4 コマンドを使うことが多いと思います。ただし、ファイルがどのアプリケーションによって作成されたものなのかを判定するための一般的な方法はないため、file コマンドを使ったとしても内容が正しく判別されるとは限りません。file コマンドの場合には、ファイルの判定はファイルシステムテスト（ファイルが空か？特殊ファイルか？）、マジックナンバーテスト（ファイルの先頭にマジックナンバーが記載されているか？）、言語テスト（ファイルがテキストである場合には、どのような文字コードで書かれているか）の 3 つの判定が順に行われるとされています。つまり基本的にはヒューリスティックなルールを一定の順序で試してみて、該当するものがあるかどうかを判定していることになります。

これに対して、Magika は人間が作ったルールではなく、これをディープラーニングによるモデルで代替しようという試みです。

Googleが高精度かつ高速にファイル形式を判別するツール「Magika」公開 - PC Watch

Magikaはディープラーニングの力を活用し、平均精度99%以上を実現しつつ、1つのCPUで実行しても1秒間に120種類以上/数百万ファイルのファイル形式を判別できるツール。判別時間はわずか数ミリ秒で、モデル自体も比較的小さく、コアモデルは1MB未満だ。

† インストールは pip で

イントールは Python 環境があれば pip で一撃なので簡単に試してみることができます。

• ^*1: Magika
• ^*2: GitHub - google/magika: Detect file content types with deep learning
• ^*3: Magika: AI powered fast and efficient file type identification | Google Open Source Blog
• ^*4: Ubuntu Manpage: file - ファイルタイプを判定する

Google の検索結果には Googlebot がサイトをクロールしたときのキャッシュへのリンクが含まれていましたが、これがひっそりと削除されたようです。

サイトが落ちているけど内容をちょっと確認したい・・・みたいな時に便利だったんですが、まぁ使用頻度がそれほど高くない機能だったのでしょうがないという感じでしょうか。

Google検索のキャッシュリンクが廃止で過去のページが閲覧不可に - PC Watch

これまで検索結果の各Webページのキャッシュにアクセスできるリンクが用意されており、Webページの過去の状態や削除される前の状態などが確認できたが、このリンクが削除されたかたち。検索演算子「cache:」を使ったアクセスはまだ行なえるが、将来的にはこちらも利用できなくなる予定だという。

神奈川の入試ネット出願システムで Gmail での受信が正常にできない現象が発生していた件が、やっと解決したようなのでメモ。

こういう Google や Yahoo 等のフリーメールのサービスは日々 spam との戦を繰り広げているので、予告無しかつ不定期にフィルタリングのルールが変更されることがあり、メールが届かないと言われる送信側のシステム管理者にとっては常に頭痛の種です。Google は昨年、Gmail へのメール配信を行う場合のガイドラインを公表していて、実施が 2 月からに迫っていましたが、これとは関連関係ないはずです。

自分でメール配信するサービスを作るときには SendGrid などのサービスを使うというのが現在のベストプラクティスだとは思っています。

神奈川県公立高等学校入学者選抜インターネット出願システムの稼動状況について - 神奈川県ホームページ

令和6年1月10日掲載（第1報）
本システムからのメールの受信をする際、Gmailでの受信が正常にできない現象が発生しており、現在原因を調査中です。
Gmailを利用されている方は、Gmail以外のメールアドレスの利用をご検討ください。
利用者の皆様にはご迷惑をおかけして大変申し訳ございませんが、ご理解とご協力の程よろしくお願いいたします。

Google が日本初のデータセンター (DC) を印西市に開設していました。
以前、グッドマンビジネスパークに用地購入^*1したことが報じられていたものが、やっと完成したということですね。

「すでに GCP には asia-northeast1 (東京) や asia-northeast2 (大阪) というリージョンがあるのに、なぜ国内初？」と思いましたが、これまでは equinix などのパートナーが運営している DC が利用されていたので、Google の自社所有として DC が国内初ということになるみたいです。

Google Japan Blog: 千葉県印西市にデータセンターを開設

Google は、千葉県印西市にデータセンターを開設し、本日開所式を行いました。
このデータセンターは、日本で初めてで、Google のツールやサービスを利用する際のアクセスを高速化し、より高い安定性を実現します。

• ^*1: グーグルが日本に自社データセンター建設へ、立地は首都圏屈指の「DC銀座」 | 日経クロステック（xTECH）

検索連動型広告を悪用してフィッシングサイトに誘導する手口がニュースになっていたのでメモ。
ユーザー視点から見ると「えきねっと」を検索すると、その結果のトップがフィッシングサイトへのリンクになってしまうのでかなり悪質です。

グーグル検索で偽「えきねっと」　悪用された広告枠、審査強化の訴え：朝日新聞デジタル

インターネットの「検索連動型広告」を悪用した詐欺が頻発している。昨年10月以降、JR東日本のサービス「えきねっと」をグーグルで検索すると、本物そっくりの偽サイトが画面最上部の広告枠に表示される問題が繰り返し起きた。

Fitbit Inspire HR がだいぶくたびれてきたので、新型のFitbit Inspire 3^*1 に買い換えてみました。
カラーはピンク。目立つ色の方がなくさないからという安直な理由です。

価格や重さ、大きさは　Fitbit Inspire HR とあまり変わりませんが、OLED はさらに明るく、カラー化されているので見やすくなりました。また、標準のバンドがシリコンの柔らかいタイプになったので、別途柔らかいバンドを用意する必要がなくなったところも個人的にはポイントが高いです。

Google に買収されてから初めての製品購入ですが、製品的にはそれほど変わった印象は感じませんね。

• ^*1: Fitbit Inspire 3 | 健康管理トラッカー

先日、発掘した HFS+ のディスクの内容を読み取るために HFSExplorer というソフトウェアを試してみました。

この手のソフトウェアにしては珍しく Java で書かれた OSS で GitHub でソースコードも公開（unsound/hfsexplorer）されています。ライセンスは GPLv3 。ディスクをローレベルに扱う処理が Java でどのように実装されているのか気になるので、あとでコードをちょっと覗いてみようと思います。

インストーラーを使えばセットアップは簡単ですが、Java 8 以降の JRE については別途インストールすることが必要です。

Catacombae - HFSExplorer

HFSExplorer is an application that can read Mac-formatted hard disks and disk images.It can read the file systems HFS (Mac OS Standard), HFS+ (Mac OS Extended) and HFSX (Mac OS Extended with case sensitive file names).
HFSExplorer allows you to browse your Mac volumes with a graphical file system browser, extract files (copy to hard disk), view detailed information about the volume and create disk images from the volume.

基本的な使い方はFile メニューから Load file system from deviceを選択し、表示されたダイアログにある Autodetect ボタンを押すと HDD 上の HFS+ のパーティションを選択することができます。選択すると右側のツリービューに HFS+ のパーティションの中身が表示されます。

そのままファイルを個別に操作することもできますが、Tools メニューの Create disk image... を使うとディスクを丸ごと .dmg ファイルに変換できるので、古いディスクからのデータをサルベージする場合にはイメージ化を行ってからファイル操作を行う方が、速度的にもディスクの負担的にも良いと思います。

Google が Google アカウントの基本認証を 5/30 でサポート終了するようなのでメモ。

影響を受けるのは、ほとんどの場合、メーラーを使って POP や IMAP, SMTP を使う場合に限られると思います。これについては認証を OAuth に切り替えるだけで対応が可能です。すでに切り替え済みのことが多いと思いますが、Gmail をウェブ画面からでなく、メーラー（Thunderbird、Outlook など）で利用している場合には一度アカウントの設定を確認しておく必要があります。

安全性の低いアプリと Google アカウント - Google アカウント ヘルプ

アカウントを安全に保つため、2022 年 5 月 30 日より、Google は、ユーザー名とパスワードのみで Google アカウントにログインするサードパーティ製のアプリとデバイスについてサポートを終了いたします。

Google が「一部の個人情報（PII）または晒し行為のコンテンツを Google 検索から削除する」ページから申請できる個人情報(PII: Personally Identifiable Information)の削除について、その範囲を拡大していたのでメモ。

幸いにもサーチエンジンにセンシティブな個人情報をインデックスされた経験はありませんが、いざというときのためにこういう手段があることも認識しておいた方が良いですね。

Google、検索での個人情報削除申請の適用範囲を拡大 - PC Watch

今回のポリシー更新では、削除を申請できる情報の種類を追加。個人情報窃取を引き起こしうる電話番号やメールアドレス、住所などといった個人の連絡先情報、ログインに用いる機密情報なども対象となった。

Java SE の脆弱性 CVE-2022-21449 について JPCERT/CC のアドバイザリが更新されていたのでメモ。

問題になっているのは ECDSA の署名のアルゴリズムでゼロのチェックが抜けていた^*1というもので、これによってどんな場合でも署名検証が成功するようになってしまうみたいですね。

いずれにせよ、Java 使っている場合には早めにパッチ適用が必要そうです。

2022年4月Oracle製品のクリティカルパッチアップデートに関する注意喚起

脆弱性が悪用されると、細工したデジタル署名を用いた第三者が、ECDSA署名方式による署名検証を成功させ、不正にデータにアクセスするなどの可能性が指摘されています。詳細および最新の情報については、Oracle Corporationや脆弱性の発見者などが提供する情報を参照いただき、対策実施を検討してください。

† 参考

• Oracle Critical Patch Update Advisory - April 2022
• CVE - CVE-2022-21449

• ^*1: CVE-2022-21449: Psychic Signatures in Java – Neil Madden