革新的な語学学習ツールイマーシブ英語学習 v1.0.17(初の一般公開版)が、Steam で配信開始されたことをお知らせします!
イマーシブ英語学習は、ゲームをプレイしながら英語力を伸ばしたい PC ゲーマー向けに設計されています。キーを1回押すだけでゲームを一時停止し、画面上の英単語を即座に認識して、リアルタイムで語彙を学習できます。さらに、プレイ動画を録画し、後で復習できるカスタム学習素材として活用できます。
主な機能:
- ゲームを即時一時停止して画面上の英単語を特定・検索
- 統合単語帳と辞書
- プレイ動画を録画して自分専用の学習リソースを作成
- 幅広いPCゲームに対応
ゲームと言語学習が好きな方は、このユニークな機会をお見逃しなく!
詳細と入手はこちら:
https://store.steampowered.com/app/4184050/_Immersive_English/?l=japanese
マイナーアップデートです。以下を修正および/または追加しました:
- Steam オフラインモードへの対応を追加
- メインウィンドウの動画パネルでスペースキーによる再生/一時停止に対応
- メインウィンドウの動画パネルで「S」キーによる単語検索開始に対応
- UIの細かな改善
このリリースでは、第2の文字認識エンジン(tesseract)を追加しました。より高速ですが、場合によっては精度が低いことがあります。設定ダイアログで有効化できます。
そのほか、以下を修正および/または追加しました:
初期設計では、プレイヤーが理解しづらい会話に出会うと、ゲームを一時停止し、未知語を1語ずつ調べ、複数の意味から適切な意味を選び、最後に文全体を理解する必要がありました。
翻訳拡張機能は新しいアプローチを提供します。まず文全体を翻訳し、その訳文から未知語の意味を推測し、学習したい単語だけをクリックして調べ・記憶できます。これにより没入型の英語学習がよりスムーズになります。
翻訳処理はローカルPC上で実行され、かなり多くのメモリを消費します。
- medium モデルは 3.6 GB のメモリが必要
- small モデルは 2.3 GB のメモリが必要
- tiny モデルは 500 MB のメモリが必要
PC メモリが 16 GB の場合、最も良い出力が得られる medium モデルを推奨します。
そのほか、以下を修正および/または追加しました:
- 内蔵GPUでの安定性を改善
- セッションエクスポートでプレーンテキストファイルも出力するように変更
マイナーアップデートです。以下を修正および/または追加しました:
- 最新NVIDIAドライバとの互換性を改善
- 排他モードで動作するゲームとの互換性を改善
リアルタイム字幕翻訳機能の準備が整いました!
これまでのユーザーガイドでは、RPG は「ユーザーの語彙力がゲーム内の会話で使われる語彙におおむね近い場合」にのみ、英語学習におすすめできると説明していました。これは、ゲーム内の会話に未知語が多すぎると、単語を調べるために頻繁に一時停止が必要になり、没入感を保ちにくくなるためです。しかし、この状況は変わりました。
リアルタイム字幕翻訳により、ユーザーはゲームのメインストーリーに集中しながら、
必要な語彙だけを選んで学習できるようになります。
この機能を支えるため、翻訳に使用するローカル LLM モデルもアップグレードしました。モデルはより高速に動作し、翻訳精度も向上しています。また、テキスト検出アルゴリズムも最適化しました。その結果、リアルタイムのテキスト検出が消費する CPU リソースは従来とほぼ同等です。なお、テキスト翻訳には引き続き多くの CPU リソースが必要なため、PC の性能に応じて適切なモデル (medium または small) を選択することをおすすめします。
字幕領域はデフォルトで画面下部にあります。ゲームを一時停止中に字幕領域を調整できます。字幕領域の境界を正確に設定すると、認識精度を大きく向上できます。
現時点でこのリアルタイム字幕翻訳機能は実験的機能であり、白色とシアン色の字幕のみに対応しています。
ボーダーレスウィンドウモードまたはウィンドウモードで動作するゲームに対応しています。利用中に問題があれば、Steam コミュニティでぜひフィードバックをお寄せください。
リアルタイム字幕翻訳に加えて、以下の新機能も追加されました:
-
即時一時停止:リアルタイム字幕翻訳を有効にしている場合、一時停止キーを押してもテキスト検出完了まで 1〜2 秒待つ必要がなくなりました。
代わりに、リアルタイムテキスト検出モジュールの結果を即座に再利用します。
-
カスタム領域テキスト認識:ゲーム一時停止中に Ctrl + 左クリックで矩形領域を指定できます。指定した領域内でテキスト認識を実行します。