2020年8月9日日曜日

A11Y Topics #002。LEGO点字ブロック、Sight Tech Global、ゲーム関連など。

※乱文・誤変換ご容赦です。

LEGO、APHと提携し米国てBraille Bricksを無償提供開始。


American Printing House for the Blind(APH)はthe LEGO Foundationと提携し、点字アルファベットや数字などをあしらったブロック「LEGO Braille Bricks」を米国の支援教育機関などへ無償配布することを発表した。
これはブロックのスタット(ジョイント部分の凹凸)で点字を表現したLEGO互換ブロック。視覚に障害のある子供が点字に親しみ学習できるよう設計されている。発表時に本ブログにエントリーした記事はこちら。
近年視覚障害者の情報取得の主流は音声が中心になりつつある。それに伴い点字の読み書きができる子供の数は減少し続けており、調査によるとその割合は10%にも満たないという。展示の習得は視覚障害者の就労においても有利に働くことがわかっており、広く親しまれているLEGOを用いることで、展示リテラシーの向上を目指す。
APHは製品を供給する他、製品の詳細と活用法をレクチャーするウェビナーも開催予定だ。LEGO Braille Bricksの詳細は公式Webで確認できる。このサイトでは、この製品を用いた様々なアクティビティ(遊び方)が掲載されており、少し読んだらちょっと遊んでみたくなった。でも日本語対応は未定なんだよね。

英国の支援団体、視覚障害者のソーシャル・ディスタンシングを支援するツールを考案。


Covid-19感染予防策の一つとして「ソーシャル・ディスタンシング」の徹底が繰り返し伝えられている。特に厳格なロックダウンが行われたヨーロッパ諸国などでは、ソーシャル・ディスタンシングはマナーではなく「ルール」としてとらえられており、他人との距離を確認しづらい視覚障害者にとって大きな問題となっている。
食料品店でヘルプを依頼しても断られてしまったり、うっかり他人に近づいてしまい怒鳴られてしまうといったトラブルも起こっているようだ。特に普段白杖を持たないロービジョンの人々は外見だけですぐに配慮の必要性を判断できないため問題は深刻だ。
そこで各国の支援団体は、周囲に視覚障害を持っていることを知らせるツールを考案し始めている。英国RNIBは視覚障害者のソーシャル・ディスタンシングへの配慮を象徴するマーク「Please give me space」を考案。現在Webで印刷用のデータを公開しており、当事者はこれを目立つ場所に身に着けて利用できる。RNIBは同時にCovid-19における視覚障害者の現状を伝える「World Upside Down」キャンペーンも実施している。
また同じく英国イングランド、ハンプシャーの視覚障害者支援団体Open Sightは、ソーシャル・ディスタンシングへの配慮をアピールする黄色のネックストラップを考案。受け取った当事者からの反応は概ねポジティブとのことだ。
もちろん生涯を周囲に知られたくないなどの理由でこれらのようなツールを積極的に使いたくない当事者も少なくない。あくまでも選択肢の一つとして用意しておき、基本的には社会全体に大して理解を広げ、他者に対する想像力を育てていく努力が求められるだろう。

新しい視覚障害者支援技術イベント「Sight Tech Global」発表。


3月のCSUN支援技術カンファレンスはかろうじて開催されたものの、それ以降に予定されていたイベントはCovid-19感染拡大の影響でことごとく中止もしくはオンライン開催に変更された。日本でも11月に開催予定だったサイトワールドの中止が決まっている。とても残念だ。
そんな状況の中、視覚障害者の支援技術に特化した新しいイベント「Sight Tech Global」の開催が発表された。このイベントは米国時間2020年12月2日から3日までの2日間完全オンラインで実施され、世界中から誰でもセッションへ参加できる。
テーマは「視覚障害者のためのAIとアクセシビリティの未来」。MicrosoftやIntelなどの大手企業からスタートアップまで、数多くのセッションが予定されており、「Nothing about us without us」の精神のもと原則的に全てのセッションに視覚障害当事者が登壇する点も特徴的だ。エントリー受付は公式Webで近日開始予定とのこと。

視覚障害者向けに開発されたiPhone/iPadアプリのリスト。


最近大幅なリニューアルが行われたApplevisに「iOS & iPadOS Apps Developed Specifically for Blind or Low Vision Users」なる記事がエントリーされていた。ここには視覚障害者向けに開発されているiPhone/iPadアプリが105本紹介されている。
ちなみにこのリストにはゲームや視覚障害者にも便利な一般向けアプリ(OCRアプリなど)は含まれていない。それでもこれだけの支援アプリがリリースされているのは心強い。基本英語のアプリだが一部は日本語でも利用できるものもある。

ゲームのアクセシビリティに関するトピックス。


その1. ホリデーシーズンに発売が予定されているPlaystation 5について、ソニーはPS5専用ソフトではDualshock 4などのPS4向け周辺機器は動作しないことを明らかにした。この発表を受け、生涯を持つゲーマーの間に懸念の声が上がっている。
運動障害、特にての動きが制限されるゲーマーにとって、使い慣れたコントローラーや独自にカスタマイズしたデバイスが動作しないということはゲームのアクセシビリティに大きな影響を与えかねない。この反応に対するソニーからのアナウンスはまだ聞こえてこないが、Xboxはこのニュースが発表された直後、TwitterにPS5と同時期にリリース予定の次世代機「Series X」は周辺機器の後方互換性を持っていることをツイートしている。

その2. PS4本体の音声読み上げについて、Twitterで興味深いやりとりがあった。スレッドは英国のPS4ユーザーが、音声読み上げオプションが設定に現れないという質問を、ソニー英国の公式アカウント@AskPS_UKに問い合わせたことから始まる。
サポートからの回答は要領を得ないもので、業を煮やした@ianhamilton氏の横レスにより、PS4本体の音声読み上げはリージョンが北米のPS4でなければ利用できないことが指摘された。さらに読み上げに対応しないメニューも数多くあるという返信も投稿されている。
「The Last of US Part II」で全盲ゲーマーに希望を与えたソニーだが、一方で本体側のアクセシビリティはまだ十分とは言えないようだ。せっかく向こう側に楽しそうな風景が広がっていても、そこへたどり着くための道が全く整備されていないのでは意味がない。北米以外の全盲ユーザーは「TLOU2」を購入しても、一人ではスムーズにゲームを始めることができない状態となっている。またTwitterのやりとりから推測すると、ユーザーサポートにアクセシビリティの情報が共有されていない可能性もある。
「TLOU2」は皮肉にもソニーのアクセシビリティに対するいびつさを浮き上がらせた。ほんきでゲームのインクルージョンを考えているのであれば、根本的な意識向上が求められるだろう。

その3. いくらゲームに豊富なアクセシビリティオプションが用意されていたとしても、そのオプションにアクセスできなければそれは存在しないことと同じだ。任天堂は「Paper Mario: The Origami King]で画面の明るさ、Joy-Conの振動、モーションコントロールのオン/オフという3つのオプションをゲーム中の特定条件でアンロックする「隠し要素」として実装していることがわかった。
これらのオプションが実際にどれだけアクセシビリティを向上するものかはわからないが、このような仕様は開発者のアクセシビリティに対する姿勢が問われかねない。任天堂はこれまでも「Pokemon」などで同様の隠しオプションを実装した前例がある。

2020年8月7日金曜日

OrCamの新機能「Smart Reading」はOCRの利便性を大きく向上させる。


イスラエルのスタートアップOrCam Technologiesは2020年7月末、同社が販売中の視覚障害者向けウェアラブルデバイス「OrCam MyEye2」およびポータブル読書支援デバイス「OrCam Read」に、新機能「Smart Reading」を提供すると発表した。まずは米国からアップデートが配信され、数週間以内に日本を含む世界各国で利用できるようになる。

これは2020年1月に開催されたCES 2020で予告されていた機能。
MyEye2およびReadには、印刷されている文字をカメラで撮影し、OCR(光学式文字認識)を用いテキストを抽出、その内容を音声で読み上げることで視覚障害者やディスレクシアの人々の読書を支援する機能が搭載されている。Smart Readingは、音声認識と自然言語処理(natural language understanding)によりこれをさらに進化させたものだ。

目でテキストを読むことができない視覚障害者にとって、OCRはとても有用な技術だ。近年はカメラ性能の向上やコンピュータビジョンの進化により認識精度も高くなっており、読書を初め郵便物や商品パッケージの確認、パソコンやゲーム機に表示されているテキストの認識に至るまで、視覚障害者の情報取得を支えている。OrCamのデバイスだけでなく、スマートフォン向けにも多くのOCRアプリがリリースされている。
ただ従来のOCRでは、認識されたテキストを先頭から末尾まで順番に音声で読み上げる必要があり、知りたい情報をピンポイントでピックアップすることは難しかった。
例えばイベントの告知チラシがあったとしよう。目が見えていれば開催日時や場所が書かれている場所を即座に見つけることができる。だがOCRで抽出したテキストを音声で読み上げる場合、それらの情報が書かれた部分まで待たなければならず、とても効率が悪い。
Smart Readingは、この「知りたい情報」を即座にピックアップして読み上げてくれる機能だ。テキスト全体の構造をAIにより解析しタグ付けすることで、音声コマンドによる情報のコントロールを実現している。


Smart Readingのチュートリアル動画によると、使い方は以下の通り。
タッチバーをダブルタップし「interactive reading」と告げるとデバイスのカメラが原稿を撮影し、音声コマンド待機状態になる。引き続き読み上げたい情報を音声コマンドでリクエストすれば、デバイスがその情報を抽出し読み上げる。例えばこのようなコマンドが使えるようだ。

read the dates(日付を読んで)
read the phone numbers(電話番号を読んで)
read the headlines(見出しを読んで)

他にも請求書の金額や飲食メニューから特定のカテゴリだけをピックアップするなど様々な情報に対応。複数の情報がある場合はその項目数とともに各項目をナンバリングする。文章を解析しセンテンスやアーティクル単位で読み上げを制御したり、リピートや全文読み上げなども音声でコントロールできるようだ。音声での操作になるため、デジタル機器に不慣れなユーザーでも簡単に使いこなせるだろう。
どこまで細かいコマンドが使えるかは不明だが、使いこなすことができれば、かなり効率的に情報を取得できるようになるだろう。もしかしたら目で読む時よりも素早く必要な情報にたどり着けるようになるかもしれない。健常者以上のパフォーマンスが得られるとしたら、これはなかなか痛快な話だ。

AIをOCRに応用するというと、手書き文字の認識や書式の判別といった、より正確さを追求するアプローチに向きがちだ。だがさすがOrCam、視覚障害者のニーズを常に探求している同社だからこそ、Smart Readingのアイデアが生まれたのではないだろうか。
願わくばこんな機能が他のOCRアプリにも採用されて欲しいな。MyEye2はなかなか手が出ないから……。


2020年8月4日火曜日

視覚障害者をソフトタッチで誘導するスマートベスト「Foresight」。

Foresight(画像引用元)

目が見えない人々にとって、自由に一人で外出するのは非常に難易度の高いミッションだ。どんなに訓練や経験を積み上げていたとしても、やっぱり迷う時は迷うし、イレギュラーな障害物に激突することもある。視覚からの情報が得られないという事実は安全かつスムーズな移動の大きな障壁となる。
そんな迷える視覚障害者のため、世界中で歩行を支援する様々なイノベーションが生み出されている。視覚障害者の歩行を支援する技術は、大きく分けると道案内を行うナビゲーションと、目の前の危険を通知する障害物検知にわけられるだろう。いずれもカメラやセンサー、GPSなどを用い、移動に必要な情報を視覚以外の手段で補足する技術だ。
ここで紹介する「Foresight」は後者に分類されるウェアラブルなデバイス。白杖と併用し、目の前にあるかつ杖では見つけにくい物体を検出することで衝突を回避したり、逆にオープンスペースを見つけて安全なルートを見つけるときなどに役立つ。

Foresightを開発したのは、米ハーバード大学の学生チームが設立した同名スタートアップ。上半身に着用するベスト型のデバイスとスマートフォンを組み合わせて使用する。特徴はコンピュータビジョン(cv)を応用したオブジェクト認識と、ソフトな触感を採用したフィードバックだ。

Foresightを着用した視覚障害者はスマートフォンを首から下げ、Bluetoothでベストと接続した状態で歩行する。
スマートフォンのカメラがユーザーの前方の様子を撮影し、CVを用いてオブジェクトの形状や動きを検出。オブジェクトの位置と距離を元に触覚を発生させるポイントと強度を計算し即座にベスト側に送信する。
なお解析に使用されるCVはオープンソースのYOLOのカスタムバージョンとのこと。

ベストの内側には複数のソフトアクチュエーターが仕込まれており、CVの解析データに従ってアクチュエーターを動作させる。そこで生み出された圧力によって障害物などの存在を着用者にリアルタイムで伝達するという仕組みだ。
ベストを着用した視覚障害者は、感じた圧力の場所と強さで前方にある壁や開けた道、通行人などを判別することができるという。

既存の障害物検知デバイスの多くは、周囲のオブジェクトの存在を「点」で通知するのに対しForesightは前方の様子を「面」で知らせてくれるため、 直感的に情報を得ることが可能になる。またバイブレーションや警告音と比べ、ソフトな圧力によるフィードバックは不快感も少なく利用者の負担を軽減する効果も期待できる。気になるのは暑さと見た目だろうか? 見た目はともかく、圧力を漏らさず感じるには体にある程度密着させる必要がありそうだ。

Foresightが採用している技術は、必ずしも最先端のものではなく、むしろローテクでシンプルな構成になっていると開発チームは語る。使用している部品は低コストで入手性も高く、故障してもパーツごとに交換が可能とのこと。技術専攻ではなくユーザーの尊厳と実用性のバランスを考慮し、目立たず直感的、かつ手ごろな価格で手に入るデバイスを目指しているという。
現在、Foresightチームはソフトウェアとハードウェアの改善に取り組んでいる。デバイスのリリース日と価格はまだ不明だが、開発者たちは2021年までに開発を完了したいと考えている。

そういえば、Foresightで思い出した。
アプローチはかなり異なるが、国内ではオーデコと呼ばれる、カメラからの映像を解析し「おでこ」で情報を伝達するデバイスが既に実用化されている。カメラで捉えた情報を複数のポイントで伝達するという点で共通する部分も多いように思える。
コンピュータビジョンやセンサー、レーダーの進化により、目の代わりとなるオブジェクト認識はかなり実用的になりつつある。あとはその情報を目の見えない人々にどのような手段で伝達するのがベストなのか。今後の研究開発に期待したいところだ。



2020年8月2日日曜日

A11Y Topics #001。Facebook、Chrome、Appleなど。


(できるだけ)定期的に、気になった支援技術関連トピックスを速報的にエントリーしていこうと思います。
あまり推敲してないので乱文・誤変換ご容赦です。

Facebook、アクセシビリティを考慮した新UIをリリース。


Facebookはthe Americans with Disabilities Act(障害を持つアメリカ人法)の署名30年となる2020年7月26日、新しいサイトデザインをリリースした。
この変更では細かいアクセシビリティの改善が施されており、スケーラブルなフォントの採用による視認性の向上とサイト構造を改善することで、スクリーンリーダーユーザーが見出しジャンプを用いてコンテンツを見つけやすくなったという。
久々にログインしてみたらこれらの変更に加え、ダークモードへの切り替え設定についてもアナウンスされていた。これはもう少し前から実装されてたのかな?
で、新しいインターフェイスを軽く試してみたのだけど、確かにニュースフィードの構造が分かりやすくなっている、ような気がする。Facebookは写真の自動代替テキストなどアクセシビリティへのいくつかの取り組みを発表しており、今後もキーボードナビゲーションの改善などを考えているようだ。
でもやっぱり個人的にはFacebook苦手だな。

Chrome、バージョン85でタグ付きPDFエクスポートに対応。


Googleは同社が開発するWebブラウザChromeの次期バージョン85で、エクスポートするPDFに見出しや代替テキストなどのタグを含める機能を追加することを発表した。安定版は8月下旬にリリース予定。
これで印刷機能を用いてPDFファイルを出力すると、元のWebページに含まれるタグがPDFファイルに反映されるようになる。この機能はバージョン84では実験的機能として「chrome://flags/」にある「Export Tagged PDF」から有効にできるが、これがデフォルトで有効になるという形だ。
これでPDFのアクセシビリティが少しは向上されると良いのだけど、現在国内で流通している非アクセシブルなPDFの多く派Wordで作成されていることを考えると影響は限定的かもしれない。それ以前にいまだWebもそんなにアクセシブルじゃないしね。スクリーンリーダーユーザーにとって、PDFはまだまだ鬼門であり続けるのだろうな。

舌で操作するコントローラー「[In]Brace」。


ドイツ、ケルン国際デザインスクールのDorothee Clasen氏によって開発中の「[In]Brace」は、舌を使ってさまざまな電子機器を制御できるマウスピース型コントローラ。マウスピースは耳に装着した無線送信機と接続され、磁気センサーでキャッチした舌の動きを伝達する。将来的には無線モジュールをマウスピースに内蔵させる計画だ。
手足の動きが不自由な人々のために、これまでは視線やブレス(呼吸)、まばたきなどを用いるスイッチコントローラが開発されてきた。だがこのようなデバイスは操作を習得するのに訓練が必要だったり、複雑な操作を実行するのが難しかったりした。舌で操作するこのデバイスは比較的簡単に使い始められ、ゲームなど複雑な操作にも対応できるという。
また開発者はこのデバイスが障害を持つ人々だけでなく、作業で両手が塞がっているケースにも役立つと考えている。例えばピアニストが楽譜をめくる操作をしたりスキーヤーがハンズフリーでスマホを操作するといった用途にも応用できそうだ。ハンズフリー操作といえば音声アシスタントが普及しているが、声を出せない場所ではこのようなデバイスは有効かもしれない。ちょっと舌が疲れそうだけどね。

インド発。Covid-19対策を施したスマートジャケット「Covest」。


ソーシャル・ディスタンシングが叫ばれる昨今、インドの研究者は、ウイルス感染を防止するためのサマザマナ仕掛けを施したスマートウェア「Covest」を開発した。
この衣服にはセンサーが搭載されており、2メートル以内に人物を検出するとアラームが鳴り周囲に警告する。混雑した場所でこの機能をオンにすると安全と開発者は語る。
さらにポケット内部には紫外線を照射するデバイスが組み込まれており、ポケットに入れたスマートフォンやマスクを素早く殺菌するという。紫外線はポケットを閉じてから30秒間だけ照射され、内部の生地は光線を通さないため人体に影響はないらしい。さらに衣服の襟部分にはビルトイン式のマスク、おまけに体温計も搭載されているという。なかなか盛り沢山なデバイスだ。
面白いのだがなんとなくアイデア商品的な雰囲気も感じないではない。視覚障害を持つ身としてはセンサーでソーシャルディスタンシングがキープできると便利かなとは思うけど、どれだけ実用的なのかな?

Apple Glassは高品質な立体音響を表現?など。


Appleが新しく取得した特許は、Apple Glassに高精度なバイノーラルオーディオ(立体音響)をもたらす可能性を示唆している。
今年中にも発表の噂もあるApple Glassの目玉はやはり拡張現実(AR)と考えられるが、立体音響はそのリアリティを強化する役目を果たすだろう。そして視覚障害者にとっても、このような技術はオーディオによるナビゲーションの可能性を大きく広げるかもしれない。BOSE ARが頓挫してしまっただけに、期待したいところ。まあ普通にリアルな立体音響が楽しめるだけでも面白そうだけどね。

秋リリース予定のiOS 14、Public Betaユーザーによる報告もどんどん聞こえてきている。現在確認されているアクセシビリティに関する変更点はこの記事にまとめられている。
また個人的に楽しみな「写真にコメントをつける」機能のレビュー記事。視覚障害者でも見える人に手伝ってもらって撮影した写真にコメントを加えておけば、後々単独で写真を整理する時も便利そうだ。iCloudでコメント同期できるのも良い。ちょっとした機能だが、視覚障害者には大きな改良点だろう。

ゲームのアクセシビリティに関するトピックス


「The Last of Us Part II」の影響からか、ゲームのアクセシビリティがにわかに脚光を浴びている。注目作品のアクセシビリティに関するニュースもかなり増えてきており、主な記事をクリッピングしておく。


ここでブラウザでプレイできるゲームをひとつ紹介。
このゲームはAccess Jam 2020のために製作された作品。あえてアクセシブルではないゲームを体験することで、ゲームにおけるアクセシビリティの重要性を強調する、というのがコンセプトのようだ。
アクセスできないゲームでイライラしたプレイヤーには、そのバリアを解消するためのヒントが提示され、よりアクセシブルになったバージョンでゲームをリプレイできる。目が見えない筆者にはこのゲームは全くプレイできなかったが、障害を持たないプレイヤーはどのような感想を持つのだろうか。

2020年前半のアクセシビリティトピックスまとめ記事


Microassistが、ADA 30周年を記念し2020年前半のアクセシビリティに関するニュースダイジェスト記事を公開している。とはいえ多くはCovid-19の影響によるトピックス。記事ではこの経験が世界をより包括的に変革することを希望しつつ締めくくっている。

手前味噌ながらADA法署名30年関連の記事クリッピングはこちら。https://bit.ly/3i24WRz
Covid-19と障害者に関する記事クリッピングはこちら。https://bit.ly/2DmteGI
どちらもDropboxからダウンロードしてお使いください。


2020年7月22日水曜日

[Mac] Voiceoverユーザーにも便利。テキスト編集を効率化するショートカットキー。


Macで長文のテキストを編集する場合、多くのユーザーはカーソルを移動させたり範囲選択をするのにマウスを使うことが多いのではないでしょうか。カーソルを文末に移動させるなら、画面をスクロールさせて文末をクリックすればそこからテキスト編集を続けられますし、文字列の選択もマウスポインタのドラッグで自由自在。
ですが画面を見ることができないVoiceoverユーザーは、そのような操作がとっても苦手です。基本的に操作はキーボードだけで行いますからね。実際、筆者はもう何年もマウスポインタを操作した記憶がありません。まあ見えないからどうにもならないわけですが。

でもマウスもタッチパッドも使わず、どうやってテキスト編集するの?
いちいち矢印キーを連打してるの?
ご安心あれ、便利なショートカットキーをマスターすれば、キーボードだけで効率的にテキストを編集することができるのです。これらのショートカットキーを覚えておけば、余分なキーストロークを省きストレスも軽減されるでしょう。

ということで、macOSで使える、主なテキスト編集関連のショートカットキーをご紹介しましょう。macOS 10.15.6のテキストエディット上で確認。Voiceoverユーザーはもちろん、画面が見えるユーザーも覚えておくと格段に効率アップするはずです多分。
なおこれらのショートカットキーの一部は、外部キーボードを接続したiPadでも使えます(ipadOS 13.6で確認)。

テキストカーソルの移動に関するショートカットキー


左右矢印 :カーソルを文字単位で移動。※Control FまたはBでも可。
上下矢印 :カーソルを行単位で移動。※Control PまたはNでも可。
Optionを押しながら左右矢印 :カーソルを単語単位で移動。

Command 左矢印 :カーソルを行の先頭に移動。※Control Aでも可。
Command 右矢印 :カーソルを行の末尾に移動。※Control Eでも可。

Command 上矢印 :カーソルを文書の先頭に移動。
Command 下矢印 :カーソルを文書の末尾に移動。
Option 上矢印 :カーソルを段落の先頭に移動。
Option 下矢印 :カーソルを段落の末尾に移動。

テキスト選択に関するショートカットキー


Shiftを押しながら左右矢印 :テキストを文字単位で選択。
Option、Shiftを押しながら左右矢印 :テキストを単語単位で選択。

Command Shift 左矢印 :行の先頭からカーソルまでの文字を選択。
Command Shift 右矢印 :カーソルから行の末尾までの文字を選択。
Command Shift 上矢印 :文書の先頭からカーソルまでの文字を選択。
Command Shift 下矢印 :カーソルから文書の末尾までの文字を選択。
Option Shift 上矢印 :段落の先頭からカーソルまでの文字を選択。
Option Shift 下矢印 :カーソルから段落の末尾までの文字を選択。

※選択されているテキストを音声で確認するには、以下のVoiceoverコマンドを使います。

VO W :選択範囲を読み上げる。
VO Wを2回 :選択範囲を1文字ずつ読み上げる。
VO Wを3回 :選択範囲のフォネティックスペリングを読み上げる。(英数のみ)

テキストの削除に関するショートカットキー


Delete :カーソル左の文字を削除。※Control Dでも可。
Option Delete :カーソル左の単語を削除。

Fn Delete :カーソル右の文字を削除。※Control Hでも可。
Fn Option Delete :カーソル右の単語を削除。

Control K :カーソルから行の末尾までを削除。
Control Y :Control Kで削除した文字をペースト。※ペーストボードには影響しない。

その他のショートカットキー


Control O :改行して1行追加する。
Control T :カーソルの左右文字列を入れ替える。



2020年7月20日月曜日

Twitter上の画像を解析し物体認識やテキスト抽出を行うBot「Image Description Bot」。


Twitterは先日、ツイートに添付した画像に代替テキスト(画像の説明文)を加える機能をデフォルト設定で利用できるように変更した。この機能が一般ユーザーの目に止まりやすくなることで直後はそこそこ話題になっていた雰囲気も感じられなくもなかったのだが、今のところさほど利用されているとは言い難いのが実情のようだ。この機能を定着させるにはまだまだ課題山積といったところだろう。

そんな今日この頃、Twitter画像の代替テキストをめぐる興味深いサービスを発見した。
Image Description Bot(@A11yImage)は、返信するだけでそのツイートの画像に含まれる物体を説明したり、テキストを抽出してくれるBotだ。

使い方は極めてシンプル。
解析したい画像が含まれるツイートに「#describeimage」をつけて返信するだけ。
するとしばらくしてImage Description Botから解析結果が返信される。写真に何が写っているか、簡単な説明が提供されるほか、テキストが含まれるイメージならそのテキストが抽出される。
さらに文字数制限を超えた場合に備え、外部リンクから解析内容を確認することもできる。視覚障害者でなくてもテキスト抽出ツールとして使えそうだ。
また解析リクエストをオープンにしたくない場合は、元ツイートに#describeimageを付けてImage Description Bot宛にダイレクトメッセージで共有する方法も用意されている。

実際にどのような感じなのか見てみよう。
例えば、ドジャースの投手David Price選手のこのツイート。
メッセージが画像に埋め込まれる形でツイートされているようだ。かなり拡散されているようだがスクリーンリーダーでは「画像」としか読み上げてくれないのでとても寂しい。


Image Description Botから返信された解析結果は以下のとおり。

Dear Dodgers Nation, After considerable thought and discussion with my family and the Dodgers, I have decided it is in the best interest of my health and my family's health for me to not play this season. I will miss my teammates and will be cheering for them throughout the season and on to a World Series victory. I'm sorry I won't be playing for you this year, but look forward to representing you next year. Stay safe, be well, and be kind. And Go Dodgers! Love, David Price 

この解析結果は返信に添付されているリンクからも確認することができる。
筆者は実際の画像を確認することはできないためどこまで正確に抽出されているかは判断することはできないのだが、彼からのメッセージは十分に伝わってきた。

長文のツイートを画像形式でアップする風習は相変わらず目立つ。ICTに熟達している視覚障害者であれば、Seeing AIやEnvisionなどの画像解析アプリを駆使したり、スクリーンリーダーJAWSやNVDAのOCR機能を用いて、画像からテキストを抽出することも可能だが、誰でも使えるというわけではない。
Image Description Botは、Twitterの画像をアクセシブルにする手段の一つとして可能性を持ったサービスといえる。解析結果が英語のみ、おそらくテキストの抽出も日本語には対応しなさそうだが、気になるツイートの画像に説明文がつけられていない時に使って見ると、何かしらのヒントは得られるだろう。

2020年6月8日月曜日

絵画の筆跡を3Dスキャンする技術は「触れる美術観賞」を実現する。


絵画は、画家特有の筆跡であったり、重ね塗りされた絵具の厚み、カンバスの微妙なテクスチャなどの「質感」を持っている。これらの情報は画像データや印刷物では必ずしも正確に伝えることはできない。
ネットや画集で手軽に世界中の名画が見られるにもかかわらず、美術館の特別展に長蛇の列ができたり、世界中の美術館をめぐる人々が多いのは、そのような理由もあるのだろう。
だがいざ「本物」を見ようとしても、その絵画が貴重であればあるほど作品と鑑賞者との距離は遠くなり、その作品の持つ質感を感じとることが難しくなる。ましてや視覚に障害を持つ人々にとってはその質感を体験する手段は存在しない。
新しく開発された「絵画の3Dスキャン」技術は、リアルとバーチャルでまったく新しい絵画鑑賞の世界を切り開くかもしれない。

米国ペンシルベニア州立大学アビントン校とニュージャージー工科大学の研究チームは、optical coherence tomography (OCT)と呼ばれるレーザー技術を用いて、絵画の高精細な3Dスキャンを実現する技術を開発した。
この技術により、絵画表面の凹凸、つまり筆跡や絵具の盛りといった立体情報を高精度な3Dデータトして保存することができるようになるという。

OCTはマイクロメートルの分解能で画像を撮影できるレーザーベースのイメージング技術。一般的には生物医学の用途で用いられることが多いが、表面の凹凸と下層構造を同時にスキャンすることができることから美術分野への応用が考案された。
だがOCTはスキャンできる面積が非常に狭い。そのため研究チームは移動しながら連続スキャンするロボット技術と、スキャンされた画像をパッチワークのようにつなぎ合わせて補正するソフトウェアを独自開発。これらを組み合わせることで広い面積の絵画の3Dスキャンが実現した。

この技術を用いれば、例えば火災や自然災害、経年劣化などで作品が破損してしまった場合にこのデータをもとに忠実な修復が可能になる。この研究にあたっては、美術史や美術品の保存に関する専門家とも密接に連携したという。

またスキャンしたデータから立体レプリカを制作することでこれまで近寄って鑑賞できなかった数々の名画に触れて楽しむことができるようになる。もちろん絵画の一部分だけにクローズアップしたモデルも簡単に作成可能だ。
そしてこの技術は特に視覚に障害のある人々に大きな恩恵を与えるだろう。これまでも作品に描かれたモチーフの輪郭を触図として制作し、全体像を伝える試みは行われていたが、絵画の質感を感じとることは難しかった。この技術を応用すれば、触感から得られる情報はさらに多様になるだろう。

研究チームのリーダーであるYi Yang氏は、コンピューター画面でさまざまな角度から見ることができる絵画の3Dモデルは、オンラインの美術教育においても大きな効果を発揮するだろうと述べている。
近年、Covid-19感染拡大により閉鎖を余儀なくされている美術館がインターネット上にバーチャルミュージアムをオープンする動きが見られるが、絵画を単なる画像としてだけでなく、立体的に閲覧することができれば、より作品への理解度は深まるだろう。ひいては障害などで普段から美術館を訪問できない人々にも、絵画の豊かな質感を感じる機会になるはずだ。

Covid-19流行の影響で「触れる」行為が避けられている昨今ではあるが、この騒動を乗り越えた未来には「触れる美術鑑賞」が当たり前になる時代がやってくるのかもしれない。


支援技術関連記事まとめ(2022年11月)※お知らせあり。

※以下のリンクをクリックするとDropboxへ接続し、ダウンロードが自動的に始まります。 ※ダウンロードファイルはHTML形式です。ブラウザで開いてください。 ※正常に表示されない場合は別のブラウザで試すか、エンコード設定を変えて見てくださ い。 ダウンロード: 海外記事 / 国...