デスクトップキャプチャ画像によるアプリケーション操作演習の進捗状況解析の検討

発表キーワード

演習進捗解析

ラーニングアナリティクス

ディープラーニング

ICTが発達した現代の情報社会においてワープロや表計算ソフトを操作して自在に文書作成やデータ処理を行う能力が重要であり、多くの学校でコンピュータリテラシー教育の一分野として、これらのアプリケーションの操作を習得するための演習が行われている。この演習授業においてコンピュータの使い方に慣れていなかったり、操作が間違っているなどして進捗が遅れる受講者を発見することは、その受講者に対して適切な助言や教導を行うために重要であると考えらえる。 そこで、本研究では一定時間ごとにキャプチャしたデスクトップ画像を解析することで、進捗状況を把握するためにディープラーニングを用いることにした。操作状況とそれに対応したデスクトップキャプチャ画像を教師データとして学習を行う。これに実際に操作したときのデスクトップキャプチャ画像を与えたとき、操作状況が得られるかどうかを検討する。