現実世界からグラフィックエディターに画像を転送するためのインターフェイスのプロトタイプ

シリル・ディアニュ (シリルダイアグネ）、フランスのアーティスト、デザイナー、プログラマー、ユーザーインターフェイス分野の実験者、 опубликовал アプリケーションプロトタイプ arカットペースト、拡張現実テクノロジーを使用して、現実世界からグラフィック エディターに画像を転送します。 このプログラムを使用すると、携帯電話を使用して任意の実際のオブジェクトの写真を希望の角度から撮影できます。その後、アプリケーションは背景を削除し、このオブジェクトのみを残します。 次に、ユーザーはグラフィック エディタを実行しているコンピュータ画面上で携帯電話のカメラの焦点を合わせ、点を選択して、その位置にオブジェクトを挿入します。

コード サーバー部分が書かれています Pythonで、そして モバイルアプリケーション React Native フレームワークを使用した TypeScript を使用する Android プラットフォームの場合。 写真内の被写体を強調表示して背景をクリアするには 適用された 機械学習ライブラリ BASネット、PyTorch と torchvision を使用します。 オブジェクトを挿入したときに携帯電話のカメラが向けていた画面上の点を確認するには、次の手順を実行します。 中古 OpenCVのパッケージとクラス SIFT。 グラフィック エディターと対話するために、単純なサーバー ハンドラーがシステム上で起動され、画面上の特定の X および Y 座標に挿入する画像が送信されます (現在、Photoshop リモート コントロール プロトコルのみがサポートされており、他のグラフィック エディターのサポートはサポートされていません)。将来追加されることが約束されています）。

出所： オープンネット.ru