Chinougijutsu Co., Ltd. | “UbiMouse”, non-contact operation AI software that enables operation without touching the screen

Contact us

Osaka 06-6362-1008
Phone Weekdays 9:00-18:00
Email Email 24/7
  • 日本語
  • English
  • Français
  • 中文 (中国)
  • MENU

    AI software that can be operated without touching a screen and controlling a mouse

    Smartphone and PC can be operated by simply showing a finger. This has potential to prevent infection and contamination.

    We have developed a finger mouse AI software, UbiMouse, that allows users to easily operate the screen without touching anything with their hands and fingers. This software has the great potential to be used with devices, for examples, displays on ATMs, ordering system for restaurants, ticketing machines, etc., since these devices can be operated by a huge amount of people, this situation should be avoided from the point view of infection prevention.

     ※Nikkei made an article for this project.
     ※Kyodo made an article for this project.
     ※SankeiBiz made an article for this project.
     ※NikkeiSangyo made an article for this project on 18th May 2020.


    Our AI software working on a laptop

    (This shows the old version.)


    An application example for Sushi restaurants. Their order tablets can be controlled using “UbiMouse”

    (We put simple explanations at the end.)


    In our software, AI recognizes an edge of a finger, instead of recognizing a palm. So, we can control a position on devices with high accuracy. It’s possible to point a “point” on a screen.

    Our awesome system can work with any types of cameras, such like cameras on PCs and smartphones. You don’t need to prepare any special items for recognize your finger movement.

    Contact us for more details.


    “UbiMouse” can be included inside small edge-computing device like this.

    Working at speed around 30fps













    さらに、弊社ではAIによる画像認識技術を組み合わせることにより、世界で初めて高精度の指先認識を行っています。このため、カメラに指をかざすだけで特別な機材なく使用できるようになりました。このカメラとしてはノートPCやスマホに搭載のカメラやWebカメラなど、汎用的にどこにでも存在するカメラを使うことが可能です。従来同様のことを行うには、例えばMicrosoftのKinectなどでは専用のスティックを認識するため専用の機材が必要でした。また、大手電機メーカーの空中タッチシステムでは大掛かりな装置や高価なセンサーが必要でした。他にも、昨今はやりのVRではVR世界にインタラクトするためには3Dコントローラーなどが必要でした。 弊社の技術ではこれらの高価な追加装備を一切利用することなく使用することが可能です。





    “UbiMouse” は小さなエッジコンピューティングデバイスに組み込むこともできます。これは組み込み向け機器での動作事例。

    Other products