Motion2Vec анализира публично достъпни видеоклипове за хирургия и използва тези умения, за да научи хирургически робот да Винчи да прилага при зашиване

Хирургията има репутацията на интелектуална професия, но голяма част от действителната хирургическа практика включва прости, рутинни задачи, които се изпълняват на почти всеки пациент. Зашиването е едно от тези и екип от изследователи от Калифорнийския университет в Бъркли и Intel смята, че е възможно да се научи робот да зашива, като му се наложи да се учи от видеозаписи за зашиване, извършвани от истински хирурзи. Това може един ден да позволи на човешките хирурзи да се съсредоточат върху основните си задачи, като същевременно оставят роботите да вършат монотонната работа.

Motion2Vec анализира публично достъпни видеоклипове за хирургия и използва тези умения, за да научи хирургически робот да Винчи да прилага при зашиване | ✅ Д-р Стоян Арнаудов - Ортопед | Травматолог ⭐️

Екипът вече е разработил система, наречена Motion2Vec, която е гледала и анализирала много публично достъпни видеоклипове за хирургия и е използвала тези знания, за да научи хирургически робот да Винчи да прилага шевове през разрези. Техните констатации, които все още не са прегледани, но са публикувани в arXiv, показват „85,5% точност на сегментиране средно, което предполага подобряване на производителността в сравнение с няколко съвременни базови линии, докато имитацията на кинематична поза дава 0,94 сантиметра грешка в позиция на наблюдение на тестовия набор.“

Екипът разчита на набор от съвременни изчислителни техники, включително невронни мрежи и сиамски мрежи, като последните са начин за сравняване и групиране на изображения, които си приличат, за да предоставят начин за обучение на задачи на роботи, които в момента могат да изпълняват само хората. Може би с достатъчно видеоклипове за гледане, някой ден системата може дори да помогне при извършване на рутинни процедури.

Ето демонстрация на системата Motion2Vec:

А ето и презентация за технологията на Международната конференция по роботика и автоматизация:

Извор arXiv: Motion2Vec: Полууправлявано представителство Учене от хирургически видеоклипове

Връзка: Информационна страница за проекта Motion2Vec …