Od 20 do 24 lipca inżynier sterowania Umar Farooq, pracujący na Uniwersytecie Cambridge, uczestniczył w Imperial Robotics Summer School, zorganizowanej na Imperial College w Londynie. W centrum jego tygodnia znajdowało się pytanie: jak sprawić, aby robot prowadził dialog z grupą osób, a nie tylko z jedną.
Letnia szkoła zgromadziła początkujących badaczy, akademików i profesjonalistów z branży robotyki w intensywnym, praktycznym programie. Wykłady dotyczyły kinematyki i dynamiki robotów, percepcji i sterowania oraz uczenia maszynowego w robotyce. Specjalistyczne sesje obejmowały robotykę powietrzną, inteligencję robotów, widzenie komputerowe w chirurgii robotycznej, sensory i sterowanie inspirowane biologią oraz robotykę asystencką.
Uczestnicy odwiedzili również laboratoria Imperial College, poświęcone m.in. adaptacyjnej i inteligentnej robotyce, robotyce powietrznej, chirurgii robotycznej, manipulacji i dotykowi oraz asystencji. Wraz z badaczami z Wielkiej Brytanii i innych krajów pracowali nad konkretnymi wyzwaniami: lokomocją robotów czworonożnych, uczeniem robotów opartym na widzeniu, percepcją dotykową i zastosowaniami w ochronie zdrowia.
Projekt grupowy dotyczący interakcji wieloosobowej
Projekt grupowy dotyczył robota zdolnego do interakcji z kilkoma osobami jednocześnie, podczas gdy większość robotów społecznych jest zaprojektowana do wymiany jeden na jeden. Zespół pracował nad trzema punktami: wykrywaniem w czasie rzeczywistym osoby mówiącej, śledzeniem tożsamości każdej osoby w trakcie rozmowy oraz generowaniem naturalnych ruchów oczu i głowy, aby robot wydawał się uważny na całą grupę.
Projekt pozwolił również autorowi lepiej zrozumieć pełny łańcuch, od języka do ruchu. LLM (duży model językowy) tłumaczy intencję wyrażoną w języku naturalnym na ustrukturyzowane polecenia, które są następnie powiązane z funkcjami wysokiego poziomu robota. Kinematyka odwrotna, czyli obliczanie ruchów potrzebnych w stawach, aby osiągnąć daną pozycję, przekształca te funkcje w trajektorie stawowe. Na koniec, te trajektorie docierają do siłowników, czyli elementów wprawiających robota w ruch, za pośrednictwem jego stosu sterowania. Umar Farooq opisuje ten projekt jako praktyczne wprowadzenie do prawdziwej trudności interakcji między człowiekiem a robotem w grupie.
Finansowanie i podziękowania
Udział autora został sfinansowany przez UK RAS STEPS, który wybrał go spośród pięciu wyselekcjonowanych RTP. Jak twierdzi, program wspierał go również poza letnią szkołą, poprzez kilka warsztatów. Szczególnie dziękuje Marie Daniels za wsparcie i rady podczas procedury aplikacyjnej.
Składa również podziękowania zespołowi Imperial College w Londynie, nauczycielom, badaczom i pozostałym uczestnikom za tydzień bogaty w wymianę myśli i sprzyjające nauce środowisko.
