Přeskočit na hlavní obsah
Přeskočit hlavičku

Laboratoř senzorických systémů, vision a software se specializuje na moderní technologie skenování objektů a využití RGB-D senzorů pro identifikaci a sledování objektů v automatizovaných pracovištích. Naším hlavním cílem je vývoj inovativních softwarových nástrojů, které přinášejí nová a zajímavá řešení pro širokou škálu aplikací – od průmyslových robotů až po venkovní autonomní systémy, kde se zaměřujeme na zvyšování efektivity, spolehlivosti a bezpečnosti. Společně pracujeme na technologiích, které mohou zlepšit způsob, jakým interagujeme s robotickými systémy a automatizovanými procesy.

Kromě vědeckého výzkumu a vývoje se také věnujeme výuce studentů. Naše laboratoř poskytuje praktické zkušenosti, které studentům umožňují získat cenné dovednosti a znalosti v oblasti senzorických systémů, vision technologií a programování.

Lab-sensors-01.jpg

Zaměření laboratoře:

3D a 2D skenování objektů

Naše laboratoř využívá zejména systémy firmem Photoneo a Keyence pro detailní 3D nebo 2D skenování objektů. Tyto technologie umožňují přesné zachycení tvaru, případně i textury a barev skenovaných objektů, což nám umožňuje detekovat přesnou pozici objektů nebo digitalizovat různé objekty a provádět podrobné analýzy jejich vlastností. Díky tomu můžeme efektivně vyvíjet nové technologie a řešení, které pracují s digitálními modely reálných objektů. Tyto modely využíváme například pro tvorbu syntetických dat pro učení rozpoznávacích neuronových sítí nebo pro použití v digitálních simulačních prostředích robotizovaných pracovišť.

Monitorování pracovišť v reálném čase

Naše laboratoř je vybavena moderními kamerovými systémy, které dokáží zachycovat barevný obraz a hloubková data. Využitím těchto systémů můžeme efektivně monitorovat objekty a překážky na pracovištích. Získaná data nám umožňují plánovat trajektorie robotů v reálném čase, což je zásadní pro zajištění bezpečnosti, hladkou interakci mezi člověkem a robotem a vyhýbání se dynamickým překážkám.

V rámci našeho výzkumu se soustředíme na optimalizaci počtu a umístění kamer na pracovištích, abychom dosáhli maximálního pokrytí a efektivity monitorování. Naše systémy jsou navrhovány tak, aby dokázaly rychle a přesně reagovat na změny v pracovním prostředí, což zajišťuje bezpečné a efektivní pracovní podmínky.

Monitorování pracovišť v reálném čase

Naše laboratoř je vybavena moderními kamerovými systémy, které dokáží zachycovat barevný obraz a hloubková data. Využitím těchto systémů můžeme efektivně monitorovat objekty a překážky na pracovištích. Získaná data nám umožňují plánovat trajektorie robotů v reálném čase, což je zásadní pro zajištění bezpečnosti, hladkou interakci mezi člověkem a robotem a vyhýbání se dynamickým překážkám.

V rámci našeho výzkumu se soustředíme na optimalizaci počtu a umístění kamer na pracovištích, abychom dosáhli maximálního pokrytí a efektivity monitorování. Naše systémy jsou navrhovány tak, aby dokázaly rychle a přesně reagovat na změny v pracovním prostředí, což zajišťuje bezpečné a efektivní pracovní podmínky.

Vývoj softwarových aplikací a simulace

V naší laboratoři se intenzivně věnujeme vývoji vlastních softwarových aplikací v jazycích C++, C# a Python. Tyto aplikace jsou klíčové pro naše projekty a využíváme je například ke čtení a zpracování dat senzorů, řízení robotů, provádění experimentů atd.. Kromě vlastních aplikací využíváme také pokročilé simulační softwary jako RobotStudio, CoppeliaSim a Isaac Sim, které nám pomáhají modelovat a testovat různé scénáře v digitálních prostředích.

Dále se zaměřujeme na moderní metody strojového učení, které aplikujeme jak v rámci detekce objektů, tak i na digitálních pracovištích při trénování systémů pro vykonávání různých komplikovaných úloh. Tyto technologie nám umožňují zlepšovat naše systémy a přinášet inovativní řešení pro různé typy aplikací.

Vybavení laboratoře:

3D skenery

V laboratoři používáme zejména následující zařízení pro tvorbu 3D mračen bodů a digitalizaci objektů:

Photoneo PhoXi M (2 ks)

  • 3,2 miliónů bodů v jednom snímku, 16 miliónů bodů za sekundu,
  • přesnost 0,1 mm.

Photoneo 3D Meshing

  • komplexní řešení (skenery, otočný stůl, SW) pro digitalizaci objektů.

Photoneo Bin Picking Studio

  • SW řešení pro detekci a robotické uchopení neorientovaných součástek.
2D skenery

2D skenery využíváme pro přesné měření tvaru objektu, pro bezpečnostní aplikace, na mobilních robotech atd.:

Keyence LJ-X8080

  • profesionální liniový senzor,
  • měřící délka 44 mm, 3200 bodů v jednom snímku,
  • přesnost cca ±12,3 μm.

Sick S30A

  • profesionální bezpečnostní skener,
  • dosah 49 m,
  • úhlové rozlišení 0,25°.

Hokuyo URG-04LX

  • cenově dostupný malý 2D skener,
  • dosah 4 m,
  • úhlové rozlišení 0,36°.
Hloubkové kamery

Laboratoř je vybavena velkým množstvím různých typů hloubkových kamer (RGB-D), což jsou kamery, které kromě barevného obrazu (RGB) poskytují i informace o vzdálenostech pixelů od kamery (Depth):

Inteal Realsense D435

  • cenově dostupná výkonná RGB-D kamera,
  • rozlišení barevného obrazu max. 1920×1080, rozlišení hloubky max. 1280×720,
  • barevný obraz max. 30 FPS, hloubka max. 90 FPS.

Inteal Realsense L515

  • hloubková kamera využívající technologii LiDAR,
  • rozlišení barevného obrazu max. 1980×1024, rozlišení hloubky max. 1024×768,
  • max. 30 FPS.

Asus Xtion 2

  • rozlišení barevného obrazu max. 2592×1944, hloubkového max. 640×480.
Kamery s detekcí

Toto jsou speciální typy hloubkových kamer, které obsahují algoritmy pro detekci různých objektů:

Leap Motion, Leap Motion Controller 2

  • speciální kamery pro snímání pohybu rukou a prstů,
  • možné využití pro ovládání počítače pomocí gest,
  • vhodné ve spojení v virtuální realitou,
  • princip stereovize v IR spektru.

Microsoft Xbox One Kinect

  • senzor určený nejen pro herní konzoli Xbox One,
  • detekce postav ve scéně,
  • rozpoznávání hlasu,
  • možno získat i syrová hloubková data a barevný obraz.
RGB kamery

V laboratoři pochopitelně využíváme i "obyčejné" kamery, které poskytují pouze barevné nebo i černobílé snímky. Mimo běžných web kamer se jedná například o:

  • profesionální kamery od firmy Basler,
  • kamery od firmy OverFocus,
  • kamery od firmy ImagingSource,
  • software pro machine vision,
  • různé objektivy, filtry atd.
Další vybavení

Nezbytnou součástí vybavení laboratoře je i další pomocné zařízení, např.:

  • stativy a polohovatelné držáky kamer,
  • světla,
  • fotografický stan,
  • temná mísnost bez oken umožňující provádět experimenty za kontrolovatelného osvětlení.

Vybrané vědecké publikace laboratoře:

  • Using Virtual Scanning to Find Optimal Configuration of a 3D Scanner Turntable for Scanning of Mechanical Parts
  • Finding the Optimal Pose of 2D LLT Sensors to Improve Object Pose Estimation
  • Increasing the Reliability of Data Collection of Laser Line Triangulation Sensor by Proper Placement of the Sensor
  • Distributed Camera Subsystem for Obstacle Detection
  • Camera Arrangement Optimization for Workspace Monitoring in Human–Robot Collaboration
  • Using Elastic Bands for Collision Avoidance in Collaborative Robotics
  • Improved Pose Estimation of Aruco Tags Using a Novel 3D Placement Strategy
  • Analysis of Precision and Stability of Hand Tracking with Leap Motion Sensor

Pojďte k nám studovat

Objevte, proč je studium na Katedře robotiky tou správnou volbou. Zjistěte, co a jak můžete studovat a jaké příležitosti vás čekají.

Typy studia

Prozkoumejte různé typy studia, studijní plány a specializace, které nabízíme, a vyberte si tu nejlepší cestu pro vaši kariéru.