工研院電光系統所_視覺演算法工程約聘人員(P100)

• 具備以下任一項經驗者佳： 

　- 實際參與機器人與視覺整合系統開發 

　- 電腦視覺與影像處理應用（OpenCV、PCL） 

　- AI/深度學習演算法整合與應用於實體機器人專案 

• 熟悉 C++ 與 Python 程式設計，具五年以上相關開發經驗 

• 熟悉以下技術者尤佳： 

　- OpenCV、Point Cloud Library (PCL)、CUDA、Qt 

　- 物件導向程式設計、多執行緒程式架構 

　- ROS 或其他機器人軟體平台整合經驗 

• 具備良好的溝通能力、團隊合作精神、主動積極、責任感強

《工作內容》 

負責視訊處理/編碼演算法設計開發，包含AI視訊處理、超低延遲視訊壓縮軟體架構設計開發、視訊編碼前後處理演算法開發，以及參與MPEG國際標準會議。 

《職務亮點/優勢》 

參與MPEG國際標準：從演算法開發到建立參與國際標準的核心能力建構。

開發機器人/機器手臂大腦相關技術，協助產業進行「智動化」，並扣合相關的AI晶片，打造聰明又輕巧的AI大腦，其工作內容包括 

1. (技能學習)：以基礎模型/大語言模型為核心，開發高效率zero-shot、few-shot機器人技能學習框架。 

2. (快速調適)：研究機器人基礎模型(如VLA、LBM)之行為控制與優化技術。 

3. (模擬資料生成)：開發自動擬真資料生成技術、包括模擬環境建立與相關物理互動模擬、Large World Model技術。 

4. (實體資料蒐集架構)：開發透過人為示範驅動實體手臂蒐集實體資料之互動架構。 

5. (AI演算法於Edge端的部署)：包括model pruning、quantization、NAS、使用不同平台底層平行化框架(如Triton、CUDA、oneAPI)進行加速、TVM、LLVM、model compilation之相關技術開發。

《工作內容》 

負責無人載具之感測器整合與嵌入式控制韌體開發，依專案需求執行一至多項核心任務。工作內容包含： 

‐感測資料擷取與處理。 

‐通訊介面與控制邏輯設計。 

‐多感測融合演算法開發（涵蓋 IMU、GPS、LiDAR、Camera 等）。 

並需與自動導航及控制演算法團隊協作，進行模組整合、系統測試與效能優化，確保整體系統運作穩定且精準。 

《職位亮點/優勢》 

1) 跨域研發實作環境：結合感測、控制、導航與AI技術，參與從演算法到實機測試的完整開發流程。 

2) 多載具應用經驗：實際操作多旋翼無人機、無人化載具，驗證自主導航與感測整合成果。 

3) 前瞻技術導向團隊：採用 PX4、ROS、Ardupilot 等開源平台，推進飛控、MAVLink通訊與VIO/VSLAM技術研發。

運用先進人工智慧、機器學習與最佳化技術，將資料轉化為可落地的決策能力，協助企業在複雜的工業場域中實現智慧化、自動化與最佳化。主要工作內容包括： 

1. (AI 與機器學習模型研發)：研發並實作各類機器學習、深度學習、統計建模方法與預訓練模型(如 time-series foundation models)，針對工業設備與製程數據建立高準確度的預測與決策模型，用於品質預測、異常偵測與趨勢分析。 

2. (決策與最佳化演算法設計)：設計與開發最佳化演算法（數值最佳化、代理模型最佳化、啟發式演算法等），解決多目標、多限制條件下的工業決策問題，並應用強化學習（Reinforcement Learning）於設備控制、製程參數調校與策略自動學習，提升效率與穩定性。 

3. (理論引導與模型融合)：結合物理定律、工程經驗與數學模型，進行理論引導建模（Physics-informed / Theory-guided Modeling），提升模型可解釋性與泛化能力，將資料驅動模型與機制模型整合，提高模型準確度並降低對大量資料的依賴。 

4. (工業應用落地與數位雙生)：將 AI 模型實際應用於工業設備或製程的參數最佳化、能耗降低、良率提升與風險控管，建構與維運數位雙生（Digital Twin）系統，模擬真實設備與製程行為，支援情境推演、策略評估與即時決策。

智慧視覺之技術開發及維護:  

1.智慧品質回饋視覺模組 

2.智慧視覺導引定位與檢測系統 

3.機器學習式檢測模組

預判未知物件的最佳抓取姿態，主要工作內容包含但不限於： 

1.開發與優化基於深度感測器(RGBD)的多視角3D點雲處理演算法 

2.設計與訓練深度學習模型，用於無序堆疊物件的實例分割(Instance Segmentation)與物件6自由度姿態估測(6D Pose Estimation) 

3.預判隨機物件的形體、重心與最佳夾取點，解決雜亂堆疊物件揀選問題 

4.將演算法部署至邊緣運算平台(Edge Devices)，確保即時性

智慧照護機器人軟體系統、智慧醫院應用系統分析與研發

unity程式開發，AIoT裝置開發與感測資料整合

車用馬達與電力控制器(DC/DC、DC/AC、AC/DC)嵌入式系統開發 

1.開發/模擬動力控制演算法。 

2.設計電源轉換控制策略。 

3.撰寫控制與驅動程式。 

4.執行功能測試與系統驗證。 

5.產出研究報告/專利。

1.機器人控制演算法開發應用於運動控制、自主穩定策略、機器人路徑規劃與觸覺反饋控制。 

2.應用強化學習結合感知(視覺、觸覺)資訊融合控制演算法開發。 

3.多機器人協同作業演算法開發，包含任務分工、路徑生成與避障。

開發與優化機器人演算法，包括深度學習與辨識技術，提升機器人自主決策與環境適應能力。

一、機器人智能控制與整合：開發自動化機器人之AI控制演算法及中介層，並運用ROS發展機器人控制模組 

二、多模態感知整合：開發物件辨識、場景理解、事件偵測或人機互動感知等等多模態學習模型 

三、AI模型開發與部署：應用LLM、VLM、LBM等大型語言模型，發展機器人視覺、觸覺、語音辨識、行為學習與預測等應用技術，並部署模型至Edge AI裝置 

四、AI自動化機器人應用導入：設計應用導入流程、調校機器人參數與行為策略、串接工業自動化設備，以完成技術實現目標

1.機器人控制演算法開發應用於運動控制、自主穩定策略、機器人路徑規劃與觸覺反饋控制。 

2.應用強化學習結合感知(視覺、觸覺)資訊融合控制演算法開發。 

3.多機器人協同作業演算法開發，包含任務分工、路徑生成與避障。

1.開發和優化聲學感知與處理系統，應用於製造業場域之聲源定位與追蹤、聲源分離與識別、異音偵測與辨識等領域。 

2.振動/聲音訊號處理與AI演算法開發，針對專案需求優化與修改模型架構與演算法設計。 

3.評估聲學硬體設備，進行測試和優化，確保系統效能。 

4.聲音訊號的跨領域應用開發，如應用於品質檢測等。 

*技術影片與技術簡介* 

https://www.youtube.com/watch?v=vnvQZPOeTS0 

https://www.youtube.com/watch?v=u2ygf70bHig

1.使用ROS/ROS2平台進行機器人系統架構、感測器整合與功能模組開發。 

2.開發仿生機器人、機器狗或自主移動平台的控制與導航系統。 

3.撰寫與維護機器人相關的演算法。 

4.參與跨領域研發專案，與團隊密切合作，推動機器人實現。

***職缺說明*** 

1.此職缺為涵括全院之AI軟體工程師職缺，對AI軟體工程師職缺有興趣者可直接投遞。 

2.或至下列各研究單位點擊連結投遞心儀職缺。

*工作內容* 

1.資訊安全管理 

依據 ISO/SAE 21434標準，實施資安管理系統，支援資安工程，包含工具管理和品質管理系統的應用。 

2.資訊安全風險評估 

根據 ISO/SAE 21434 標準，進行系統威脅分析和風險評估(TARA)，識別潛在威脅並提出防護措施。 

3.安全需求與設計 

根據風險結果，制定安全需求並參與系統設計，以落實必要的安全機制。 

4.安全測試與驗證 

執行滲透測試與漏洞掃描，驗證系統符合資訊安全標準與防護要求。 

5.事件監控與應變 

監控系統安全狀態，及時偵測並處理安全事件，降低風險影響。 

6.文件編寫與審查 

撰寫並維護資訊安全 相關文件，參與內外部審查與稽核。 

***更多自駕車資訊*** 

工研機械所自駕車團隊大事記與技術發展https://medium.com/@bobwang_robotics/台灣工研院機械所自駕車團隊大事記-33fbcb16f8ea 

工研院機械所自駕車正式掛牌上馬路: https://www.inside.com.tw/article/17485-taiwan-auto-pilot-try-on-octobor-hsinchu 

自駕車影片: 

影片1:https://www.youtube.com/watch?v=ipS25o2z8hM 

影片2: https://www.youtube.com/watch?v=jKN4Tw7t4rM 

影片3: https://www.youtube.com/watch?v=BqKw5EtnGAo 

更多更新的影片: https://www.youtube.com/user/bobwang1973/videos?view=0&sort=dd&shelf_id=1

*工作內容* 

1.功能安全管理: 

根據 ISO 26262標準，制定安全計劃，設定安全目標與要求，並落實系統安全性。 

2.風險評估與分析: 

進行危害分析與風險評估 (Hazard Analysis and Risk Assessment)，確立安全完整性等級 (ASIL)，制定降低風險的安全措施。 

3.系統設計與開發: 

參與系統設計與開發，將安全需求融入硬體與軟體設計。 

4.測試與驗證: 

制定並執行測試計劃，以符合安全標準。 

5.文件編制與審查: 

撰寫並維護功能安全文件，如安全計劃與測試報告，參與內外部審查與稽核。 

***更多自駕車資訊*** 

工研機械所自駕車團隊大事記與技術發展https://medium.com/@bobwang_robotics/台灣工研院機械所自駕車團隊大事記-33fbcb16f8ea 

工研院機械所自駕車正式掛牌上馬路: https://www.inside.com.tw/article/17485-taiwan-auto-pilot-try-on-octobor-hsinchu 

自駕車影片: 

影片1:https://www.youtube.com/watch?v=ipS25o2z8hM 

影片2: https://www.youtube.com/watch?v=jKN4Tw7t4rM 

影片3: https://www.youtube.com/watch?v=BqKw5EtnGAo 

更多更新的影片: https://www.youtube.com/user/bobwang1973/videos?view=0&sort=dd&shelf_id=1

1.開發機器人與視覺整合之專案及應用。 

2.依專案需求整合軟硬體之通訊與控制。 

3.運用適當的深度學習、機器學習算法及傳統算法(物件辨識/分割，瑕疵檢測/量測等)。 

4.2/3D視覺模組整合，應用於機器人(如手臂/足型/專用形等)。 

5.AI視覺自動化模擬器開發。 

6.AI視覺相關客製化功能與應用開發及整合。 

7.根據專案需求，與團隊、客戶及供應商討論並執行客製化設計和製造規格討論。 

*技術影片與技術簡介* 

https://www.youtube.com/watch?v=BuUc_1zTrrg&t=1s 

https://www.youtube.com/watch?v=XwTZacLUkdY&t=2s