工研院機械所-自駕車模擬驗證工程師(D300)

1. 影像資料蒐集與處理：協助資料蒐集與整合，應用CV或生成技術進行前處理、資料擴增。 

2. 應用Docker技術: 建立穩定的AI模型執行環境。 

3. 視覺模型實作與應用: 協助探索、串接、測試Object detaction/segmentation/Tracking等技術。 

4. LLM實作與應用: 協助探索、串接、測試大語言模型，協助開發Context Engineering。 

5. 協助模型訓練：協助訓練AI模型，根據資料特性提供調整建議，協助優化模型性能。

*工作內容* 

1.資訊安全管理 

依據 ISO/SAE 21434標準，實施資安管理系統，支援資安工程，包含工具管理和品質管理系統的應用。 

2.資訊安全風險評估 

根據 ISO/SAE 21434 標準，進行系統威脅分析和風險評估(TARA)，識別潛在威脅並提出防護措施。 

3.安全需求與設計 

根據風險結果，制定安全需求並參與系統設計，以落實必要的安全機制。 

4.安全測試與驗證 

執行滲透測試與漏洞掃描，驗證系統符合資訊安全標準與防護要求。 

5.事件監控與應變 

監控系統安全狀態，及時偵測並處理安全事件，降低風險影響。 

6.文件編寫與審查 

撰寫並維護資訊安全 相關文件，參與內外部審查與稽核。 

***更多自駕車資訊*** 

工研機械所自駕車團隊大事記與技術發展https://medium.com/@bobwang_robotics/台灣工研院機械所自駕車團隊大事記-33fbcb16f8ea 

工研院機械所自駕車正式掛牌上馬路: https://www.inside.com.tw/article/17485-taiwan-auto-pilot-try-on-octobor-hsinchu 

自駕車影片: 

影片1:https://www.youtube.com/watch?v=ipS25o2z8hM 

影片2: https://www.youtube.com/watch?v=jKN4Tw7t4rM 

影片3: https://www.youtube.com/watch?v=BqKw5EtnGAo 

更多更新的影片: https://www.youtube.com/user/bobwang1973/videos?view=0&sort=dd&shelf_id=1

協助深度學習模型應用及產品開發，包含：資料收集、資料清理、資料前處理、模型設計、模型訓練、模型佈署，模型效能評估等。開發影/音資料之分類、偵測、切割、生成等相關技術，並結合運用深度強化學習於規劃、排程等問題，應用領域包含：智慧城市、智慧通訊、智慧工廠等。

網管資料收集、整理、標記、模型訓練與整合

*工作內容* 

1.功能安全管理: 

根據 ISO 26262標準，制定安全計劃，設定安全目標與要求，並落實系統安全性。 

2.風險評估與分析: 

進行危害分析與風險評估 (Hazard Analysis and Risk Assessment)，確立安全完整性等級 (ASIL)，制定降低風險的安全措施。 

3.系統設計與開發: 

參與系統設計與開發，將安全需求融入硬體與軟體設計。 

4.測試與驗證: 

制定並執行測試計劃，以符合安全標準。 

5.文件編制與審查: 

撰寫並維護功能安全文件，如安全計劃與測試報告，參與內外部審查與稽核。 

***更多自駕車資訊*** 

工研機械所自駕車團隊大事記與技術發展https://medium.com/@bobwang_robotics/台灣工研院機械所自駕車團隊大事記-33fbcb16f8ea 

工研院機械所自駕車正式掛牌上馬路: https://www.inside.com.tw/article/17485-taiwan-auto-pilot-try-on-octobor-hsinchu 

自駕車影片: 

影片1:https://www.youtube.com/watch?v=ipS25o2z8hM 

影片2: https://www.youtube.com/watch?v=jKN4Tw7t4rM 

影片3: https://www.youtube.com/watch?v=BqKw5EtnGAo 

更多更新的影片: https://www.youtube.com/user/bobwang1973/videos?view=0&sort=dd&shelf_id=1

開發智慧機器人影像AI技術，參與下列一至多項技術研發: 

1. VLM視覺語言模型導航、LBM大型行為模型導入。 

2. 2/3D視覺模組整合，應用於機器人(如手臂/足型/專用形等)。 

3. 影像即時追蹤與地形分析技術。 

4. 多機協作編隊與群控技術。 

5. Omniverse仿真模擬驗證平台驗證。 

6. 多足機器人實機整合開發。

1.開發機器人與視覺整合之專案及應用。 

2.依專案需求整合軟硬體之通訊與控制。 

3.運用適當的深度學習、機器學習算法及傳統算法(物件辨識/分割，瑕疵檢測/量測等)。 

4.2/3D視覺模組整合，應用於機器人(如手臂/足型/專用形等)。 

5.AI視覺自動化模擬器開發。 

6.AI視覺相關客製化功能與應用開發及整合。 

7.根據專案需求，與團隊、客戶及供應商討論並執行客製化設計和製造規格討論。 

*技術影片與技術簡介* 

https://www.youtube.com/watch?v=BuUc_1zTrrg&t=1s 

https://www.youtube.com/watch?v=XwTZacLUkdY&t=2s

 具Android App 開發經驗，特別是需與裝置藍牙連線之App 尤佳。 

 程式語言 : 熟悉 Kotlin 或 Java。 

 開發工具 : 熟悉 IDE（如 Xcode、Android Studio）的使用與版本控制工具（如 Git）。

研讀並實作相關調度演算法論文實作，並與團隊進行模型雛形建置與開發，具體任務包含: 

1. 協助使用 Omniverse Isaac Sim 建構工廠／倉儲場景，部署多台 AMR／AGV 模型 

2. 設計並執行搬運路線、任務點配置與避障策略，模擬真實搬運流程 

3. 分析搬運過程中的動線、堵塞與瓶頸，撰寫通行率、交通熱區分析報告 

4. 撰寫模擬流程文件與分析報告，建立可重現的測試基準（benchmark）

晶片數位設計。 

需具備：FPGA專題經驗/Verilog。

硬體電路驗證測試。 

需上過電子學、電路學、邏輯設計相關課程。

PC端程式設計。 

需具備：C/C++/GUI技能。

iOS android開發。 

需具備Swift or java or kotin程式撰寫能力。

1. 2D/3D影像與電腦視覺應用系統開發 

2. 機器學習演算法開發 

3. 電腦繪圖演算法與三維顯示應用系統開發

具2年以上網頁開發經驗 （依作品實力為主，年資為輔）  

熟悉 React、NextJS、TypeScript、TailwindCss 至少其中一種。  

熟悉網頁RWD設計、UI組件庫  

撰寫單元測試經驗  

具備基礎網頁安全相關知識  

在高度維護性下，與團隊製作並實踐系統前後端整合開發，參與專案需求討論，提供技術建議與優化體驗。  

參與軟硬體整合系統技術開發、部分後端介面等開發。  

維護系統專案，並持續對原專案提供優化。

針對智慧音場、空間音訊、人聲處理之核心技術進行模型設計，並研究演算法設計整合與優化，完成應用程式開發。主要工作內容包含：  

語音資料集蒐集與處理：收集、標註和處理大量語音數據，用於模型訓練和測試。  

演算法開發：開發和優化語音識別（ASR）、語音合成（TTS）和語音識別技術，針對專案需求優化與修改模型架構與演算法設計。  

模型訓練：使用機器學習和深度學習技術訓練語音模型，提高識別和合成的準確性和效率。  

性能優化：針對不同應用場景，優化演算法的性能和資源佔用。  

技術研究：跟蹤最新的 AI 和語音技術發展與會議期刊論文，並將其應用到專案中。

工作內容：  

一、負責智慧健康系統及相關軟體之設計開發與維護，確保系統穩定性及安全性。  

二、配合專案需求主動研究新技術，並與團隊成員合作，提出創新解決方案。 

三、參與系統測試與除錯工作，確保產品質量符合標準。 四、提供技術支援與維護服務，確保系統正常運作，滿足客戶需求。

多模態感知與理解技術研發  

開發跨模態技術（視覺、語音、文字），提升智慧機器人對環境與人類行為的理解能力。  

優化多模態 AI 模型的效能，確保能高效應用於多平台場景。  

AI 模型效能優化與資源效率提升  

進行 AI 模型微型化，包括 模型壓縮、量化、剪枝、知識蒸餾 等技術，提升推理效率並降低計算資源需求。  

研究並應用 智慧運算技術與大規模模型推論規劃，提升 AI 應用的可行性與效率。  

大型 AI 容器化微服務系統開發  

專注於 GAI（生成式 AI）、AI 及 Edge AI 技術，設計並開發 容器化微服務系統，支援智慧機器人應用中的彈性部署與高效運行。

1. 負責機器人之強化式學習/模仿學習等技術開發 

2. 熟悉於模擬器中進行機器人學習/驗證與測試。 

3. 負責模擬器之建模與調整，導入模擬器進行控制整合與參數調整。 

4. 依據專案需求與團隊/客戶及供應商進行設計與開發討論。 

5. 開發機器人整合相關需求。

車用嵌入式系統控制器軟韌體開發與應用 

1. 驅動程式軟體開發設計、CAN通訊系統配置 

2. 車輛次系統控制發展與軟體維護 

3. 控制器與整車系統整合 

4. 執行功能驗證、硬體在環(HIL)驗證 

5. 產出研究報告/期刊論文/專利