2024年10月12日 星期六

CL#5 Space Intelligence

如何發布 How to publish ChatGPT and Claude.


課堂練習 

使用 Claude Sonnet 3.5 

ChatGPT 4o



任選一題作答即可

練習: 模擬一個工程或科學系統,例如自行車自動變速系統,汽車自動排檔系統,蒸氣引擎賽道賽車,任選一個你喜歡的工程系統 ...



練習: 任選一張圖庫照片(圖庫),或是自選照片 (注意: 免費用量只能使用兩張照片)

  1. 盲人空間資訊提取與環境辨識的提示,可使用風格樣式
  2. 分別使用Claude 與 ChatGPT
  3. 比較分析兩者空間智慧的功能



練習: 選擇一張相片製作空間素描與空間地圖(圖庫或是自選照片)


Deadline: This Saturday

Send your answer link to Line Group or email to Professor chang212@gmail.com , with subject CL#5 Blind Intelligence [your name]

2024年10月6日 星期日

floor plan: navigating for blind persons

 alive








































🚿 洗澡任務計時器

洗澡任務計時器

發展障礙者的訊息處理輔助工具

情緒識別和表達應用(情緒日記)




繫鞋帶訓練(任務分解計時器)

基本款



加上步驟提早完成健鍵



增加步驟完成時間統計




洗澡任務

基本款



視覺符號提醒




回到之前或前往特定步驟 (把Icon加回去)



 洗澡任務計時器(語音)



Counting characters

 How many r in strawberry

ChatGPT 




Claude




有幾個r 這題真的很好玩,ChatGPT 跟 Claude 都錯了

原因是,他們在訓練的時候,從來沒有被教過正確答案

而且他們有沒有內建計數器,所以常常搞錯幾個字母

CL#4 Space Intelligence

如何發布 How to publish ChatGPT and Claude.


課堂練習 

使用 Claude Sonnet 3.5 

ChatGPT 4o





練習: 視覺化最短路徑演算法,可輸入網路節點數




練習: 分別使用 ChatGPT 與 Claude 計算 refrigerator,Reregister 單字當中有多少r


Deadline: This Saturday

Send your answer link to Line Group or email to Professor chang212@gmail.com , with subject CL#4 Space Intelligence [your name]

2024年10月4日 星期五

視覺,語音,通訊研究的典範轉移

演算法:為計算機設計的算法(通常很 smart, 但不直覺也不好懂。好的演算法不會犯錯,如果因為設計不完善而犯錯,稱為 bug)

QuickSort 演算法視覺化

最短路徑演算法







類神經網路:模仿人類大腦,表現類似人類的行為(視覺,聽覺,解決問題,…但跟人一樣會犯錯,從犯錯中學習是很重要的學習方式)




類神經網路:深度學習,CNN, LLM, …  



典範轉移:類神經網路如何造成學術研究的典範轉移

視覺研究

語音研究


2024年10月2日 星期三

Sonnet 3.5 vs. DeepNAVI

 2023年這篇DeepNAVI 論文做的時候還沒有 LLM,事實上用什麼方法做內文有寫。


因為論文是2023 年出刊,表示2022就投稿了,也就是說研究很有可能是 2020-2022 之間做的(假設是碩士論文)


ChatGPT 是2022/11/30 發布的,在這之前的AI技術很容易被LLM 超越,因為ChatGPT 與Claude 的算力太巨大了,一個學術單位擁有的算力根本小巫見大巫


當然學者會宣稱他們的模型有最佳化啦,考慮多種細微的層面…


然而最近的研究發現,只有模型夠大,參數夠多,大數據夠大,就算最簡單的三層結構也可以很強大(因此不需「深」度學習),重點在於「多」「大」,深不是重點。


我有一門課是白天給研究生的,這一年多來,發現只要是超過一年前的AI 論文,幾乎都已經過了賞味期,方法舊結果也不夠好(雖然發表時可能是當時最好的),然後很快被ChapGPT 或 Claude 「輕鬆」超車







空間智慧: 盲人導航輔助系統進階影像辨識(圖庫)

 



空間智慧: 盲人空間資訊與識別輔助(圖庫)

 


















2024年10月1日 星期二

空間素描 vs. 地圖


[依據照片生成素描可以用來快速檢視LLM 對影像的辨識與空間理解的能力,可以協助AI視覺應用的導入]


空間識別協助(狹窄的巷弄) alive






 (Make SVG)
SVG 素描


(Make SVG Map)

空間地圖



空間識別協助(雨後的鄉間小路) alive  





(Make SVG)

空間素描


(Be realistic.)

空間素描


(Make SVG Map)

空間地圖




空間識別與導航協助(落羽松森林)