The Agent Cognition Learning Model and Agent Self-Awareness Model in this thesis are related to 4 academic fields, including Artificial Intelligence, Cognitive Psychology, Economics, and Social Behavior. In Artificial Intelligence, we promoted the thinking level of agents to fix the flaw of both traditional intelligent agents and learning agents, whose learning focus were on the basis of World Model. In Cognitive Psychology, we established the personality model of agents, thus agents could achieve the goal of self-improvement through self-awareness. Our discussion through PD mathematics model on the conflict between public good and private interest in artificial society is involved with Economics. Our Superego Self-Awareness Model offered a good solution and verified the feasibility of ACLM. In Social Behavior, by observing the collaborative behavior of agents, we understood how they affect the operation pattern of former agent system.
Through the viewpoint of this thesis, we hope to clarify the importance of uniting internal cognition and external learning. We hope ACLM could offer a new approach for intelligent agents. We believe this approach is valuable and worthy striving for.
Appendix A 自我覺察相關文獻
自我概念（Self-concept）
自我的概念是人性的基礎，它會影響人類的一切行為(Tucker ladd)。根據存 在主義的觀點，毛禮斯(Morris, 1954)曾經針對自我的意識指出：人不但能思想，
而且能知其所思想(能批評、檢討、反省、糾正自己的思想)；人不但能感受，而 且能知其所感受(感情中有理性，不為情感所迷惑)；人不但有意識，覺知到周圍 的世界，而且更有自我意識(self-conscious)，覺知到自己在世界中的存在。
自我一經建立，將會引導我們的思維、感覺和行為(Smith &. Mackie,2001)。
美國心理學創始者詹姆士(William James)針對人類的自我知覺兩元性(duality)曾 指出：自我是由對自己的看法與信念所組成，或稱「已知」(known)，或更簡單 的「我」(me)；自我也是個活躍的資訊處理器，叫做「知悉者」(knower)或「我」
(I)。而詹姆士的「已知」也可當作自我概念或自我的定義，而自我的知悉者為察 覺或意識狀態。也就是說，自我是一本書，也是這本書的讀者。前者充滿者長期 累積下來的迷人內容，而後者則是一位在任何時刻都能自己讀取章節、任意增加 章節的人。
自我覺察（Self-Awareness）
Duva and Wicklund (1972) 定義自我覺察是一種將注意力指向自我的體驗。
國內學者張春興(民 79)認為自我覺察是個人對自己個性、能力、慾望等方面的了 解。許玉佩(民 84)認為自我覺察的經驗包括了對知覺動作、感受、需求與價值觀 等方面的了解，而此種了解與覺察的能力是由粗淺至深入、具體至抽象、外在至 內在的一個發展過程。而陳金燕(民 85)的研究則將自我覺察界定為知道、了解、
反省、思考自己的情緒、行為、想法、人我關係及個人特質之狀況、變化、影響 及發生的原因。而在陳金燕的定義中，指出自我覺察的焦點不再僅侷限於「自 己」，也包含了「與自己互動的他人」；同時，覺察的內涵不再僅止於「靜態的」
狀況，也關注過程中「動態的」變化及影響。
自我是知識的客體，但是要如何去深入的去瞭解自我？自我的印象是如何形 成的？一直是心理學家及哲學家們研究探討的重要課題。Smith & Mackie 著的 Social Psychology 書中指出形成自我印象的方法與知覺他人的方法是很相似的。
但是在對自我的感覺中，我們帶進了更多的偏誤。而人們往往從可自由選擇的行 為中推論自己。自由選擇的行為是受內在動機所驅使的，即我們做自己想做而不 是不得不做的事(Harackiewicz, 1979; Deci, 1970)。
歌德(Goethe) 曾說：「想了解自己，就去觀察你的周遭人之行為；想了解別 人，就去探索你的內心」。因為我們觀察別人比觀察自己更客觀，了解他人可以 增進自我了解，而自我了解有助於我們對別人的了解。而人們如何看待自己多受 他人如何看待自己影響，因此別人對自已的看法可以幫助解釋個人對自我的錯誤 理解，更可進一步幫助改正對自我錯誤的認知(Tucker ladd)。另外，Aronson(1995) 建議人們認識自我可由以下幾種方法達成：經由內省(introspection)來認識自己；
經由觀察自己(self-observation)的行為來認識自己；經由自我基模(self-schemas) 來認識自己；經由社會互動(social interaction)來瞭解自己。
自我基模（Self-Schema）
自我基模是根據過去的經驗，將於自己認識之資訊彙整成知識結構，能幫助 我們瞭解、解釋並預測自己的行為(Markus,1977;Markus & Sentis, 1982; Markus &
Zajonc, 1985)。人們會透過記下一些他們認為既可反映其與眾不同之獨特性，又
具有跨情境一致性的核心屬性來建構一個統一而持久的自我感覺。而這些特性特 質形成了一個基模(Markus, 1977)。人甚至在最平凡的行為上都尋找這些核心特 質的證據，藉以増進穩固且統一的自我感覺(Cantor & Kihlstrom, 1987)。我們會 利用自省與觀察自己的行為來了解自己，並將這些資訊組織起來置入自我基模 中。我們也會利用那些指出我們的態度與行為可能如何改變的基模與內隱理論來 理解我們的過去。
Appendix B 代理人之人格分析
佛洛依德之人格三我
佛洛依德(Sigmund Freud)認為一個人的人格結構(圖 1)有三個主要的部份，
分別是本我(id)、自我(ego)與超我(super ego)，本我代表的是本能的驅欲，又叫「求 爽的我」，趨樂避凶、心想事皆要成，都是這種心理在主導，例如食物與性等等，
依循的是"享樂原則"；於此同時，超我則扮演著人格結構中偏向行為規範的那一 面，又叫「道德的我」，禮義廉恥、忠孝仁愛、信義和平，全由它來提醒，依循 的是"道德原則"，換句話說是外在規範的內化。而可以想見的，在一個人的內在，
本我與超我經常是衝突的，此時便需要自我來居中協調。自我是在人格結構中與 現實接觸的部份，又叫「理性的我」，依循的是"現實原則"，扮演調和的角色，
換言之它會依遭遇的狀況來判斷何時可以滿足本我的需求，何時則需要接受超我 的規範，此外它也會發展出許多的心理防衛機轉來平衡內在需求與外在現實之間 的落差。舉個例子：假設走在街上、看到地上有一千元，本我最基本的想法就是 將這一千元歸為已用，希望利用這不勞而獲的錢財來滿足自我的慾望，超我則會 提醒我們，從小到大被教育「拾金不昧」的觀念，而自我則是撿到錢後，雖然不 會交給警察但也不會立刻花掉，他可能會設定一個條件，就是萬一在三日內沒遇 到失主，這筆錢的擁有權就屬於他，所以自我即是負責本我與超我衝突間的協調 角色。
代理人調適模型
以佛洛依德的人格三我來分析傳統人工智慧中學習代理人與智慧型代理人 的人格特質時，可以發現代理人的學習都是透過不斷地調適於環境，以獲得最理 想的行為表現，換言之，學習等於調適。代理人本身並沒有本我(為了生存，代
理人並不會一直堅持同一個失敗策略)與超我(代理人並沒有道德規範)，它只擁有 自我，也就是理性的我，用來幫助代理人達成生存目標而適應於環境中。因此我 們將佛洛依德的人格三我稍做修正，以代理人調適模型(圖 2)來說明傳統人工智 慧代理人的調適特質。
代理人人格模型
具自我特質的代理人(也就是現有代理人學習架構)，雖然能適存於環境，但 卻不能為社會帶來最大利益。而具本我特質的代理人，可適用於個性化代理人 (例如：電腦同伴、虛擬主播)，但缺點是個人私利行為或非理性決策會造成社會 排擠的問題。最後探討的是超我，若代理人具備超我的道德觀念，可幫助了解社 會期望，解決人工社會衝突，使代理人合作行為提早出現，並提升整體社會利益 最有所提升。就解決代理人生存環境與自利目標的公益與私利衝突，可能是不錯 的解決方案。因此我們在代理人調適模型當中，加入超我，形成代理人的人格模 型(圖 3)，透過此模型，我們將人類社會的理性道德觀實作於代理人之中，期望 代理人能對超我有所覺察，以反應並解決傳統人工社會中，個體非理性行為所造 成的集體行為不理性問題。
圖 1：佛洛依德人格三我 圖 2：代理人調適模型 圖 3：代理人人格模型
Appendix C 模擬系統
系統架構分為三層：第一層是社會網路拓樸；第二層是以囚犯困局為基礎的 策略代理人模型；第三層是自我覺察模型。本論文主要以策略代理人加上社會網 路(第一層與第二層)來模擬人工社會的公益與私利衡突問題(對照組)；同時，為 解決此問題，我們以人格基模做為 ACLM 的對內學習焦點，提出一套以超我為 自覺目標的代理人自覺模型(實驗組)。期望藉此自覺代理人，一方面能使自己活 得更好(在環境中先顧到私利），一方面更要能透過促進合作，因而使大家和自 己都活得更好(透過公益來實現私利)，來解決人工社會公益與私利的衡突問題。
社會網路拓樸
系統底層使用兩種著名的社會網路：細胞自動機與小世界網路。細胞自動機 為一個具有高群聚度的網路結構，它易於我們觀察策略代理人的集體行為與群聚 現象。而小世界網路是一同時具有高群聚度與低分隔度的網路結構，它符合真實 的人際網路，而相關的代理人應用，也都直接與人類有所關聯(例如：電子商務、
線上遊戲)。因此，在這兩類不同的社會網路結構下，超我自覺模型是否能改善 社會整體利益，將是我們探討的焦點。
細胞自動機的建構方式是以每個二維空間的格子做為原點往外延伸，若延伸 距離為ｋ步，我們稱半徑-k 的鄰居關係(radius-k neighborhood)。以半徑-1 的鄰居 關係(radius-1 neighborhood)進一步說明(圖 4)，每一個格子往其(上、下、左、右、
左上、左下、右上、右下)延伸，建立代理人共事夥伴的連結，所以總共會有 8 個連結對象；同理，若以半徑-k 的鄰居關係做為細胞自動機的連結依據，將會有 個連結。小世界網路建構方式同自胞自動機一樣，以半徑-k 的鄰居關 係建立高群聚特性；另外，在建立周圍鄰居關係後，會破壞某些原有連結，並以
1 ) 2 (k+ 2−
被破壞的數量，挑選遠方代理人加入捷徑(低分隔度)形成新的連結關係。(圖 5 為半徑-1 的鄰居關係之小世界網路示意圖)
圖 4：半徑-1 的鄰居關係之細胞自動機 圖 5：半徑-1 的鄰居關係之小世界網路
策略代理人
代理人採取純粹策略，而純粹策略的定義是指：代理人在每個可能的決策節 點上該如何抉擇的一種規則。它是一個完整的行動計劃，讓代理人知道在各種可 能性之下要探取哪種行動。因此，首先需要釐清的問題，就是代理人到底有多少 個決策節點？
我 們 的 代 理 人 是 採 用 記 憶 為 一 的 決 定 性 策 略 (Memoery-1 Deterministric Strategy)，換言之，代理人可記錄上回合與夥伴間的共事情況；由於代理人共事 情況只有四種可能，分別為雙方都履約(CC)、我履約而對方毀約(CD)、我毀約而 對 方 履 約 (DC) 、 雙 方 都 毀 約 (DD) 。 因 此 可 將 記 憶 為 一 的 決 定 性 策 略 記 做
我 們 的 代 理 人 是 採 用 記 憶 為 一 的 決 定 性 策 略 (Memoery-1 Deterministric Strategy)，換言之，代理人可記錄上回合與夥伴間的共事情況；由於代理人共事 情況只有四種可能，分別為雙方都履約(CC)、我履約而對方毀約(CD)、我毀約而 對 方 履 約 (DC) 、 雙 方 都 毀 約 (DD) 。 因 此 可 將 記 憶 為 一 的 決 定 性 策 略 記 做