在牛棚裡都在練什麼？
「大家老是問我在牛棚做什麼？怎麼會認為我沒在準備，我對市政的準備非常齊全，我提那麼多政策，都是花很多時間研究的，沒有人想得比我周全。」姚文智說，這幾年他很早就鎖定都市改造的議題，投入一系列法案如《都更條例》、《住宅法》、《危老條例》修法工作，在內政委員會都更預審小組，每次討論動輒七、八個小時。
「大家所謂的不知道我在幹什麼，就是我沒有在作秀。我要反問你，蔣萬安都在做什麼？戰神？站兩個小時其實就是一個秀。我本來就不是愛作秀的人。」他說。
新聞局長鋒頭健，林志玲也吃味
姚文智自認是解決問題的人。「其實我在做代誌是並棒叫（台語，指雷厲風行之意），不做則矣。我沒有機會做的時候，不在其位就無法謀其政。」姚文智口中做事「並棒叫」的年代，是他擔任新聞局長的十個月任內。
姚局長任內大力推動影視產業的發展，更大刀闊斧進行所謂的媒體整頓。他任內最風風火火的事件，無疑就是電視頻道換照爭議，當時有七個頻道因未通過審核而遭停播，ＴＶＢＳ則因資金來源爭議，被處以一百萬元行政處罰。「他是台灣新聞局長唯一一個敢關新聞台的人。」老電視人對這段歷史都「心有餘悸」。而當年東森告新聞局（已轉至ＮＣＣ）的官司，至今還沒結束。
當年連名模林志玲都曾在金鐘獎頒獎典禮上調侃姚文智說，從來沒看過鋒頭、見報率比她還高的局長，並大膽虧姚：「我這麼說，你該不會也罰我一百萬吧！」當年姚文智還「榮登」年度新聞人物。
現今有不少網友暱稱姚文智是「咬蚊子」，年輕網友大概不曉得，姚文智當年可是連「母老虎」都敢惹。
當時他動輒被叫到立院「羞辱」。一次，台灣之光王建民正好回台拜會院長，姚卻又臨時被叫到立院備詢，他一方面不爽，一方面思忖如何「脫困」。由於藍委洪秀柱等人把委員會當作記者會，姚先稱尿遁要上廁所，所有記者全都尾隨跟去，弄到現場沒記者，洪秀柱氣得不斷大罵：「通通給我回來！」「你這個痞子！痞子！……」姚文智見機不可失，緊抓這點，當場拂袖而去，在電梯裡姚還轉頭問局裡官員：「趕回去見王建民還來得及吧？太好了！」
從小叛逆，造反、抗議是看家本領
「這完全是我要的結果。」說到這段「英勇事蹟」，姚文智難掩得意：「我自己覺得，那種我小時候帶隊看Ａ片，從小在江湖打滾的訓練和情節通通都回來了。」
當時有藍委質疑局長的敘薪，姚文智竟秒回：「那乾脆刪掉好了！」藍委全拿他沒皮條。「說真的，我覺得應付他們（指藍委）輕鬆自在，其實很有趣，免準備ㄟ，隨時吃沁飯（隔夜飯）等他們。」「我不會無緣無故這樣，是他們太壞了。」
當年這些氣到七竅生煙的藍委肯定有所不知，姚文智從小就是個叛逆小子，「帶頭抗議」儼然是他與生俱來的看家本事。
國中時代，為了跟老師唱反調，他最高紀錄慫恿三分之一的同學一起翹課去延平北路的白宮看Ａ片；高中因為太混落到最壞班，為了抗議他眼中「法西斯遺緒」的朝會，他聯合同學故意朝會遲到，全擠在場外聽同學講笑話，一度搞到場外的人比出席朝會的多；連上成功嶺他都敢「造反」，因為沒有入選他最愛的籃球隊，聯合其他阿兵哥佯裝生病去找上級理論，「當時幼小的心靈，每天就只想打球而已，沒被選上是恥辱，我不參加可以，怎麼可以不被選上。」
姚文智政治啟蒙很早，因為家中有位每個月會買黨外雜誌、喜歡在他家聊天喝酒、討論時事的叔叔。這位叔叔曾是延平中學的老師，也是教師人權促進會的靈魂人物，曾在民進黨草創時，找了九位老師集體入黨，還上過報紙。旁聽久了，加上從國中開始接觸黨外雜誌，姚文智終於在作文裡「露餡」。
