香山飯店是貝聿銘１９７９年初接下的中國大陸的第一項工程。他為設計這座飯店花費了許多的心思。在他心目中，這座飯店廳堂最好的裝飾莫過於壁畫，而最合適的畫家人選莫過於著名法籍華裔畫家趙無極。

貝聿銘知道，應接不暇的展覽令趙無極終年忙碌。因而，他為此做了一番動員：“無極，我只是希望能儘自己的微薄之力，報答生育我的那種文化，這種心情相信你能理解。世界各國差不多都有我們作品，惟獨生育了我們的故國卻沒有……”“你不用多説，我和你的想法一樣。這畢竟是我們的祖國，只要有需要當然會盡力的。”兩個好朋友一拍即合。於是，趙無極隨貝聿銘前來考察飯店，以求創作出與之相協調的畫。

旅遊局方面並不了解趙無極是何許人物，只把他的畫視作貝聿銘設計中的一部分。這樣一來，趙無極就成了貝聿銘的客人，與旅遊局方面毫無任何干係，甚至住賓館的費用都是由貝聿銘自掏腰包，更談不上受到與身份相當的禮遇了。無極並沒有理會這些，只是以最大的熱情投入到創作中。因為飯店的設計基調是白色的，他便捨棄了自己最喜愛的色彩組合，精心創作了兩幅黑白的山水壁畫。貝聿銘看後不禁拍手叫絕：“太好了，簡直是畫龍點睛的效果！”

本是皆大歡喜的好事，始料不及的是卻引發了一系列令人不悅的事情。趙無極的作品完成後送到榮寶齋去托裱，因為畫面太大案子放不下，只能在地上進行操作。他偕夫人前去察看，發現辛辛苦苦畫好的畫就直接放在地上，連鋪墊的廢紙都沒有一張，心中難免感到不快。趙無極什麼也沒説，只是讓夫人幫忙將畫捲起，自己從門後邊找來一把笤帚，親自動手把地打掃乾淨。夫人佛朗索瓦不明白丈夫的畫何以會遭到這樣的對待，更無法理解他本人為什麼要默然忍受。見到貝聿銘時，她禁不住發了一通牢騷。

貝聿銘原本就為好朋友應自己之邀來幫忙卻遭到如此冷遇而覺尷尬，聽她這麼一説更感過意不去。雖然趙無極一再表示不用介意，他還是找到有關方面的負責人進行交涉，講明趙無極在國際藝壇擁有的聲譽和地位，以及他在世界各國受到的禮遇。可惜，他的提議並沒有得到應有的重視。當時，“文革”的影響還沒有完全肅清，在一些官員的心目中，畫家根本算不上什麼人物。

貝聿銘無計可施，只好與趙無極商量：“都怪我，不該把你拉來，既然他們不領情，乾脆我們把畫撤回去算了。”趙無極感覺自己的人格受到侮辱，心中確實非常氣惱。平心而論，自己對這塊土地一直懷有一種難以名狀的深情。自第一次回國以來，總是希望能為這個多災多難的國家儘自己一份心力，沒想到滿腔熱忱換來的卻是如此的冷淡。儘管如此，他還是決定採取息事寧人的態度：“算了罷，聿銘，別去和他們計較，畫都已經畫了，又何必撤回去呢。我們的本意不是想在這裡得到什麼，只要任何時候想起來，對這個國家問心無愧也就行了，其他都無足輕重。”

金秋十月，趙無極再次抵達北京，出席香山飯店的揭幕儀式。活動搞得很熱鬧，但是在眾人毫不覺察中，也出現了令人尷尬和不快的一幕：一位飯店經理，對繪畫一竅不通，卻喜歡很自負地發表議論。他不知深淺地對貝聿銘説：“趙無極這樣的畫，我也會畫。”此刻，趙無極就站在貝聿銘的旁邊，他卻根本不認識。為避免尷尬，貝聿銘慌忙打斷他的話：“不要亂講！”趙無極沒有做聲，也不想有所表示。

趙無極在為香山飯店作畫過程中感受到的種種不愉快，激怒了美術界一些敢於仗義執言的人。黃苗子、丁聰等人認為這事會傷害海外華人的愛國之心，並會對文化交流造成不良影響，便向政協打報告反映此事，希望能有所挽回。與此同時，趙無極的妹妹、在國際廣播電臺工作的趙無宣，看到哥哥滿腔愛國熱忱卻遭到這樣的對待，也感到憤憤不平，遂給中宣部寫了一封反映問題的長信。

中宣部負責同志收到這封信很感意外，急忙找有關人員了解情況，隨後又組織全國美協、文化部藝術局、旅遊局和北京市文聯召開“四方會議”，商量解決的辦法。由於當時華君武沒有在北京，鬱風代表美協參加了這次會議。鬱風詳細地介紹了趙無極在國際畫壇的地位和影響，然後説道：“趙無極和李政道、楊振寧一樣，都是加入了外國國籍的中國人，在世界上為中國爭得了榮譽。趙無極是藝術家，所以知道他的人更多，各國博物館幾乎都收藏有他的作品，他為中國帶來的影響也更大。而且，他的畫在國際上是‘天價’，不計報酬來為我們作畫，卻受到這樣的待遇，實在説不過去。”

聽了鬱風的話，藝術局局長神情嚴肅地説：“周總理生前曾經教育過我們，外事活動中沒有小事。這件事情上我們的確處理得不好，造成了很壞的影響，現在大家商量一下，看用什麼辦法可以補救。”一時間大家也拿不出什麼好的意見來，他便轉而向鬱風問道：“你對趙無極比較了解，你認為怎麼做能夠挽回影響？”鬱風略加思忖後回答：“我看首先應該向他正式地賠禮道歉，再送一件禮品表示心意，並且邀請他方便的時候回國來辦一個畫展。”

不久，趙無極就收到了由中華人民共和國文化部發出的邀請，請他在中國美術館和浙江美術學院辦個人畫展。後者的前身就是他的母校——杭州藝專。