計算機是一門需要理論和實踐相結(jié)合并且知識更新很快的技術(shù)，這有點像醫(yī)院醫(yī)生光有豐富的理論還不夠，必須要有大量的實踐和不斷的總結(jié)。有些醫(yī)院信息科工程師認(rèn)為醫(yī)院內(nèi)技術(shù)含量的事情太少，實踐的機會太少，這些都影響了自己的成長。其實機會都是創(chuàng)造出來的，利用一切空閑時間看書，利用閑暇時間或晚上值班時間做實驗，主動參與信息科加班工作，向公司工程師認(rèn)真學(xué)習(xí)，不斷總結(jié)，這些都是成為優(yōu)秀HIT工程師的基礎(chǔ)。非常感謝新疆自治區(qū)人民醫(yī)院院領(lǐng)導(dǎo)和科室領(lǐng)導(dǎo)在我有一定基礎(chǔ)的時候，為我創(chuàng)造了很多實踐機會。我們院領(lǐng)導(dǎo)非常愿意我去幫助新疆兄弟醫(yī)院和單位解決問題。在這個過程中，我也得到了進一步成長。

　　工作20多年，一直堅持研究技術(shù)，近幾年當(dāng)信息中心主任，我也堅持和科室系統(tǒng)管理員一起分析和處理復(fù)雜的系統(tǒng)問題。計算機是理論加實踐的應(yīng)用技術(shù)，我在完成自己醫(yī)院系統(tǒng)維護的同時，也幫助新疆其他醫(yī)院、政府、企業(yè)等很多單位處理ORACLE數(shù)據(jù)庫的問題，我會挑一些比較有代表性的案列進行剖析。

1 初顯身手

　　2000年，我已開始學(xué)習(xí)ORACLE數(shù)據(jù)庫，但因為當(dāng)時沒有實踐環(huán)境，因此我一直堅持看書。有一天核心HIS數(shù)據(jù)庫的ORACLE空間突然爆發(fā)式增長。按照當(dāng)時的速度應(yīng)該不超過一個星期，就會用光服務(wù)器磁盤空間。當(dāng)時10000轉(zhuǎn)的SCSI磁盤都很小，記得我們用了四塊9.1G的磁盤做了一個RAID5陣列，可用空間是27G。醫(yī)院找了很多人咨詢，都沒有碰到這個情況。最后我在一本英文資料中找到了問題原因。ORACLE8.1.5建表時有很多參數(shù)，其中有兩個關(guān)鍵參數(shù)：一個是INIT EXTENT，另外一個是PCREASE。默認(rèn)INIT EXTENT 512K，PCREASE 50%，數(shù)據(jù)空間增長的公式512k*(1+0.5)n次方。這種增長是可怕的，應(yīng)該是ORACLE8.1.5的一個BUG，我將所有的數(shù)據(jù)表PCREASE改成了0，按照理論每次數(shù)據(jù)增長都是512K。效果立竿見影，數(shù)據(jù)庫空間一個月都不見明顯增長了。我們的領(lǐng)導(dǎo)很高興，軟件公司的經(jīng)理更高興。這次故障處理，讓我更加堅定了學(xué)技術(shù)的信心，以后工作中碰到再大的困難，我都沒有放棄過信心。

2 醫(yī)保系統(tǒng)優(yōu)化

　　在我工作的十幾年中，認(rèn)識了很多同行朋友，其中很多朋友都是通過醫(yī)保的機緣認(rèn)識的。醫(yī)保病人幾乎是每所醫(yī)院的主要收入來源，因為現(xiàn)在是全民醫(yī)保，每家醫(yī)院都非常重視醫(yī)保工作。

　　那是2006年的事情了。一天我突然接到一個陌生電話。

　　“你是彭工嗎?我是A醫(yī)保局的某某。你們醫(yī)院的醫(yī)保辦主任說你在維護醫(yī)保系統(tǒng)，我想找你咨詢個問題。是這樣，我們現(xiàn)在的A醫(yī)保系統(tǒng)，很多醫(yī)院都喊慢，尤其是大醫(yī)院特別嚴(yán)重，收費窗口堆積病人很嚴(yán)重。我們派工程師去現(xiàn)場清理完臨時數(shù)據(jù)，好上幾天，很快又慢了。你們醫(yī)院的A醫(yī)保病人最多，你們從來沒喊慢，我們也從沒為你們醫(yī)院清理過臨時數(shù)據(jù)，你對系統(tǒng)做了什么嗎?”

　　從他飛快的語速中可以感覺到他很著急。病人是醫(yī)院的上帝，醫(yī)保是醫(yī)院的另外一個上帝。我不敢怠慢，立馬回復(fù)他：“是這樣，我們A醫(yī)保系統(tǒng)前面也慢，收費員收一個病人，大約需要5分鐘。我對整個結(jié)算過程進行了跟蹤分析，找到了問題原因。我做了一個ORACLE后臺優(yōu)化程序。每周末運行一次。現(xiàn)在速度一直都很快，結(jié)算一個病人不到一分鐘。”

　　“太好了彭工，我讓慢的醫(yī)院找你吧，你給他們安裝一下你的優(yōu)化程序，我們也會建議醫(yī)院給你支付專家費用的。麻煩你了!”

　　“沒問題。”

　　醫(yī)保領(lǐng)導(dǎo)這么客氣，我有點受寵若驚。很快幾家大醫(yī)院找我，我那時在單位還要值夜班，值完夜班第二天休息一天。一般我都會和來找我的醫(yī)院約到我休息的那一天去解決問題。優(yōu)化程序在我們醫(yī)院經(jīng)過了實踐的檢驗，所以效果立竿見影。解決了醫(yī)院收費窗口的排隊問題，醫(yī)保局再也不用去清理臨時數(shù)據(jù)了。印象中有兩家醫(yī)院最為深刻：一家是某中醫(yī)院，我為他們醫(yī)院優(yōu)化完后臺系統(tǒng)后，我和他們信息科的領(lǐng)導(dǎo)一起去收費處看優(yōu)化情況。去的時候一個收費員正在擦汗。“今天A醫(yī)保怎么樣?” “今天電腦抽風(fēng)了，太快了。以前敲個回車，我能喝幾口水，今天忙到現(xiàn)在我才喝水。不過挺好的，都給病人結(jié)算完了!”中醫(yī)處方特別長，所以他們的感觸最為強烈;還有一家是一個企業(yè)醫(yī)院，本來他們醫(yī)院每天門診量不到兩百人。慢一點是可以承受的。但是一天，一個剛剛退休的大領(lǐng)導(dǎo)來看病，折騰半天都沒交上錢。他雖然退休了，虎威猶存。找到院長罵了個狗血噴頭。院長當(dāng)場發(fā)誓三天之內(nèi)解決。當(dāng)然最后還是我去給他們解決的。

　　兩年多時間我大約為烏魯木齊16家醫(yī)院安裝了A醫(yī)保優(yōu)化程序。順便參觀了各個醫(yī)院的機房，也結(jié)識了很多同行朋友，很多至今還經(jīng)常聯(lián)系。再后來，A醫(yī)保又換了系統(tǒng)。我的優(yōu)化程序也就壽終正寢了。我也思考過，A醫(yī)保這次性能問題解決，主要原因：我有比較扎實的數(shù)據(jù)庫理論和SQL編寫基礎(chǔ);我在一線，能跟蹤分析從終端到后臺所有的技術(shù)環(huán)節(jié);一直堅持，碰到問題不放棄，最終一定會解決問題。

3 解決HIS小型機集群性能問題

　　2004年，新疆自治區(qū)人民醫(yī)院率先在新疆地區(qū)引入了一卡通醫(yī)院HIS系統(tǒng)，這套系統(tǒng)優(yōu)化了門診流程，在狹小的舊門診樓接診7000多人，創(chuàng)造了當(dāng)時新疆最大單日門診記錄。隨著醫(yī)院快速發(fā)展，醫(yī)院信息化也得到了快速發(fā)展，2005年醫(yī)院電腦數(shù)已經(jīng)達到了800多臺。隨著終端電腦數(shù)快速增加，WINDOWS服務(wù)器32位操作系統(tǒng)內(nèi)存4G尋址能力限制終端數(shù)增加。我也嘗試增加服務(wù)器物理內(nèi)存到8G，并且打開操作系統(tǒng)Boot.ini文件中/PAE/3GB參數(shù)開關(guān)，只能說情況略有好轉(zhuǎn)，系統(tǒng)以前一周左右死機一次，修改后半個月死機一次。經(jīng)過充分論證，借鑒通訊運營商和銀行的經(jīng)驗，2006年醫(yī)院購置兩臺IBM P55A小型機，搭建了ORACLE 10G RAC集群。這次后臺系統(tǒng)升級比較大，ORACLE數(shù)據(jù)庫從ORACLE 9.2.01升級到ORACLE 10.2.03，操作系統(tǒng)從windows 2003 server 32位升級到IBM AIX 5.1 64位，由于準(zhǔn)備的很充分系統(tǒng)升級很順利。但是新平臺上線后，應(yīng)用程序速度不快，個別功能甚至比以前PC服務(wù)器還慢。醫(yī)院花巨資得了這樣的結(jié)果，我與小型機系統(tǒng)集成公司進行了交涉，公司技術(shù)人員信誓旦旦地許諾小型機性能上沒有優(yōu)勢，主要是解決并發(fā)能力和穩(wěn)定性，你們醫(yī)院電腦增加到1500臺還能保持現(xiàn)在的性能，并且非常穩(wěn)定。醫(yī)院發(fā)展的很快，一座24層急診大樓投入使用，電腦終端增加了近400臺全院電腦終端數(shù)達到了1200多臺。系統(tǒng)不僅更慢并且高峰期還死機，公司的工程師也沒有解決辦法。那時，我有ORACLE公司技術(shù)支持服務(wù)，我給他們發(fā)了多份性能分析報告后，他們要求我院ORACLE數(shù)據(jù)庫從10.2.01升級到10.2.03，費了很大勁升級成功，但系統(tǒng)依然很慢并且死機。信息科壓力很大，醫(yī)院投資這么大居然這樣頻繁死機，怎么給醫(yī)院交代?我?guī)缀鯊脑缟献酵砩涎芯肯到y(tǒng)性能問題。皇天不負(fù)有心人，終于找到了原因。我們HIS公司為了開發(fā)方便，建了一個公共用戶，在這用戶下建了所有其他用戶表的同義詞，開發(fā)只需要訪問這些同義詞即可。ORACLE公司從9I升級到10G修改了一個系統(tǒng)視圖SYS.ALL_SYNONYMS，造成所有訪問同義詞的語句COST增大了近100倍，由于小型機性能很好所以性能沒有很明顯的降低。我咨詢了ORACLE技術(shù)支持后，把系統(tǒng)視圖SYS.ALL_SYNONYMS改回ORACLE9I語法。效果立竿見影，小型機負(fù)載從90%多降為5%以下，所有應(yīng)用功能性能都得到了大幅提升。

　　很多醫(yī)院軟硬件系統(tǒng)都會升級，升級過程中都會或多或少碰到問題，一般情況下軟件出現(xiàn)問題的概率更大，這時候一定要樹立信心，并且醫(yī)院要組織相關(guān)公司進行持續(xù)不斷的分析和討論，要善于總結(jié)，千萬不要單純依賴公司，系統(tǒng)故障最受傷的一定是醫(yī)院，只要堅持，最終問題一定會解決。建議核心系統(tǒng)平臺升級，除了做功能測試，最后也做一下壓力測試。

4 最辛苦的系統(tǒng)遷移

　　2010年，我被邀請去克州為一個政府單位安裝一套LINUX環(huán)境下ORACLE RAC集群系統(tǒng)，并且要做數(shù)據(jù)遷移。去的時候很順利，單位信息負(fù)責(zé)人到喀什飛機場接的我。克州是一座很小很安靜的城市，感覺只有一條街道，街道兩邊除了幾座商場，都是政府辦公樓，中心有個綠樹成蔭的廣場。到了單位中心機房，我了解了系統(tǒng)的情況，這個系統(tǒng)是面向全疆提供服務(wù)的民生工程，服務(wù)器和存儲都是HP的，是WINDOWS環(huán)境下的ORACLE 10G RAC 。系統(tǒng)當(dāng)時的性能和穩(wěn)定性都很差，幾乎每天都要重啟好幾次。高峰期辦業(yè)務(wù)速度奇慢。我的任務(wù)是，把數(shù)據(jù)安全備份出來，然后重新安裝LINUX 下的ORACLE 10G RAC，最后把數(shù)據(jù)還原回去，優(yōu)化系統(tǒng)性能，讓系統(tǒng)安全高效的運行起來。系統(tǒng)計劃停機維護的時間是三天。

　　單位負(fù)責(zé)人和我年齡差不多，干這行據(jù)說也有很多年了，也許是系統(tǒng)太重要，而我只有一個人來處理問題。他一直和我討論數(shù)據(jù)的安全性，他擔(dān)心萬一系統(tǒng)做了，不能及時恢復(fù)怎么辦?當(dāng)時的情況雖然非常糟糕，但起碼還能運行。到了第二天中午，還沒有開始工作。我的耐心徹底被他磨完了。記憶中我第一次對甲方發(fā)脾氣“你通知都下發(fā)全疆了，你現(xiàn)在要是相信我，我們就做!我不能給你百分之百的保證，但我會盡自己最大的努力。這樣的項目我做過”。項目終于開工了，前面一切都很順利，中間配置存儲時，我碰見了一個大麻煩，LINUX環(huán)境下HP存儲多路徑產(chǎn)生 “鬼盤”問題，新疆當(dāng)時沒有互聯(lián)網(wǎng)，我打電話問了全國認(rèn)識的高手，居然沒有一個人真正搞過。最后我用了數(shù)學(xué)排列組合，花了近7個小時才解決此問題。后面都很順利了，我優(yōu)化了ORACLE參數(shù)，做ORACLE系統(tǒng)的性能報表，對一些慢的SQL增加或修改了索引，系統(tǒng)運行效果很好。

　　回家路上感覺自己快累虛脫了，但心情還可以，項目達到了我自己的期望值。到了喀什機場，候機廳全是人，好幾個航班晚點了，萬幸的是我坐的航班正點。在候機廳，我連個坐的地方都沒有，有幾把全身按摩的椅子還空著，花了三十元坐了半小時，感覺很超值。

　　搞技術(shù)的人雖然很辛苦，同時也是快樂的。尤其一件事件，自己制定了計劃，按照計劃去做，雖然碰到了很多困難，但是通過努力全部解決，完美地完成了任務(wù)。這種快樂是發(fā)自肺腑的，而且能終身享用。這種辛苦和快樂會讓技術(shù)工程師更加努力去學(xué)習(xí)從而越發(fā)優(yōu)秀。

5 一起盡在掌控：完美的HIS系統(tǒng)遷移

　　2012年，醫(yī)院經(jīng)過幾年發(fā)展，電腦數(shù)從當(dāng)初的不到1000臺，增長到近2500臺，應(yīng)用系統(tǒng)也增加到近30個。2007年的小型機也慢慢帶不動醫(yī)院業(yè)務(wù)了，并且醫(yī)院很快有一座新門診住院綜合大樓要交付使用，還有一個新院區(qū)要開張。為了保障全院信息系統(tǒng)穩(wěn)定運行，醫(yī)院新買了兩臺IBM P750小型機、IBM DS5100存儲。這時，我已經(jīng)在新疆醫(yī)療行業(yè)小有名氣，尤其在ORACLE數(shù)據(jù)庫領(lǐng)域。我認(rèn)真仔細(xì)做了IBM AIX下的ORACLE11.2.03 RAC安裝文檔，小心仔細(xì)地按照安裝文檔完成集群的安裝，我又設(shè)計了詳細(xì)測試文檔，邀請IBM小型機工程師、HIS廠商等一起完成了集群平臺所有功能測試和故障轉(zhuǎn)移測試。這些都完成了，就等HIS數(shù)據(jù)遷移了。

　　這次小型機項目中HIS數(shù)據(jù)遷移是核心工作：數(shù)據(jù)量大，有1.2T;HIS關(guān)聯(lián)的系統(tǒng)多，有20多個應(yīng)用系統(tǒng);客戶端電腦多有2500臺，遷移時間短預(yù)定4小時以內(nèi)。ORACLE RAC集群從10G升級到11G，IBM小型機操作系統(tǒng)從AIX5.3升級到AIX6.1，數(shù)據(jù)庫底層存儲從裸設(shè)備升級到ORACLE ASM。這里面的技術(shù)環(huán)節(jié)我都能搞定，但是在4小時內(nèi)完成1.2T數(shù)據(jù)遷移，相關(guān)20多個與HIS相關(guān)聯(lián)的系統(tǒng)鏈接到新小型機平臺，2500多臺終端電腦鏈接到新平臺，這對我是一個巨大的挑戰(zhàn)。我自己定義這次項目是一次“淮海戰(zhàn)役”，我一定要打贏這場戰(zhàn)役。我制作了遷移文檔，并且進行了3個月的測試和準(zhǔn)備，文檔也在不斷完善。當(dāng)我把最終遷移文檔交給主任時他驚訝了，因為我計劃在30分鐘完成這次系統(tǒng)遷移，而實際計算只有20分鐘，我還多算了10分鐘。為了打消主任的擔(dān)心，我非常狂的說了句“沒問題，一切盡在掌握”。

　　HIS數(shù)據(jù)遷移定在了周五下午八點鐘，數(shù)據(jù)遷移之前我組織廠家和信息中心50多人，開了一個短會。再次明確了各家公司的任務(wù)，還有一些重點工作的負(fù)責(zé)人任務(wù)確認(rèn)，我要求嚴(yán)格按照各家公司遷移文檔操作。這次數(shù)據(jù)遷移我選了一家公司數(shù)據(jù)同步產(chǎn)品，完成實時數(shù)據(jù)同步。在三個月準(zhǔn)備時間內(nèi)我?guī)椭?0多個和HIS關(guān)聯(lián)的廠家做了系統(tǒng)切換計劃，并且逐一測試完善，確保每家方案準(zhǔn)確無誤。2500多個客戶端電腦，我做了域服務(wù)器登錄腳本，當(dāng)天我們切換后臺完成之后，關(guān)閉老IBM小型機，客戶端電腦重新啟動，運行域控制服務(wù)器腳本，客戶端電腦就可以鏈接到新IBM小型機集群平臺。切換開始了，隨著我的指令下達，一切工作緊張而有序，大家分工明確，一切如我計劃，30分鐘以內(nèi)非常完美地完成了HIS系統(tǒng)數(shù)據(jù)遷移，沒有出現(xiàn)大問題。這次HIS系統(tǒng)數(shù)據(jù)遷移，我完成了技術(shù)工作，也完成了組織管理工作，通過這次項目實施我感覺自己的能力得到了一次大的提升。

　　年輕的醫(yī)院信息工作者，做了多年技術(shù)工作以后，一定不要只拘泥于技術(shù)，要逐步開始一些管理工作，要善于帶教，學(xué)會團隊作戰(zhàn)，以應(yīng)付越來越復(fù)雜的信息化發(fā)展要求。

　　未完待續(xù)......

　　作者簡介

　　彭建明：計算機軟件開發(fā)及應(yīng)用專業(yè)畢業(yè)，新疆維吾爾自治區(qū)人民醫(yī)院信息中心主任，高級工程師，研究生導(dǎo)師，20年專注于醫(yī)院信息化管理建設(shè)，一直致力于大型醫(yī)院核心信息系統(tǒng)安全性、可靠性的研究，擁有豐富的醫(yī)院信息化建設(shè)管理經(jīng)驗。取得了ORACLE、IBMAIX、CISCO國際管理員證書。中國醫(yī)院協(xié)會信息專業(yè)委員會(CHIMA)常務(wù)委員、中華醫(yī)學(xué)會數(shù)字醫(yī)學(xué)分會青年委員、新疆醫(yī)學(xué)信息專委會常委，中國智慧醫(yī)療委員，ORACLE榮譽講師。新疆衛(wèi)生健康委電子病歷評審專家，新疆衛(wèi)生健康委等級醫(yī)院評審專家。