辦公室網格計算使用虛擬環境-第4部分
評論（2） 介紹
我在一家公司上班，我們許多批處理作業處理數據每天數以百萬計的記錄，我一直在想最近所有的機器，周圍坐的每一天做幾個小時沒有運行。 如果我們可以使用這些機器，以增強我們的系統的處理能力，豈不是好？ 在這組文章中，我要去看看用人辦公室電網使用虛擬環境的潛在好處。
在第三部分中，我們創建我們的虛擬加工機，並成立窗機成為空閒時間工人。
運行最新的代碼
不可避免創建您的工作人員的業務邏輯，將改變後，錯誤會被發現，更快，更高效的代碼將產生，從而使處理數據使用你的工人，周圍坐著老臭代碼 。 那麼我們如何確保我們總是使用最新和最偉大的版本我們處理腳本？
有幾個很容易簡單的方法，我們可以做到這一點的伎倆，然而，在實現這一目標，以減少處理能力和網絡流量。 讓我們用最簡單的解決方案，並開始慢慢提高了幾個迭代。
第一種方法是簡單地連接到我們的作業控制服務器（通過Samba，FTP，或類似）和拉下來的代碼的最新版本。 不是很有效，但它會做的工作。 讓，有所改善，如何創造一個rsync的腳本和使用，每次來呢？ 或者什麼顛覆檢查出的代碼最初投入的最新處理腳本，然後就更新我們的代碼在每次運行時（ 使用svn update ）呢？
最終我們可能會與一個bash腳本（稱為由cron每10分鐘），它看起來像這樣簡單的：
＃！/ bin / sh的 如果PS斧| grep的-V的grep | grep的PHP >的/ dev / null的 然後 迴聲“工作目前正在處理，退出” 其他 呼應“作業未運行，從現在開始” CD /路徑/ / /複印工作 svn update的 PHP yourJobProcessingScript.php 科幻
現在我們可以肯定的，每次運行時，我們肯定運行最新的代碼。 我們要確保我們的代碼庫更新每一個時間，我們執行的運行，減少網絡流量，只在我們的網絡傳輸文件的區別。
在我的示範設置，我沒有完全按照以上。 顛覆我的工作處理服務器上安裝了，我只是拉'工人'使用'svn update的'分支的最新代碼。 我還添加了一個版本號標記我的處理腳本返回結果的一部分返回到數據庫。 這樣我可以看到我的代碼被更新，每次我工人分支，即複製到我的樹幹，我肯定是運行最新的處理腳本。
使用最新的數據
如果您的作業處理，在某些時候使用的數據源，那麼這些將要更新過。 除非你叫您的數據源上非常罕見的基礎上，你會湧入與交通網絡盡快為你的工人開始運行停頓帶來的一切。 對於我的解決辦法，我決定，我想我與我的虛擬機的數據源，周圍移動。
握住你的馬有！如果我的數據源是巨大的？ 嗯，這真的是我們談論了多少數據的情況下？ 它可能是更具成本有效的安裝到每一台機器的一個額外的更大的硬盤驅動器，比購買一個額外的服務器進行處理。 這是一個問題的預算和業務決定。 它也許您的數據源是如此之大，它只是不可行保持在您的工作機的數據量。 在這種情況下，你會做什麼？ 那麼我們可以看看在調用本地數據服務器，但是這可能會導致網絡問題。 在這種情況下，如該網格系統可能成為不切實際的，包括在您的辦公環境。 這也可能是替代性的運行策略，例如，你可以看看，只有晚上8點到早上6點之間的工人每天晚上和/或限制的數據源請求調用。
上讓移動100GB的數據說，我們的數據源量。 是的，是一個相當位數據，在網絡上更新移動。 我們如何確保我們在這種情況下，最新的數據副本嗎？ Rsync是一種可能性，但我個人認為作業處理服務器上運行您最新的數據源，並設置作為主複製（用一個漂亮的長濱日誌）這可能是要走的路：
通過設置每個工人作為一個奴隸的作業控制服務器更新您的數據源，將涓滴很好地給你的工人沒有大幅增加，在網絡活動（即是，除非你執行一個龐大的數據更新和所有的工人踢一次）。 這比rsync的優勢，你不會得到每個職位的前長時間的停頓; 的 mysql守護你的工人作為數據庫的更新，將不斷更新其數據，同時繼續處理。
這是如何設置我的演示服務器。 設置複製，我也跟著上設置複製 MySQL網站（指南），並在20分鐘內，我有我的頭文字工作者，複製作業控制服務器的數據集。 複製設置和過程，對於每一個額外的工人工作，每次當VM被複製。
總結
在本節的文章中，我們看起來簡單，無痛的，它是迄今usingÂrsync或subverion（SVN）的的，做的工作和減少在同一time.Â的網絡流量，讓您的處理代碼，我們還討論了如何允許它滴入每個工人，以保持您的數據源的信息最新。 因此，我們面積，確保我們保持在我們的辦公室電網系統的業務邏輯和信息。 顯然是有無數的替代品，來執行這些任務，但這裡是兩個簡單的例子來證明的解決方案是多麼容易來。
下一次
在這個系列中，恰當地命名為第5部分的最後一部分，我們將討論部署這一系統。 我會總結所學和我設法創造。
