導航:首頁 > 編程語言 > 多線程程序內存溢出

多線程程序內存溢出

發布時間:2021-10-25 11:47:15

Ⅰ delphi 多線程程序中內存不斷上升的問題!

事實上,你在循環內創建了500次HttpCli1.RcvdStream:=TMemoryStream.Create;

HttpCli1:= THttpCli.Create(nil); 也需要釋放。

Ⅱ 多線程導致內存溢出.什麼原因

JVM內存設置小了 或者一次性讀的數據過大 例如list vertor

一、內存溢出類型

1、java.lang.OutOfMemoryError: PermGen space

JVM管理兩種類型的內存,堆和非堆。堆是給開發人員用的上面說的就是,是在JVM啟動時創建;非堆是留給JVM自己用的,用來存放類的信息的。它和堆不同,運行期內GC不會釋放空間。如果web
app用了大量的第三方jar或者應用有太多的class文件而恰好MaxPermSize設置較小,超出了也會導致這塊內存的佔用過多造成溢出,或者tomcat熱部署時侯不會清理前面載入的環境,只會將context更改為新部署的,非堆存的內容就會越來越多。

PermGen space的全稱是Permanent Generation
space,是指內存的永久保存區域,這塊內存主要是被JVM存放Class和Meta信息的,Class在被Loader時就會被放到PermGen
space中,它和存放類實例(Instance)的Heap區域不同,GC(Garbage Collection)不會在主程序運行期對PermGen
space進行清理,所以如果你的應用中有很CLASS的話,就很可能出現PermGen space錯誤,這種錯誤常見在web伺服器對jsP進行pre
compile的時候。如果你的WEB APP下都用了大量的第三方jar, 其大小超過了jvm默認的大小(4M)那麼就會產生此錯誤信息了。

一個最佳的配置例子:(經過本人驗證,自從用此配置之後,再未出現過tomcat死掉的情況)

set JAVA_OPTS=-Xms800m -Xmx800m -XX:PermSize=128M -XX:MaxNewSize=256m
-XX:MaxPermSize=256m

2、java.lang.OutOfMemoryError: Java heap space

第一種情況是個補充,主要存在問題就是出現在這個情況中。其默認空間(即-Xms)是物理內存的1/64,最大空間(-Xmx)是物理內存的1/4。如果內存剩餘不到40%,JVM就會增大堆到Xmx設置的值,內存剩餘超過70%,JVM就會減小堆到Xms設置的值。所以伺服器的Xmx和Xms設置一般應該設置相同避免每次GC後都要調整虛擬機堆的大小。假設物理內存無限大,那麼JVM內存的最大值跟操作系統有關,一般32位機是1.5g到3g之間,而64位的就不會有限制了。

注意:如果Xms超過了Xmx值,或者堆最大值和非堆最大值的總和超過了物理內存或者操作系統的最大限制都會引起伺服器啟動不起來。

垃圾回收GC的角色

JVM調用GC的頻度還是很高的,主要兩種情況下進行垃圾回收:

當應用程序線程空閑;另一個是java內存堆不足時,會不斷調用GC,若連續回收都解決不了內存堆不足的問題時,就會報out of
memory錯誤。因為這個異常根據系統運行環境決定,所以無法預期它何時出現。

根據GC的機制,程序的運行會引起系統運行環境的變化,增加GC的觸發機會。

為了避免這些問題,程序的設計和編寫就應避免垃圾對象的內存佔用和GC的開銷。顯示調用System.GC()只能建議JVM需要在內存中對垃圾對象進行回收,但不是必須馬上回收,

一個是並不能解決內存資源耗空的局面,另外也會增加GC的消耗。

二、JVM內存區域組成

簡單的說java中的堆和棧

java把內存分兩種:一種是棧內存,另一種是堆內存

1。在函數中定義的基本類型變數和對象的引用變數都在函數的棧內存中分配;

2。堆內存用來存放由new創建的對象和數組

在函數(代碼塊)中定義一個變數時,java就在棧中為這個變數分配內存空間,當超過變數的作用域後,java會自動釋放掉為該變數所分配的內存空間;在堆中分配的內存由java虛擬機的自動垃圾回收器來管理

堆的優勢是可以動態分配內存大小,生存期也不必事先告訴編譯器,因為它是在運行時動態分配內存的。缺點就是要在運行時動態分配內存,存取速度較慢;

棧的優勢是存取速度比堆要快,缺點是存在棧中的數據大小與生存期必須是確定的無靈活性。

java堆分為三個區:New、Old和Permanent

GC有兩個線程:

新創建的對象被分配到New區,當該區被填滿時會被GC輔助線程移到Old區,當Old區也填滿了會觸發GC主線程遍歷堆內存里的所有對象。Old區的大小等於Xmx減去-Xmn

java棧存放

棧調整:參數有+UseDefaultStackSize -Xss256K,表示每個線程可申請256k的棧空間

每個線程都有他自己的Stack

三、JVM如何設置虛擬內存

提示:在JVM中如果98%的時間是用於GC且可用的Heap size 不足2%的時候將拋出此異常信息。

提示:Heap Size 最大不要超過可用物理內存的80%,一般的要將-Xms和-Xmx選項設置為相同,而-Xmn為1/4的-Xmx值。

提示:JVM初始分配的內存由-Xms指定,默認是物理內存的1/64;JVM最大分配的內存由-Xmx指定,默認是物理內存的1/4。

默認空餘堆內存小於40%時,JVM就會增大堆直到-Xmx的最大限制;空餘堆內存大於70%時,JVM會減少堆直到-Xms的最小限制。因此伺服器一般設置-Xms、-Xmx相等以避免在每次GC
後調整堆的大小。

提示:假設物理內存無限大的話,JVM內存的最大值跟操作系統有很大的關系。

簡單的說就32位處理器雖然可控內存空間有4GB,但是具體的操作系統會給一個限制,

這個限制一般是2GB-3GB(一般來說Windows系統下為1.5G-2G,linux系統下為2G-3G),而64bit以上的處理器就不會有限制了

提示:注意:如果Xms超過了Xmx值,或者堆最大值和非堆最大值的總和超過了物理內存或者操作系統的最大限制都會引起伺服器啟動不起來。

提示:設置NewSize、MaxNewSize相等,"new"的大小最好不要大於"old"的一半,原因是old區如果不夠大會頻繁的觸發"主" GC
,大大降低了性能

JVM使用-XX:PermSize設置非堆內存初始值,默認是物理內存的1/64;

由XX:MaxPermSize設置最大非堆內存的大小,默認是物理內存的1/4。

解決方法:手動設置Heap size

修改TOMCAT_HOME/bin/catalina.bat

在「echo "Using CATALINA_BASE: $CATALINA_BASE"」上面加入以下行:

JAVA_OPTS="-server -Xms800m -Xmx800m -XX:MaxNewSize=256m"

四、性能檢查工具使用

定位內存泄漏:

JProfiler工具主要用於檢查和跟蹤系統(限於Java開發的)的性能。JProfiler可以通過時時的監控系統的內存使用情況,隨時監視垃圾回收,線程運行狀況等手段,從而很好的監視JVM運行情況及其性能。

1. 應用伺服器內存長期不合理佔用,內存經常處於高位佔用,很難回收到低位;

2. 應用伺服器極為不穩定,幾乎每兩天重新啟動一次,有時甚至每天重新啟動一次;

3. 應用伺服器經常做Full GC(Garbage Collection),而且時間很長,大約需要30-40秒,應用伺服器在做Full
GC的時候是不響應客戶的交易請求的,非常影響系統性能。

因為開發環境和產品環境會有不同,導致該問題發生有時會在產品環境中發生,通常可以使用工具跟蹤系統的內存使用情況,在有些個別情況下或許某個時刻確實是使用了大量內存導致out
of memory,這時應繼續跟蹤看接下來是否會有下降,

如果一直居高不下這肯定就因為程序的原因導致內存泄漏。

五、不健壯代碼的特徵及解決辦法

1、盡早釋放無用對象的引用。好的辦法是使用臨時變數的時候,讓引用變數在退出活動域後,自動設置為null,暗示垃圾收集器來收集該對象,防止發生內存泄露。

對於仍然有指針指向的實例,jvm就不會回收該資源,因為垃圾回收會將值為null的對象作為垃圾,提高GC回收機制效率;

2、我們的程序里不可避免大量使用字元串處理,避免使用String,應大量使用StringBuffer,每一個String對象都得獨立佔用內存一塊區域;

String str = "aaa";

String str2 = "bbb";

String str3 = str + str2;//假如執行此次之後str
,str2以後再不被調用,那它就會被放在內存中等待Java的gc去回收,程序內過多的出現這樣的情況就會報上面的那個錯誤,建議在使用字元串時能使用StringBuffer就不要用String,這樣可以省不少開銷;

3、盡量少用靜態變數,因為靜態變數是全局的,GC不會回收的;

4、避免集中創建對象尤其是大對象,JVM會突然需要大量內存,這時必然會觸發GC優化系統內存環境;顯示的聲明數組空間,而且申請數量還極大。

這是一個案例想定供大家警戒

使用jspsmartUpload作文件上傳,運行過程中經常出現java.outofMemoryError的錯誤,

檢查之後發現問題:組件里的代碼

m_totalBytes = m_request.getContentLength();

m_binArray = new byte[m_totalBytes];

問題原因是totalBytes這個變數得到的數極大,導致該數組分配了很多內存空間,而且該數組不能及時釋放。解決辦法只能換一種更合適的辦法,至少是不會引發outofMemoryError的方式解決。參考:http://bbs.xml.org.cn/blog/more.asp?name=hongrui&id=3747

5、盡量運用對象池技術以提高系統性能;生命周期長的對象擁有生命周期短的對象時容易引發內存泄漏,例如大集合對象擁有大數據量的業務對象的時候,可以考慮分塊進行處理,然後解決一塊釋放一塊的策略。

6、不要在經常調用的方法中創建對象,尤其是忌諱在循環中創建對象。可以適當的使用hashtable,vector
創建一組對象容器,然後從容器中去取那些對象,而不用每次new之後又丟棄

7、一般都是發生在開啟大型文件或跟資料庫一次拿了太多的數據,造成 Out Of Memory Error
的狀況,這時就大概要計算一下數據量的最大值是多少,並且設定所需最小及最大的內存空間值。

Ⅲ 這個多線程程序為什麼運行幾次結果都不一樣,不能總是出現我要的情況嗎

呵呵,當初我學多線程時也遇到過這樣的問題,也是輸出的結果每次都不一樣。後來我找到原因了---都是多核惹得禍。

我猜你的電腦應該也是多核的。單核的cpu在處理多線程時每次只能執行一跳指令,也就是說無論你的程序有多少個線程,每一時刻執行的也只是一個線程里的代碼,cpu會輪流給每個線程分配時間片,時間片分配到哪個線程頭上,哪個線程里的代碼就執行。但是多核cpu就不一樣了,他可以同時執行多個線程里的代碼,這才是真正的「多線程」。所以你那段程序,在單核的電腦上跑應該是沒有問題的,但是在多核cpu的電腦上出現的結果就會有很大的隨機性。

就你貼的那張圖來說,左邊的運行時恰好是這樣的,首先cpu1執行你主線程里的代碼 在終端輸出Now another thread has been created. ID =,但是由於多個cpu是同時進行的,而這時cpu2已經開始執行ThreadProc里的代碼,也要開始向終端輸出字元,而你的屏幕只有一個,恰好這時cpu1的時間片被移走了,所以cpu2開始執行ThreadProc里的代碼向屏幕上輸出,直到打完I am from a thread 17後,恰好cpu2的時間片被移走了,這時cpu1接著向屏幕打dwThreadId的值,這就出現了4660.接著又是cpu2執行完ThreadProc中剩餘的代碼又打了幾行。

右邊的這個程序運行時,恰好就是cpu1執行主線程代碼輸出完後,cpu2再執行線程函數中代碼,符合你的預期。

但是,關鍵問題在於,你無法預測每個cpu的時間片分配。所以,要得到你想要的輸出結果就屬於隨機事件了。

對與多核cpu 上的程序同步問題,最好不要用信號量,互斥量,事件對象,因為它們都屬於內核對象,都是對一個cpu而言的。其他的cpu根本不會理睬你設置的這些東西。另外你的WaitForSingleObject (hThread, INFINITE); 也是在一個cpu里等待線程函數返回,對cpu2沒有任何作用。

建議你用臨界區(Critical Section)來實現多線程同步,因為臨界區不是內核對象,他只是在進程內存中一塊區域,無論有多少個cpu,任何時刻只能有一個線程訪問這塊內存區域,只需將你列印的部分放到臨界區里就行了。

#include "stdafx.h"
#include <windows.h>
#include <iostream>
using namespace std;
CRITICAL_SECTION g_cs;
DWORD WINAPI ThreadProc(
LPVOID lpParameter // thread data
)
{
int i=0;
while (i<20)
{
EnterCriticalSection(&g_cs);
cout<<"I am from a thread"<<" "<<i++<<endl;
LeaveCriticalSection(&g_cs);

}
return 0;
}

int main(int argc, char* argv[])
{
HANDLE hThread;
DWORD dwThreadId;
InitializeCriticalSection(&g_cs);

// 創建一個線程
hThread = ::CreateThread (
NULL, // 默認安全屬性
NULL, // 默認堆棧大小
ThreadProc, // 線程入口地址(執行線程的函數)
NULL, // 傳給函數的參數
0, // 指定線程立即運行
&dwThreadId); // 返回線程的ID號
EnterCriticalSection(&g_cs);
cout<<"Now another thread has been created. ID ="<< dwThreadId <<"\n";
LeaveCriticalSection(&g_cs);

// 等待新線程運行結束
::WaitForSingleObject (hThread, INFINITE);
::CloseHandle (hThread);
return 0;
}

ps: kdzhy2008推薦的 侯捷 譯的《win32多線程程序設計》確實是本好書,雖然是97年出版的,但是很多東西對現在還是很有啟迪的。

希望對你能有所幫助,呵呵~~

Ⅳ java多線程調用ktr文件內存溢出java.lang.OutOfMemoryError:GC overhead limit exceeded

兩種方案:1.把Java虛擬機的內存設大點;2.手動釋放內存機制,而不是執行完之後由Java虛擬機統一釋放

Ⅳ delphi 7 做多線程程序,內存不斷增加,怎麼解決

內存泄露是因為有對象被創建或者內存被申請等,最終沒有被釋放,才造成內存被消耗,從上面代碼看不出

Ⅵ 為什麼反復創建釋放多線程TTHREAD對象會引起內存溢出

把FreeOnTerminate去掉,原因是你設置了線程的FreeOnTerminate,這樣會導致線程執行完畢的時候,自動釋放線程對象,這樣就導致了這個線程對象是在主線程中申請的,但是在分線程釋放的,一般解決辦法是線程執行完畢手動釋放。
在編寫線程的時候,要遵守基本的原則,即本線程申請的內存,本線程負責釋放,主線程申請的TThread,應該在主線程釋放,而不是用FreeOnTerminate來釋放。

Ⅶ java 多線程 cpu利用率100%問題,我做了一個程序,10個線程,不到一分鍾,cpu就100%了,怎麼解決。

一般一個cpu核心可以來搭載兩個線程,源你根據核心去搭載線程,不要亂放線程。
還有你有10個線程同時跑耗時操作最少也要4核的cpu,你可以減少線程或者減少線程中的耗時操作。
如果你是解碼或者壓縮程序的話那麼cpu100%也很正常,如果是socket網路連接你可以看看windows iocp,linux epoll的實現。

Ⅷ 多線程測試,內存溢出,為什麼java沒給我自動

1、對象創建得太快,垃圾回收機制,也趕不上你的速度。
2、你確定你創建的對象正確釋放了引用?引用還在,垃圾回收機制怎麼給你回收。
3、虛擬機的內存配置不合理,垃圾回收機制在運行,虛擬機那點可憐內存就被耗光。怎麼幫你回收?
總結,CG的自動化是個好東西,別過分相信虛擬機給你提供的這能力是萬能的。使用權是你!因此多了解一下,什麼情況下會把虛擬機給干趴下。可以編寫更合理的程序。

Ⅸ 關於多線程應用程序中線程訪問公共內存的問題

N個線程訪問同一個資源是有可能出現資源錯亂的 一般情況下必須按照一個一個線程來處理
同一個資源同一時間只能讓其中的一個線程訪問

閱讀全文

與多線程程序內存溢出相關的資料

熱點內容
電影搜索 英語翻譯 瀏覽:865
北京百度時代網路技術有限公司 瀏覽:996
主角叫林奕和陳婉兒的小說 瀏覽:896
手機網站做成app免費 瀏覽:462
全國最大影院免費 瀏覽:898
巫師三win10文件目錄 瀏覽:516
宋蒙之戰的電影 瀏覽:445
用ps如何將word轉換pdf文件 瀏覽:323
扎職2粵語在線看免費 瀏覽:136
winrar壓縮文件夾 瀏覽:185
翻譯中語影視APP 瀏覽:618
女主是顧念的小說 瀏覽:401
禁播級電影 瀏覽:900
齊河銀座天美電影院今日電影 瀏覽:488
康佳42r6610au升級 瀏覽:839
最新你懂得電影網站 瀏覽:873
javaapi文檔工具 瀏覽:296
系統修復部分文件 瀏覽:653
電腦上文件格式怎麼改pdf 瀏覽:923

友情鏈接