C++/C--mmap()詳解

1 概念

mmap將一個文件或者其它對象映射進內存。文件被映射到多個頁上,如果文件的大小不是所有頁的大小之和,最後一個頁不被使用的空間將會清零。mmap在用戶空間映射調用系統中作用很大。

頭文件:

  • #include <sys/mman.h>

函數原型:

  • void* mmap(void* start,size_t length,int prot,int flags,int fd,off_t offset);
  • int munmap(void* start,size_t length);

2 條件、參數說明及返回說明

2.1 條件

mmap()必須以PAGE_SIZE爲單位進行映射,而內存也只能以頁爲單位進行映射,若要映射非PAGE_SIZE整數倍的地址範圍,要先進行內存對齊,強行以PAGE_SIZE的倍數大小進行映射。

2.2 參數說明

start: 映射區的開始地址,設置爲0時表示由系統決定映射區的起始地址。
length: 映射區的長度。//長度單位是 以字節爲單位,不足一內存頁按一內存頁處理
prot: 期望的內存保護標誌,不能與文件的打開模式衝突。是以下的某個值,可以通過or運算合理地組合在一起

  • PROT_EXEC //頁內容可以被執行
  • PROT_READ //頁內容可以被讀取
  • PROT_WRITE //頁可以被寫入
  • PROT_NONE //頁不可訪問

flags: 指定映射對象的類型,映射選項和映射頁是否可以共享。它的值可以是一個或者多個以下位的組合體

  • MAP_FIXED //使用指定的映射起始地址,如果由start和len參數指定的內存區重疊於現存的映射空間,重疊部分將會被丟棄。如果指定的起始地址不可用,操作將會失敗。並且起始地址必須落在頁的邊界上。
  • MAP_SHARED //與其它所有映射這個對象的進程共享映射空間。對共享區的寫入,相當於輸出到文件。直到msync()或者munmap()被調用,文件實際上不會被更新。
  • MAP_PRIVATE //建立一個寫入時拷貝的私有映射。內存區域的寫入不會影響到原文件。這個標誌和以上標誌是互斥的,只能使用其中一個。
  • MAP_DENYWRITE //這個標誌被忽略。
  • MAP_EXECUTABLE //同上
  • MAP_NORESERVE //不要爲這個映射保留交換空間。當交換空間被保留,對映射區修改的可能會得到保證。當交換空間不被保留,同時內存不足,對映射區的修改會引起段違例信號。
  • MAP_LOCKED //鎖定映射區的頁面,從而防止頁面被交換出內存。
  • MAP_GROWSDOWN //用於堆棧,告訴內核VM系統,映射區可以向下擴展。
  • MAP_ANONYMOUS //匿名映射,映射區不與任何文件關聯。
  • MAP_ANON //MAP_ANONYMOUS的別稱,不再被使用。
  • MAP_FILE //兼容標誌,被忽略。
  • MAP_32BIT //將映射區放在進程地址空間的低2GB,MAP_FIXED指定時會被忽略。當前這個標誌只在x86-64平臺上得到支持。
  • MAP_POPULATE //爲文件映射通過預讀的方式準備好頁表。隨後對映射區的訪問不會被頁違例阻塞。
  • MAP_NONBLOCK //僅和MAP_POPULATE一起使用時纔有意義。不執行預讀,只爲已存在於內存中的頁面建立頁表入口。

fd: 有效的文件描述詞。一般是由open()函數返回,其值也可以設置爲-1,此時需要指定flags參數中的MAP_ANON,表明進行的是匿名映射。
off_toffset: 被映射對象內容的起點。

2.3 返回說明

成功執行時,mmap()返回被映射區的指針,munmap()返回0。失敗時,mmap()返回MAP_FAILED[其值爲(void *)-1],munmap返回-1。errno被設爲以下的某個值:

  • EACCES:訪問出錯
  • EAGAIN:文件已被鎖定,或者太多的內存已被鎖定
  • EBADF:fd不是有效的文件描述詞
  • EINVAL:一個或者多個參數無效
  • ENFILE:已達到系統對打開文件的限制
  • ENODEV:指定文件所在的文件系統不支持內存映射
  • ENOMEM:內存不足,或者進程已超出最大內存映射數量
  • EPERM:權能不足,操作不允許
  • ETXTBSY:已寫的方式打開文件,同時指定MAP_DENYWRITE標誌
  • SIGSEGV:試着向只讀區寫入
  • SIGBUS:試着訪問不屬於進程的內存區

3 特點

mmap操作提供了一種機制,讓用戶程序直接訪問設備內存,這種機制,相比較在用戶空間和內核空間互相拷貝數據,效率更高。在要求高性能的應用中比較常用。mmap映射內存必須是頁面大小的整數倍,面向流的設備不能進行mmap,mmap的實現和硬件有關。

4 系統調用

mmap()系統調用使得進程之間通過映射同一個普通文件實現共享內存。普通文件被映射到進程地址空間後,進程可以像訪問普通內存一樣對文件進行訪問,不必再調用read(),write()等操作。
  注:實際上,mmap()系統調用並不是完全爲了用於共享內存而設計的。它本身提供了不同於一般對普通文件的訪問方式,進程可以像讀寫內存一樣對普通文件的操作。而Posix或System V的共享內存IPC則純粹用於共享目的,當然mmap()實現共享內存也是其主要應用之一。
  1、mmap()系統調用形式如下:
  void* mmap ( void * addr , size_t len , int prot , int flags , int fd , off_t offset )
  參數fd爲即將映射到進程空間的文件描述字,一般由open()返回,同時,fd可以指定爲-1,此時須指定flags參數中的MAP_ANON,表明進行的是匿名映射(不涉及具體的文件名,避免了文件的創建及打開,很顯然只能用於具有親緣關係的進程間通信)。len是映射到調用進程地址空間的字節數,它從被映射文件開頭offset個字節開始算起。prot 參數指定共享內存的訪問權限。可取如下幾個值的或:PROT_READ(可讀) , PROT_WRITE (可寫), PROT_EXEC (可執行), PROT_NONE(不可訪問)。flags由以下幾個常值指定:MAP_SHARED , MAP_PRIVATE , MAP_FIXED,其中,MAP_SHARED , MAP_PRIVATE必選其一,而MAP_FIXED則不推薦使用。offset參數一般設爲0,表示從文件頭開始映射。參數addr指定文件應被映射到進程空間的起始地址,一般被指定一個空指針,此時選擇起始地址的任務留給內核來完成。函數的返回值爲最後文件映射到進程空間的地址,進程可直接操作起始地址爲該值的有效地址。這裏不再詳細介紹mmap()的參數,讀者可參考mmap()手冊頁獲得進一步的信息。
  2、系統調用mmap()用於共享內存的兩種方式:
  (1)使用普通文件提供的內存映射:適用於任何進程之間;此時,需要打開或創建一個文件,然後再調用mmap();典型調用代碼如下:
  fd=open(name, flag, mode);
  if(fd<0)
  …
  ptr=mmap(NULL, len , PROT_READ|PROT_WRITE, MAP_SHARED , fd , 0); 通過mmap()實現共享內存的通信方式有許多特點和要注意的地方,我們將在範例中進行具體說明。
  (2)使用特殊文件提供匿名內存映射:適用於具有親緣關係的進程之間;由於父子進程特殊的親緣關係,在父進程中先調用mmap(),然後調用fork()。那麼在調用fork()之後,子進程繼承父進程匿名映射後的地址空間,同樣也繼承mmap()返回的地址,這樣,父子進程就可以通過映射區域進行通信了。注意,這裏不是一般的繼承關係。一般來說,子進程單獨維護從父進程繼承下來的一些變量。而mmap()返回的地址,卻由父子進程共同維護。
  對於具有親緣關係的進程實現共享內存最好的方式應該是採用匿名內存映射的方式。此時,不必指定具體的文件,只要設置相應的標誌即可,參見範例2。
  3、系統調用munmap()
  int munmap( void * addr, size_t len )
  該調用在進程地址空間中解除一個映射關係,addr是調用mmap()時返回的地址,len是映射區的大小。當映射關係解除後,對原來映射地址的訪問將導致段錯誤發生。
  4、系統調用msync()
  int msync ( void * addr , size_t len, int flags)
  一般說來,進程在映射空間的對共享內容的改變並不直接寫回到磁盤文件中,往往在調用munmap()後才執行該操作。可以通過調用msync()實現磁盤上文件內容與共享內存區的內容一致。

5 範例

下面將給出使用mmap()的一個範例:範例1給出兩個進程通過映射普通文件實現共享內存通信;系統調用 mmap()有許多有趣的地方,下面是通過mmap()映射普通文件實現進程間的通信的範例,我們通過該範例來說明mmap()實現共享內存的特點及注意事項。
  範例1:兩個進程通過映射普通文件實現共享內存通信
  範例1包含兩個子程序:map_normalfile1.c及map_normalfile2.c。編譯兩個程序,可執行文件分別爲 map_normalfile1及map_normalfile2。兩個程序通過命令行參數指定同一個文件來實現共享內存方式的進程間通信。 map_normalfile1試圖打開命令行參數指定的一個普通文件,把該文件映射到進程的地址空間,並對映射後的地址空間進行寫操作。 map_normalfile2把命令行參數指定的文件映射到進程地址空間,然後對映射後的地址空間執行讀操作。這樣,兩個進程通過命令行參數指定同一個文件來實現共享內存方式的進程間通信。

代碼示例:
下面是兩個程序代碼:

/*-------------map_normalfile1.c-----------*/
#include<sys/mman.h>
#include<sys/types.h>
#include<fcntl.h>
#include<string.h>
#include<stdio.h>
#include<unistd.h>
#include <errno.h>
typedef struct{
    char name[4];
    int age;
}people;
void main(int argc,char **argv)//map a normal file as shared mem:
{
    int fd,i;
    people *p_map;
    char temp;
    fd = open(argv[1],O_CREAT|O_RDWR|O_TRUNC,00777);
    lseek(fd,sizeof(people)*5-1,SEEK_SET);
    write(fd,"",1);
    p_map=(people*)mmap(NULL,sizeof(people)*10,PROT_READ|PROT_WRITE,MAP_SHARED,fd,0);
    if (p_map == (void *)-1)
    {
        fprintf(stderr, "mmap: %s\n", strerror(errno));
        return ;
    }
    close(fd);
    temp='a';
    for(i=0;i<10;i++)
    {
        temp+=1;
        (*(p_map+i)).name[1] = '\0';
        memcpy((*(p_map+i)).name,&temp,1);
        (*(p_map+i)).age=20+i;
    }
    printf("initializeover\n");
    sleep(10);
    munmap(p_map,sizeof(people)*10);
    printf("umapok\n");
}
 
/*-------------map_normalfile2.c-----------*/
#include<sys/mman.h>
#include<sys/types.h>
#include<fcntl.h>
#include<stdio.h>
#include<unistd.h>
#include <errno.h>
typedef struct{
    char name[4];
    int age;
}people;
void main(int argc,char **argv)//map a normal file as shared mem:
{
    int fd,i;
    people *p_map;
    fd=open(argv[1],O_CREAT|O_RDWR,00777);
    p_map=(people*)mmap(NULL,sizeof(people)*10,PROT_READ|PROT_WRITE,MAP_SHARED,fd,0);
    if (p_map == (void *)-1)
    {
        fprintf(stderr, "mmap: %s\n", strerror(errno));
        return ;
    }
    for(i=0;i<10;i++)
    {
        printf("name:%s age%d;\n",(*(p_map+i)).name,(*(p_map+i)).age);
    }
    munmap(p_map,sizeof(people)*10);
}

代碼解釋

map_normalfile1.c 首先定義了一個people數據結構,(在這裏採用數據結構的方式是因爲,共享內存區的數據往往是有固定格式的,這由通信的各個進程決定,採用結構的方式有普遍代表性)。map_normfile1首先打開或創建一個文件,並把文件的長度設置爲5個people結構大小。然後從mmap()的返回地址開始,設置了10個people結構。然後,進程睡眠10秒鐘,等待其他進程映射同一個文件,最後解除映射。
  map_normfile2.c只是簡單的映射一個文件,並以people數據結構的格式從mmap()返回的地址處讀取10個people結構,並輸出讀取的值,然後解除映射。
  分別把兩個程序編譯成可執行文件map_normalfile1和map_normalfile2後,在一個終端上先運行./map_normalfile1 /tmp/test_shm,程序輸出結果如下:
  initialize over
  umap ok
  在map_normalfile1輸出initialize over 之後,輸出umap ok之前,在另一個終端上運行map_normalfile2 /tmp/test_shm,將會產生如下輸出(爲了節省空間,輸出結果爲稍作整理後的結果):
  name: b age 20; name: c age 21; name: d age 22; name: e age 23; name: f age 24;
  name: g age 25; name: h age 26; name: I age 27; name: j age 28; name: k age 29;
  在map_normalfile1 輸出umap ok後,運行map_normalfile2則輸出如下結果:
  name: b age 20; name: c age 21; name: d age 22; name: e age 23; name: f age 24;
  name: age 0; name: age 0; name: age 0; name: age 0; name: age 0;

6 結論

從程序的運行結果中可以得出的結論
  1、 最終被映射文件的內容的長度不會超過文件本身的初始大小,即映射不能改變文件的大小;
  2、可以用於進程通信的有效地址空間大小大體上受限於被映射文件的大小,但不完全受限於文件大小。打開文件被截短爲5個people結構大小,而在 map_normalfile1中初始化了10個people數據結構,在恰當時候(map_normalfile1輸出initialize over 之後,輸出umap ok之前)調用map_normalfile2會發現map_normalfile2將輸出全部10個people結構的值,後面將給出詳細討論。
  注:在linux中,內存的保護是以頁爲基本單位的,即使被映射文件只有一個字節大小,內核也會爲映射分配一個頁面大小的內存。當被映射文件小於一個頁面大小時,進程可以對從mmap()返回地址開始的一個頁面大小進行訪問,而不會出錯;但是,如果對一個頁面以外的地址空間進行訪問,則導致錯誤發生,後面將進一步描述。因此,可用於進程間通信的有效地址空間大小不會超過文件大小及一個頁面大小的和。
  3、文件一旦被映射後,調用mmap()的進程對返回地址的訪問是對某一內存區域的訪問,暫時脫離了磁盤上文件的影響。所有對mmap()返回地址空間的操作只在內存中有意義,只有在調用了munmap()後或者msync()時,才把內存中的相應內容寫回磁盤文件,所寫內容仍然不能超過文件的大小。

7 其他

munmap執行相反的操作,刪除特定地址區域的對象映射,基於文件的映射,在mmap和munmap執行過程的任何時刻,被映射文件的st_atime可能被更新。如果st_atime字段在前述的情況下沒有得到更新,首次對映射區的第一個頁索引時會更新該字段的值。用PROT_WRITE 和 MAP_SHARED標誌建立起來的文件映射其st_ctime 和 st_mtime,在對映射區寫入之後但在msync()通過MS_SYNC 和 MS_ASYNC兩個標誌調用之前會被更新


以上內容來自:

  1. mmap【百度百科】
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章