ÖÐÎÄ
½»Á÷»ú
Ô°ÇøÍø½»Á÷»ú
Êý¾ÝÖÐÐÄÓëÔÆÅÌËã½»Á÷»ú
ÐÐÒµ¾«Ñ¡½»Á÷ϵÁÐ
¹¤Òµ½»Á÷»ú
Åä¼þ
ËùÓÐÊÖÒÕ½â¾ö¼Æ»®
·ÓÉÆ÷
»ã¾Û·ÓÉÆ÷
ÐÐÒµ¾«Ñ¡Â·ÓÉÆ÷ϵÁÐ
ËùÓÐÊÖÒÕ½â¾ö¼Æ»®
ÎÞÏß
·Å×°ÐÍÎÞÏß½ÓÈëµã
Ç½ÃæÐÍÎÞÏß½ÓÈëµã
ÖÇ·ÖÎÞÏß½ÓÈëµã
ÊÒÍâÎÞÏß½ÓÈëµã
³¡¾°»¯ÎÞÏß
ÎÞÏß¿ØÖÆÆ÷
ÐÐÒµ¾«Ñ¡ÎÞÏßϵÁÐ
ÎÞÏß¹ÜÀíÓëÓ¦ÓÃ
ÔÆ×ÀÃæ
ÔÆÖÕ¶ËϵÁÐ
ÔÆÖ÷»úϵÁÐ
ÔÆ×ÀÃæÈí¼þϵÁÐ
Åä¼þϵÁÐ
·þÎñ²úÆ·
Çå¾²
´óÊý¾ÝÇ徲ƽ̨
ÏÂÒ»´ú·À»ðǽ
Çå¾²Íø¹Ø
¼ì²â¹ÜÀíÇå¾²
ËùÓÐÊÖÒÕ½â¾ö¼Æ»®
Èí¼þ
Éí·Ý¹ÜÀí
·þÎñ²úÆ·
»ù´¡Î¬»¤·þÎñ
ÔËά¹ÜÀí·þÎñ
Çå¾²·þÎñ
±¸¼þÓëÀ©ÈÝ·þÎñ
ÅàѵÓëÈÏÖ¤·þÎñ
¿´¹ýÇ°Ãæ¼¸ÆÚµÄÊÖÒÕÎÄÕ£¬ÏàП÷È˶ÔRDMA(Remote Direct Memory Access£¬Ô¶³ÌÖ±½ÓÊý¾Ý´æÈ¡)ºÍÎÞËðÍøÂçÓÐÁËÒ»¶¨µÄÊìϤ£¬Ò²Ðí¸÷ÈË»áÎÊΪʲôÎÒÃÇÐèÒªRDMA£¿ÎªÊ²Ã´ÎÒÃÇÐèÒªÎÞËðÍøÂ磿ÕâЩÏȽøµÄÊÖÒÕÊÂʵÄܸøÎÒÃÇ´øÀ´Ê²Ã´ÀûÒæ£¿
Ö»´ÓÍøÂç²ãÃæÀ´¿´¿ÉÄÜÎÞ·¨µÃ³öÁîÈËÖª×ãµÄÃÕµ×£¬ÏÂÃæ»®·ÖÒÔǰ¶ËÓªÒµºÍºó¶ËÓ¦Ó㬼òÆÓö¾Ù¼¸¸öÀý×Ó£¬ÏàП÷ÈË¿ÉÒÔ´ÓÖн⿪ÒÉ»ó¡£
Ê×ÏÈÏë˵µÄÊÇ»¥ÁªÍøÖдó×ÚµÄÔÚÏßÓªÒµ£¬ÀýÈçÔÚÏßËÑË÷¡¢¹ºÎï¡¢Ö±²¥µÈ£¬ËüÐèÒªÒԷdz£¿ìµÄËÙÂÊ¶Ô¸ßÆµÂʵÄÓû§ÇëÇó×ö³öÓ¦´ð£¬Êý¾ÝÖÐÐÄÄÚÈκÎÒ»¸ö»·½Úµ¼ÖÂÑÓ³Ù£¬¶¼»á¶ÔÖÕ¶ËÓû§µÄ»á¼ûÌåÑéÔì³É¼«´óµÄÓ°Ï죬´Ó¶øÓ°ÏìÆäÁ÷Á¿¡¢¿Ú±®¡¢»îÔ¾Óû§µÈ¡£
ÉÐÓÐÔÚ»úеѧϰºÍAIµÄÊÖÒÕÇ÷ÊÆÏ£¬¶ÔÅÌËãÄÜÁ¦µÄÐèÇóÊdzʼ¸ºÎ¼¶ÊýÉÏÉýµÄ£¬ÎªÁËÖª×ãÈÕÒæÖØ´óµÄÉñ¾ÍøÂçºÍÉî¶Èѧϰģ×Ó£¬Êý¾ÝÖÐÐĻᱣ´æ´ó×ÚµÄÂþÑÜʽÅÌË㼯Ⱥ£¬µ«´ó×Ú²¢ÐгÌÐòµÄͨѶÑÓ³Ù£¬Ôò»á¼«´óÓ°ÏìÕû¸öÅÌËãÀú³ÌµÄЧÂÊ¡£
ÁíÍâΪÏàʶ¾öÊý¾ÝÖÐÐÄÄÚ±¬Õ¨Ê½ÔöÌíµÄÊý¾Ý´æ´¢ºÍ¶ÁȡЧÂÊÎÊÌ⣬ʹÓÃÒÔÌ«ÍøÈÚºÏ×éÍøµÄÂþÑÜʽ´æ´¢Ô½À´Ô½Êܵ½»¶Ó¡£µ«ÓÉÓÚ´æ´¢ÍøÂçÖÐÊý¾ÝÁ÷ÒÔ´óÏóÁ÷ΪÖ÷£¬ÒÔÊÇÒ»µ©ÒòÓµÈûÔì³É¶ª°ü£¬½«»áÒý·¢´óÏóÁ÷ÖØ´«£¬²»µ«½µµÍЧÂÊ£¬»¹»á¼ÓÖØÓµÈû¡£
ÒÔÊÇÒÔǰ¶ËÓû§µÄÌåÑéºÍºó¶ËÓ¦ÓõÄЧÂÊÀ´¿´£¬ÑÛϹØÓÚÊý¾ÝÖÐÐÄÍøÂçµÄÒªÇóÊÇ£ºÑÓ³ÙÔ½µÍÔ½ºÃ£¬Ð§ÂÊÔ½¸ßÔ½ºÃ¡£
ΪÁ˽µµÍÊý¾ÝÖÐÐÄÄÚ²¿ÍøÂçÑÓ³Ù£¬Ìá¸ß´¦Öóͷ£Ð§ÂÊ£¬RDMAÊÖÒÕÓ¦Ô˶øÉú£¬Í¨¹ýÔÊÐíÓû§Ì¬µÄÓ¦ÓóÌÐòÖ±½Ó¶ÁÈ¡ºÍдÈëÔ¶³ÌÄڴ棬¶øÎÞÐèCPU½éÈë¶à´Î¿½±´Äڴ棬²¢¿ÉÈÆ¹ýÄÚºËÖ±½ÓÏòÍø¿¨Ð´Êý¾Ý£¬ÊµÏÖÁ˸ßÍÌÍÂÁ¿¡¢³¬µÍʱÑӺ͵ÍCPU¿ªÏúµÄЧ¹û¡£
Ä¿½ñRDMAÔÚÒÔÌ«ÍøÉϵĴ«ÊäÐÒéÊÇRoCEv2£¬RoCEv2ÊÇ»ùÓÚÎÞÅþÁ¬ÐÒéµÄUDPÐÒ飬Ïà±ÈÃæÏòÅþÁ¬µÄTCPÐÒ飬UDPÐÒéÔ½·¢¿ìËÙ¡¢Õ¼ÓÃCPU×ÊÔ´¸üÉÙ£¬µ«Æä²»ÏñTCPÐÒéÄÇÑùÓ묶¯´°¿Ú¡¢È·ÈÏÓ¦´ðµÈ»úÖÆÀ´ÊµÏÖ¿É¿¿´«Ê䣬һµ©·ºÆð¶ª°ü£¬ÒÀÀµÉϲãÓ¦Óüì²éµ½ÁËÔÙ×öÖØ´«£¬»á´ó´ó½µµÍRDMAµÄ´«ÊäЧÂÊ¡£
ÒÔÊÇÒªÏëʩչ³öRDMAÕæÕýµÄÐÔÄÜ£¬Í»ÆÆÊý¾ÝÖÐÐÄ´ó¹æÄ£ÂþÑÜʽϵͳµÄÍøÂçÐÔÄÜÆ¿¾±£¬ÊÆÐëҪΪRDMA´î½¨Ò»Ìײ»¶ª°üµÄÎÞËðÍøÂçÇéÐΣ¬¶øÊµÏÖ²»¶ª°üµÄÒªº¦¾ÍÊǽâ¾öÍøÂçÓµÈû¡£
Ϊʲô»á±¬·¢ÓµÈû
±¬·¢ÓµÈûµÄÔµ¹ÊÔÓÉÓÐÐí¶à£¬ÏÂ̦̾¾ÙÁËÔÚÊý¾ÝÖÐÐij¡¾°Àï½ÏÁ¿Òªº¦Ò²ÊǽÏÁ¿³£¼ûµÄÈýµãÔµ¹ÊÔÓÉ£º
ÊÕÁ²±È
¾ÙÐÐÊý¾ÝÖÐÐÄÍøÂç¼Ü¹¹Éè¼ÆÊ±£¬´Ó±¾Ç®ºÍÊÕÒæÁ½·½ÃæÀ´Ë¼Á¿£¬´ó¶¼»á½ÓÄɷǶԳƴø¿íÉè¼Æ£¬¼´ÉÏÏÂÐÐÁ´Â·´ø¿í·×ÆçÖ£¬½»Á÷»úµÄÊÕÁ²±È¼òÆÓ˵¾ÍÊÇ×ܵÄÊäÈë´ø¿í³ýÒÔ×ܵÄÊä³ö´ø¿í¡£ÒÔ97¹ú¼ÊÍòÕ×½»Á÷»úRG-S6220-48XS6QXS-HΪÀý£¬ÏÂÐпɹ©·þÎñÆ÷ÊäÈëµÄ´ø¿íÊÇ48*10G=480G£¬ÉÏÐÐÊä³öµÄ´ø¿íÊÇ6*40G=240G£¬Õû»úÊÕÁ²±ÈΪ2:1¡£¶ø25G½»Á÷»úRG-S6510-48VS8CQ£¬ÏÂÐпɹ©·þÎñÆ÷ÊäÈëµÄ´ø¿íÊÇ48*25G=1200G£¬ÉÏÐÐÊä³öµÄ´ø¿íÊÇ8*100G=800G£¬Õû»úÊÕÁ²±ÈÊÇ1.5:1¡£
Ò²¾ÍÊÇ˵£¬µ±ÏÂÁªµÄ·þÎñÆ÷ÉÏÐз¢°ü×ÜËÙÂÊÁè¼ÝÉÏÐÐÁ´Â·×Ü´ø¿íʱ£¬¾Í»áÔÚÉÏÐпڷºÆðÓµÈû¡£
ECMP
Ä¿½ñÊý¾ÝÖÐÐÄÍøÂç¶à½ÓÄÉFabric¼Ü¹¹£¬²¢½ÓÄÉECMPÀ´¹¹½¨¶àÌõµÈ¼Û¸ºÔØÆ½ºâµÄÁ´Â·£¬Í¨¹ýÉèÖÃÈŶ¯Òò×Ó²¢HASHÑ¡ÔñÒ»ÌõÁ´Â·À´×ª·¢ÊǼòÆÓµÄ£¬µ«Õâ¸öÀú³ÌÖÐȴûÓÐ˼Á¿µ½ËùÑ¡Á´Â·×Ô¼ºÊÇ·ñÓÐÓµÈû¡£ECMP²¢Ã»ÓÐÓµÈû¸ÐÖªµÄ»úÖÆ£¬Ö»Êǽ«Á÷ÊèÉ¢µ½²î±ðµÄÁ´Â·ÉÏת·¢£¬¹ØÓÚÒѾ±¬·¢ÓµÈûµÄÁ´Â·À´Ëµ£¬ºÜ¿ÉÄܼӾçÁ´Â·µÄÓµÈû¡£
TCP Incast
TCP IncastÊÇMany-to-OneµÄͨѶģʽ£¬ÔÚÊý¾ÝÖÐÐÄÔÆ»¯µÄ´óÇ÷ÊÆÏÂÕâÖÖͨѶģʽ¾³£±¬·¢£¬ÓÈÆäÊÇÄÇЩÒÔScale-Out·½·¨ÊµÏÖµÄÂþÑÜʽ´æ´¢ºÍÅÌËãÓ¦Ó㬰üÀ¨Hadoop¡¢MapReduce¡¢HDFSµÈ¡£
ÀýÈ磬µ±Ò»¸öParent ServerÏòÒ»×é½Úµã£¨·þÎñÆ÷¼¯Èº»ò´æ´¢¼¯Èº£©Ìᳫһ¸öÇëÇóʱ£¬¼¯ÈºÖеĽڵ㶼»áͬʱÊÕµ½¸ÃÇëÇ󣬲¢ÇÒÏÕЩͬʱ×ö³öÏìÓ¦£¬Ðí¶à½ÚµãͬʱÏòһ̨»úе£¨Parent Server£©·¢ËÍTCPÊý¾ÝÁ÷£¬´Ó¶ø±¬·¢ÁËÒ»¸ö“΢ͻ·¢Á÷”£¬Ê¹µÃ½»Á÷»úÉÏÅþÁ¬Parent ServerµÄ³ö¶Ë¿Ú»º´æÈ±·¦£¬Ôì³ÉÓµÈû¡£
¡øTCP IncastÁ÷Á¿Ä£×Ó
ÕýÈçÇ°ÃæËù˵£¬RDMAºÍTCP²î±ð£¬ËüÐèÒªÒ»¸öÎÞËðÍøÂç¡£¹ØÓÚͨË×µÄ΢ͻ·¢Á÷Á¿£¬½»Á÷»úµÄBuffer»º³åÇø¿ÉÒÔÆðµ½Ò»¶¨×÷Óã¬ÔÚ»º³åÇø½«Í»·¢µÄ±¨ÎľÙÐÐÅÅ¶ÓÆÚ´ý£¬µ«ÓÉÓÚÔöÌí½»Á÷»úBufferÈÝÁ¿µÄ±¾Ç®ºÜÊǸߣ¬ÒÔÊÇËüËùÄÜÆðµ½µÄ×÷ÓÃÊÇÓÐÏ޵ģ¬Ò»µ©»º³åÇøÅŶӵı¨ÎĹý¶à£¬ÈÔÈ»»á±¬·¢¶ª°ü¡£
ΪÁËʵÏֶ˵½¶ËµÄÎÞËðת·¢£¬×èÖ¹ÓÉÓÚ½»Á÷»úÖеÄBuffer»º³åÇøÒç³ö¶øÒý·¢µÄÊý¾Ý°üɥʧ£¬½»Á÷»ú±ØÐèÒýÈëÆäËû»úÖÆ£¬ÈçÁ÷Á¿¿ØÖÆ£¬Í¨¹ý¶ÔÁ´Â·ÉÏÁ÷Á¿µÄ¿ØÖÆ£¬ïÔ̶Խ»Á÷»úBufferµÄѹÁ¦£¬À´¹æ±Ü¶ª°üµÄ±¬·¢¡£
PFCÔõÑùʵÏÖÁ÷¿Ø
IEEE 802.1Qbb£¨Priority-based Flow Control£¬»ùÓÚÓÅÏȼ¶µÄÁ÷Á¿¿ØÖÆ£©¼ò³ÆPFC£¬ÊÇIEEEÊý¾ÝÖÐÐÄÇŽӣ¨Data Center Bridge£©ÐÒé×åÖеÄÒ»¸öÊÖÒÕ£¬ÊÇÁ÷Á¿¿ØÖƵÄÔöÇ¿°æ¡£
˵PFC֮ǰ£¬ÎÒÃÇ¿ÉÒÔÏÈ¿´Ò»ÏÂIEEE 802.3X£¨Flow Control£©Á÷¿ØµÄ»úÖÆ£ºµ±ÎüÊÕÕßûÓÐÄÜÁ¦´¦Öóͷ£ÎüÊÕµ½µÄ±¨ÎÄʱ£¬ÎªÁ˱ÜÃⱨÎı»ÑïÆú£¬ÎüÊÕÕßÐèҪ֪ͨ±¨Îĵķ¢ËÍÕßÔÝʱ×èÖ¹·¢Ëͱ¨ÎÄ¡£
ÈçÏÂͼËùʾ£¬¶Ë¿ÚG0/1ºÍG0/2ÒÔ1GbpsËÙÂÊת·¢±¨ÎÄʱ£¬¶Ë¿ÚF0/1½«±¬·¢ÓµÈû¡£Îª×èÖ¹±¨ÎÄɥʧ£¬¿ªÆô¶Ë¿ÚG0/1ºÍG0/2µÄFlow Control¹¦Ð§¡£
¡ø¶Ë¿Ú±¬·¢ÓµÈûµÄ´òÁ÷Ä£×Ó
µ±F0/1ÔÚת·¢±¨ÎÄ·ºÆðÓµÈûʱ£¬½»Á÷»úB»áÔڶ˿ڻº³åÇøÖÐÅŶӱ¨ÎÄ£¬µ±ÓµÈûÁè¼ÝÒ»¶¨ãÐֵʱ£¬¶Ë¿ÚG0/2ÏòG0/1·¢PAUSEÖ¡£¬Í¨ÖªG0/1ÔÝʱ×èÖ¹·¢Ëͱ¨ÎÄ¡£
G0/1ÎüÊÕµ½PAUSEÖ¡ºóÔÝʱ×èÖ¹ÏòG0/2·¢Ëͱ¨ÎÄ¡£ÔÝͣʱ¼äÊÇ·ÇÐÅÏ¢ÓÉPAUSEÖ¡ËùЯ´ø¡£½»Á÷»úA»áÔÚÕâ¸ö³¬Ê±¹æÄ£ÄÚÆÚ´ý£¬»òÕßÖ±µ½ÊÕµ½Ò»¸öTimeoutֵΪ0µÄ¿ØÖÆÖ¡ºóÔÙ¼ÌÐø·¢ËÍ¡£
IEEE 802.3XÐÒé±£´æÒ»¸öÈõµã£ºÒ»µ©Á´Â·±»ÔÝÍ££¬·¢ËÍ·½¾Í²»¿ÉÔÙ·¢ËÍÈκÎÊý¾Ý°ü£¬ÈôÊÇÊÇÓÉÓÚijЩÓÅÏȼ¶½ÏµÍµÄÊý¾ÝÁ÷Òý·¢µÄÔÝÍ££¬Ð§¹ûÈ´ÈøÃÁ´Â·ÉÏÆäËû¸ü¸ßÓÅÏȼ¶µÄÊý¾ÝÁ÷Ò²Ò»Æð±»ÔÝÍ£ÁË£¬×ÅʵÊǵò»³¥Ê§µÄ¡£
ÈçÏÂͼÖб¨ÎÄÆÊÎöËùʾ£¬PFCÔÚ»ù´¡Á÷¿ØIEEE 802.3X»ù´¡ÉϾÙÐÐÀ©Õ¹£¬ÔÊÐíÔÚÒ»ÌõÒÔÌ«ÍøÁ´Â·ÉϽ¨Éè8¸öÐéÄâͨµÀ£¬²¢ÎªÃ¿ÌõÐéÄâͨµÀÖ¸¶¨ÏìÓ¦ÓÅÏȼ¶£¬ÔÊÐíµ¥¶ÀÔÝÍ£ºÍÖØÆôÆäÖÐí§ÒâÒ»ÌõÐéÄâͨµÀ£¬Í¬Ê±ÔÊÐíÆäËüÐéÄâͨµÀµÄÁ÷Á¿ÎÞÖÐֹͨ¹ý¡£
¡øPFCÐÒ鱨ÎĽṹÆÊÎö
PFC½«Á÷¿ØµÄÁ£¶È´ÓÎïÀí¶Ë¿Úϸ»¯µ½8¸öÐéÄâͨµÀ£¬»®·Ö¶ÔÓ¦Smart NICÓ²¼þÉϵÄ8¸öÓ²¼þ·¢ËÍÐÐÁУ¨ÕâЩÐÐÁÐÃüÃûΪTraffic Class£¬»®·ÖΪTC0,TC1,...,TC7£©£¬ÔÚRDMA²î±ðµÄ·â×°ÐÒéÏ£¬Ò²Óвî±ðµÄÓ³Éä·½·¨¡£
RoCEv1
Õâ¸öÐÒéÊǽ«RDMAÊý¾Ý¶Î·â×°µ½ÒÔÌ«ÍøÊý¾Ý¶ÎÄÚ£¬ÔÙ¼ÓÉÏÒÔÌ«ÍøµÄÍ·²¿£¬Òò´ËÊôÓÚ¶þ²ãÊý¾Ý°ü¡£ÎªÁ˶ÔËü¾ÙÐзÖÀֻ࣬ÄÜʹÓÃVLAN£¨IEEE 802.1q£©Í·²¿ÖеÄPCP(Priority Code Point)Óò3 BitsÀ´ÉèÖÃÓÅÏȼ¶Öµ¡£
¡ø¶þ²ãÒÔÌ«ÍøÖ¡VLANÍ·²¿½á¹¹
RoCEv2
Õâ¸öÐÒéÊǽ«RDMAÊý¾Ý¶ÎÏÈ·â×°µ½UDPÊý¾Ý¶ÎÄÚ£¬¼ÓÉÏUDPÍ·²¿£¬ÔÙ¼ÓÉÏIPÍ·²¿£¬×îºóÔÙ¼ÓÉÏÒÔÌ«ÍøÍ·²¿£¬ÊôÓÚÈý²ãÊý¾Ý°ü¡£¶ÔËü¾ÙÐзÖÀ࣬¼È¿ÉÒÔʹÓÃÒÔÌ«ÍøVLANÖеÄPCPÓò£¬Ò²¿ÉÒÔʹÓÃIPÍ·²¿µÄDSCPÓò¡£
¡øÈý²ãIP±¨ÎÄÍ·²¿½á¹¹
¼òÆÓÀ´Ëµ£¬ÔÚ¶þ²ãÍøÂçµÄÇéÐÎÏ£¬PFCʹÓÃVLANÖеÄPCPλÀ´¶ÔÊý¾ÝÁ÷¾ÙÐÐÇø·Ö£¬ÔÚÈý²ãÍøÂçµÄÇéÐÎÏ£¬PFC¼È¿ÉÒÔʹÓÃPCP¡¢Ò²¿ÉÒÔʹÓÃDSCP£¬Ê¹µÃ²î±ðÊý¾ÝÁ÷¿ÉÒÔÏíÊܵ½×ÔÁ¦µÄÁ÷¿ØÖÆ¡£µ±ÏÂÊý¾ÝÖÐÐÄÒò¶à½ÓÄÉÈý²ãÍøÂ磬Òò´ËʹÓÃDSCP±ÈPCP¸ü¾ßÓÐÓÅÊÆ¡£
PFCËÀËø
ËäÈ»PFCÄܹ»Í¨¹ý¸ø²î±ðÐÐÁÐÓ³Éä²î±ðÓÅÏȼ¶À´ÊµÏÖ»ùÓÚÐÐÁеÄÁ÷¿Ø£¬µ«Í¬Ê±Ò²ÒýÈëÁËеÄÎÊÌ⣬ÀýÈçPFCËÀËøµÄÎÊÌâ¡£
PFCËÀËø£¬ÊÇÖ¸µ±¶à¸ö½»Á÷»úÖ®¼äÒò΢»·Â·µÈÔµ¹ÊÔÓÉͬʱ·ºÆðÓµÈû,¸÷×Զ˿ڻº´æÏûºÄÁè¼ÝãÐÖµ£¬¶øÓÖÏ໥ÆÚ´ý¶Ô·½ÊÍ·Å×ÊÔ´£¬´Ó¶øµ¼ÖÂËùÓн»Á÷»úÉϵÄÊý¾ÝÁ÷¶¼ÓÀÊÀÛÕ±ÕµÄÒ»ÖÖÍøÂç״̬¡£
Õý³£ÇéÐÎÏ£¬µ±Ò»Ì¨½»Á÷»úµÄ¶Ë¿Ú·ºÆðÓµÈû²¢´¥·¢XOFFË®Ïßʱ£¬Êý¾Ý½øÈëµÄÆ«Ïò£¨¼´ÏÂÓÎ×°±¸£©½«·¢ËÍPAUSEÖ¡·´Ñ¹£¬ÉÏÓÎ×°±¸ÎüÊÕµ½PAUSEÖ¡ºó×èÖ¹·¢ËÍÊý¾Ý£¬ÈôÊÇÆäÍâµØ¶Ë¿Ú»º´æÏûºÄÁè¼ÝãÐÖµ£¬Ôò¼ÌÐøÏòÉÏÓη´Ñ¹¡£ÔÆÔÆÒ»¼¶¼¶·´Ñ¹£¬Ö±µ½ÍøÂçÖÕ¶Ë·þÎñÆ÷ÔÚPAUSEÖ¡ÖÐÖ¸¶¨Pause TimeÄÚÔÝÍ£·¢ËÍÊý¾Ý£¬´Ó¶øÏû³ýÍøÂç½ÚµãÒòÓµÈûÔì³ÉµÄ¶ª°ü¡£
µ«ÔÚÌØÊâÇéÐÎÏ£¬ÀýÈ籬·¢Á´Â·¹ÊÕÏ»ò×°±¸¹ÊÕÏʱ£¬BGP·ÓÉÖØÐÂÊÕÁ²Ê±´ú¿ÉÄ᷺ܻÆð¶ÌÔÝ»·Â·£¬»áµ¼Ö·ºÆðÒ»¸öÑ»·µÄ»º³åÇøÒÀÀµ¡£ÈçÏÂͼËùʾ£¬µ±4̨½»Á÷»ú¶¼µÖ´ïXOFFË®Ïߣ¬¶¼Í¬Ê±Ïò¶Ô¶Ë·¢ËÍPAUSEÖ¡£¬Õâ¸öʱ¼ä¸ÃÍØÆËÖÐËùÓн»Á÷»ú¶¼´¦ÓÚÍ£Á÷״̬£¬ÓÉÓÚPFCµÄ·´Ñ¹Ð§Ó¦£¬Õû¸öÍøÂç»ò²¿·ÖÍøÂçµÄÍÌÍÂÁ¿½«±äΪÁã¡£
¡øPFCËÀËøÊ¾Òâͼ
×ÝÈ»ÔÚÎÞ»·ÍøÂçÖÐÐγɶÌÔÝ»·Â·Ê±£¬Ò²¿ÉÄܱ¬·¢ËÀËø¡£ËäÈ»¾ÓÉÐÞ¸´¶ÌÔÝ»·Â·»áºÜ¿ìÏûÊÅ£¬µ«ËüÃÇÔì³ÉµÄËÀËø²»ÊÇÔÝʱµÄ£¬¼´±ãÖØÆô·þÎñÆ÷ÖÐÖ¹Á÷Á¿£¬ËÀËøÒ²²»¿É×Ô¶¯»Ö¸´¡£
ΪÁËɨ³ýËÀËø×´Ì¬£¬Ò»·½ÃæÊÇÒª¶Å¾øÊý¾ÝÖÐÐÄÀïµÄ»·Â·±¬·¢£¬ÁíÒ»·½ÃæÔò¿ÉÒÔͨ¹ýÍøÂç×°±¸µÄËÀËø¼ì²â¹¦Ð§À´ÊµÏÖ¡£97¹ú¼ÊRG-S6510-48VS8CQÉϵÄDeadlock¼ì²â¹¦Ð§£¬¿ÉÒÔ¼ì²âµ½·ºÆðDeadlock״̬ºóµÄÒ»¶Îʱ¼äÄÚ£¬ºöÂÔÊÕµ½µÄPFCÖ¡£¬Í¬Ê±¶ÔbufferÖеı¨ÎÄÖ´ÐÐת·¢»òÑïÆúµÄ²Ù×÷£¨Ä¬ÈÏÊÇת·¢£©¡£
ÀýÈ磬׼ʱÆ÷µÄ¼à¿Ø´ÎÊý¿ÉÉèÖÃÉèÖüì²â10´Î£¬Ã¿´Î10msÄÚ¼ì²âÊÇ·ñÊÕµ½PFC PauseÖ¡¡£Èô10´Î¾ùÊÕµ½Ôò˵Ã÷±¬·¢Deadlock£¬¶ÔbufferÖеı¨ÎÄÖ´ÐÐĬÈϲÙ×÷£¬Ö®ºó½«ÉèÖÃ100ms×÷ΪRecoverʱ¼äºó»Ö¸´ÔÙ¼ì²â¡£ÏÂÁîÈçÏ£º
priority-flow-control deadlock cos-value 5 detect 10 recover 100 //10´Î¼ì²â£¬100ms recover¡£
RDMAÎÞËðÍøÂçÖÐʹÓÃPFCÁ÷¿Ø»úÖÆ£¬ÊµÏÖÁ˽»Á÷»ú¶Ë¿Ú»º´æÒç³öǰÔÝÍ£¶Ô¶ËÁ÷Á¿£¬×èÖ¹Á˶ª°üÕ÷Ï󱬷¢£¬µ«ÓÉÓÚÐèÒªÒ»¼¶Ò»¼¶·´Ñ¹£¬Ð§Âʽϵͣ¬ÒÔÊÇÐèÒª¸ü¸ßЧµÄ¡¢¶Ëµ½¶ËµÄÁ÷¿ØÄÜÁ¦¡£
ʹÓÃECNʵÏֶ˵½¶ËµÄÓµÈû¿ØÖÆ
Ä¿½ñµÄRoCEÓµÈû¿ØÖÆÒÀÀµECN(Explicit Congestion Notification£¬ÏÔʽӵÈû֪ͨ)À´ÔËÐС£ECN×î³õÔÚRFC 3168Öнç˵£¬ÍøÂç×°±¸»áÔÚ¼ì²âµ½ÓµÈûʱ£¬Í¨¹ýÔÚIPÍ·²¿Ç¶ÈëÒ»¸öÓµÈûָʾÆ÷ºÍÔÚTCPÍ·²¿Ç¶ÈëÒ»¸öÓµÈûÈ·ÈÏʵÏÖ¡£
RoCEv2±ê×¼½ç˵ÁËRoCEv2ÓµÈû¹ÜÀí(RCM)¡£ÆôÓÃÁËECNÖ®ºó£¬ÍøÂç×°±¸Ò»µ©¼ì²âµ½RoCEv2Á÷Á¿·ºÆðÁËÓµÈû£¬»áÔÚÊý¾Ý°üµÄIPÍ·²¿ECNÓò¾ÙÐбê¼Ç¡£
¡øIP±¨ÎÄÍ·ECN×ֶνṹ
Õâ¸öÓµÈûָʾÆ÷±»Ä¿µÄÖÕ¶Ë½ÚµãÆ¾Ö¤BTH(Base Transport Header£¬±£´æÓÚIBÊý¾Ý¶ÎÖÐ)ÖеÄFECNÓµÈûָʾ±êʶÀ´Ú¹ÊÍÒâÒå¡£»»¾ä»°Ëµ£¬µ±±»ECN±ê¼Ç¹ýµÄÊý¾Ý°üµÖ´ïËüÃÇÔ±¾ÒªµÖ´ïµÄÄ¿µÄµØÊ±£¬ÓµÈû֪ͨ¾Í»á±»·´Ïì¸øÔ´½Úµã£¬Ô´½ÚµãÔÙͨ¹ý¶ÔÓÐÎÊÌâµÄQueue Pairs£¨QP£©¾ÙÐÐÍøÂçÊý¾Ý°üµÄËÙÂÊÏÞÖÆÍù·µÓ¦ÓµÈû֪ͨ¡£
ECN½»»¥Àú³Ì
¡øECN½»»¥Àú³ÌʾÒâͼ
• ·¢ËͶ˷¢Ë͵ÄIP±¨Îıê¼ÇÖ§³ÖECN£¨10£©£»
• ½»Á÷»úÔÚÐÐÁÐÓµÈûÇéÐÎÏÂÊÕµ½¸Ã±¨ÎÄ£¬½«ECN×Ö¶ÎÐÞ¸ÄΪ11²¢·¢³ö£¬ÍøÂçÖÐÆäËû½»Á÷»ú½«Í¸´«£»
• ÎüÊÕ¶ËÊÕµ½ECNΪ11µÄ±¨ÎÄ·¢Ã÷ÓµÈû£¬Õý³£´¦Öóͷ£¸Ã±¨ÎÄ£»
• ÎüÊն˱¬·¢ÓµÈûͨ¸æ£¬Ã¿ms¼¶·¢ËÍÒ»¸öCNP£¨Congestion Notification Packets£©±¨ÎÄ£¬ECN×Ö¶ÎΪ01£¬ÒªÇó±¨ÎIJ»¿É±»ÍøÂçÑïÆú¡£ÎüÊն˶Զà¸ö±»ECN±ê¼ÇΪͳһ¸öQPµÄÊý¾Ý°ü·¢ËÍÒ»¸öµ¥¸öCNP¼´¿É£¨ÃûÌû®Òâ¼ûÏÂͼ£©£»
• ½»Á÷»úÊÕµ½CNP±¨ÎĺóÕý³£×ª·¢¸Ã±¨ÎÄ£»
• ·¢ËͶËÊÕµ½ECN±ê¼ÇΪ01µÄCNP±¨ÎÄÆÊÎöºó¶ÔÏìÓ¦µÄÁ÷£¨¶ÔÓ¦ÆôÓÃECNµÄQP£©Ó¦ÓÃËÙÂÊÏÞÖÆËã·¨¡£
RoCEv2µÄCNP°üÃûÌÃÈçÏ£º
¡øCNP±¨ÎĽṹ
ÖµµÃ×¢ÖØµÄÊÇ£¬CNP×÷ΪӵÈû¿ØÖƱ¨ÎÄ£¬Ò²»á±£´æÑӳٺͶª°ü£¬´Ó·¢ËͶ˵½ÎüÊն˾ÓɵÄÃ¿Ò»Ìø×°±¸¡¢Ã¿Ò»ÌõÁ´Â·¶¼»áÓÐÒ»¶¨µÄÑÓ³Ù£¬»á×îÖÕ¼Ó´ó·¢ËͶËÎüÊÕµ½CNPµÄʱ¼ä£¬¶øÓë´Ëͬʱ½»Á÷»ú¶Ë¿ÚϵÄÓµÈûÒ²»áÖð²½Ôö¶à£¬Èô·¢ËͶ˲»¿Éʵʱ½µËÙ£¬ÈÔÈ»¿ÉÄÜÔì³É¶ª°ü¡£½¨ÒéÓµÈûͨ¸æÓòµÄ¹æÄ£²»Òª¹ý´ó£¬´Ó¶ø×èÖ¹ÓÉÓÚECN¿ØÖƱ¨ÎĽ»»¥»ØÂ·µÄÌøÊý¹ý¶à£¬¶øÓ°Ïì·¢ËͶËÎÞ·¨ÊµÊ±½µËÙ£¬Ôì³ÉÓµÈû¡£
×ܽá
RDMAÍøÂçÕýÊÇͨ¹ýÔÚÍøÂçÖа²ÅÅPFCºÍECN¹¦Ð§À´ÊµÏÖÎÞËð°ü¹Ü¡£PFCÊÖÒÕÈÃÎÒÃÇ¿ÉÒÔ¶ÔÁ´Â·ÉÏRDMAרÊôÐÐÁеÄÁ÷Á¿¾ÙÐпØÖÆ£¬²¢ÔÚ½»Á÷»úÈë¿Ú£¨Ingress port£©·ºÆðÓµÈûʱ¶ÔÉÏÓÎ×°±¸Á÷Á¿¾ÙÐз´Ñ¹¡£Ê¹ÓÃECNÊÖÒÕÎÒÃÇ¿ÉÒÔʵÏֶ˵½¶ËµÄÓµÈû¿ØÖÆ£¬ÔÚ½»Á÷»ú³ö¿Ú£¨Egress port£©ÓµÈûʱ£¬¶ÔÊý¾Ý°ü×öECN±ê¼Ç£¬²¢ÈÃÁ÷Á¿·¢ËͶ˽µµÍ·¢ËÍËÙÂÊ¡£
´Ó³ä·ÖÑéÕ¹ÍøÂç¸ßÐÔÄÜת·¢µÄ½Ç¶È£¬ÎÒÃÇÒ»Ñùƽ³£½¨Òéͨ¹ýµ÷½âECNºÍPFCµÄbufferË®Ïߣ¬ÈÃECN¿ìÓÚPFC´¥·¢£¬¼´ÍøÂçÕÕ¾ÉÒ»Á¬È«ËÙ¾ÙÐÐÊý¾Ýת·¢£¬È÷þÎñÆ÷×Ô¶¯½µµÍ·¢°üËÙÂÊ¡£ÈôÊÇ»¹²»¿É½â¾öÎÊÌ⣬ÔÙͨ¹ýPFCÈÃÉÏÓν»Á÷»úÔÝÍ£±¨ÎÄ·¢ËÍ£¬ËäÈ»ÕûÍøÍÌÍÂÐÔÄܽµµÍ£¬¿ÉÊDz»»á±¬·¢¶ª°ü¡£
ÔÚÊý¾ÝÖÐÐÄÍøÂçÖÐÓ¦ÓÃRDMA£¬²»µ«Òª½â¾öת·¢ÃæµÄÎÞËðÍøÂçÐèÇ󣬻¹Òª¹Ø×¢Ï¸Ä廯ÔËά£¬²Å»ªÓ¦¶ÔÑӳٺͶª°üÃô¸ÐµÄÍøÂçÇéÐΡ£ÓйØMMUµÄϸÄ廯¹ÜÀíÊÖÒÕÒÔ¼°»ùÓÚINTµÄÍøÂç¿ÉÊÓ»¯ÊÖÒտɲο¼ÍùÆÚÎÄÕ¡£
97¹ú¼Ê25G/100GÊý¾ÝÖÐÐĽâ¾ö¼Æ»®
¼´½«ÁÁÏà2018º¼ÖÝ · ÔÆÆÜ´ó»á£¬µÈÄãÀ´Áã¡
±¾ÆÚ×÷ÕߣºÕÔˬ
97¹ú¼ÊÍøÂ绥ÁªÍøÏµÍ³²¿ÐÐÒµ×Éѯ
ÍùÆÚ¾«²Ê»ØÊ×
Ïà¹ØÍÆ¼ö£º
ÄúµÄÐÕÃû
ÄúµÄÊÖ»úºÅ*
ÄúµÄÓÊÏä
¹«Ë¾Ãû³Æ
97¹ú¼ÊÍøÂçÒÔÌ«²Ê¹â½â¾ö¼Æ»®ÔÚÖйúÒÔ̫ȫ¹âÍøÂçÊг¡ÅÅÃûµÚÒ»£¬·þÎñÖÆÔìÒµ¡¢½ÌÓý¡¢Ò½ÁƵÈ30Íò¼äÈëÊÒ³¡¾°¡£¼Æ»®Í¨¹ý²Ê¹âÊÖÒÕ¡¢ÎÞÔ´»ã¾ÛºÍÖÇÄÜÔËά£¬ÎªÆóÒµÌṩÎȹ̿ɿ¿¡¢ÎÞаÀ©Õ¹µÄÍøÂç»ù´¡ÉèÊ©£¬Ö§³Ö°ì¹«¡¢Éú²ú¡¢Wi-Fi 7µÈ¶à³¡¾°ÐèÇó£¬ÖúÁ¦ÆóÒµÖÇÄÜÖÆÔìÓëÊý×Ö»¯×ªÐÍ¡£
#ÖÆÔìÒµ
#È«³¡¾°
#½»Á÷»ú
#Ô°ÇøÍø
97¹ú¼ÊÍøÂçÍÆ³öRG-CMG6000¡°Öǻ۸硱ϵÁÐÖÇÄÜÇå¾²Íø¹Ø£¬½ÓÄÉ7ºÏ1¸ß¶È¼¯³ÉÉè¼Æ£¬ÕûºÏ·ÓÉ¡¢·À»ðǽ¡¢VPN¡¢ÐÐΪ¹ÜÀíµÈ½¹µã¹¦Ð§¡£¼Æ»®Ö§³Ö»ùÓÚ7000+Ó¦ÓÃÌØÕ÷µÄ¾«×¼ÐÐΪ¹Ü¿Ø¡¢»á»°ÓëÁ÷Á¿Ë«ÖظºÔØÆ½ºâÊÖÒÕ£¬²¢Í¨¹ýINC-EMBƽ̨ʵÏÖͳһÄɹܣ¬Îª½ÌÓý¡¢Ò½ÁƼ°ÖÐСÆóÒµÌṩ¸ü¸ßЧ¡¢¸ü¿É¿¿µÄÒ»Õ¾Ê½ÍøÂç³ö¿Ú½â¾ö¼Æ»®¡£
#Çå¾²
97¹ú¼ÊÍøÂ缫¼òÒÔÌ«²Ê¹â4.0½â¾ö¼Æ»®Õë¶ÔУ԰¹âÍøÂçÔËÎ¬ÍÆ³öÁ¢Òì¹ÜÀíģʽ£¬Í¨¹ýUNCÍ³Ò»ÍøÂçÖÐÐÄʵÏÖ×°±¸¼´²å¼´ÓÃÉÏÏß¡¢¹âÁ´Â·Ãë¼¶¹ÊÕÏÕï¶Ï¡¢¾«×¼¸æ¾¯Ñ¹ËõºÍÖÇÄܾöÒéÖ§³Ö£¬ÓÐÓýâ¾ö¸ßÐ£ÍøÂçÔËάÖÐ×°±¸ÉÏÏßЧÂʵ͡¢¹ÊÕ϶¨Î»ÄÑ¡¢¸æ¾¯ÈßÓ༰Êý¾ÝÖ§³Öȱ·¦µÈ½¹µãÎÊÌ⣬ÖúÁ¦½ÌÓýÐÐÒµÊý×Ö»¯×ªÐÍ£¬ÌáÉýÔËάЧÂÊ90%ÒÔÉÏ¡£
#½»Á÷»ú
#ÆÕ½Ì
#¸ßÖ°½Ì
#½ÌÑ§Íø
97¹ú¼ÊÍøÂçÍÆ³ö¼«¼òÒÔÌ«²Ê¹â¼Æ»®£¬½ÓÄÉ160G¸ßÃܲʹâÊÖÒÕ£¬ÊµÏÖÈ«Á´Â·µ¥Ð¾´«ÊäÓë¹âÁ´Â·¿ÉÊÓ»¯¹ÜÀí¡£¼Æ»®º¸Ç¿òʽ½¹µã½»Á÷»ú¡¢³¬¾ÛºÏ²Ê¹â½»Á÷»ú¼°ÎÞԴ͸Ã÷»ã¾Û×°±¸£¬Ö§³ÖÍòÕ×ÈëÊÒ£¬¼ò»¯²¼Ï߼ܹ¹£¬ÌáÉý°²ÅÅЧÂÊÓëÍøÂç¿É¿¿ÐÔ£¬ÊÊÓÃÓڸߴø¿í¡¢¸ßÃܶÈÔ°ÇøÍøÂ糡¾°£¬ÖúÁ¦ÆóÒµ¹âÍøÂ罨Éè¸ü¼òÆÓ¸ßЧ¡£
#½»Á÷»ú