2. 程式人生 > >高負載高併發伺服器開發參考

高負載高併發伺服器開發參考

阿新 • • 發佈：2019-01-28
1、軟體框架
高效能的軟體框架，一般都基於event-driven、非同步模式，同時提供諸如執行緒池、epoll（*unx）IOCP（I/O Completion Port，windows）等技術來提高併發處理效能，python、C++、Java中有一個典型的框架性專案提供了對高效能網路通訊框架的支援，常用的一些高效能的軟體框架如下：
Python相關：
twisted:http://twistedmatrix.com
Twisted, an event-driven networking framework written in Python and licensed under the LGPL. Twisted supports TCP, UDP, SSL/TLS, multicast, Unix sockets, a large number of protocols (including HTTP, NNTP, SSH, IRC, FTP, and others), and much more.
Twisted是我學習和使用python的動力之一，用於高效能網路程式設計還是很方便。好好研究一番。
C++相關：
ACE：
http://www.cs.wustl.edu/~schmidt/ACE.html
ICE:http://www.zeroc.com/ice.html
ACE去年做p2p“邊下邊看”軟體時候用過一陣，框架是很優美，功能也比較全面，但是程式碼極其凌亂，用起來出問題後解決很麻煩。
Java相關：
MINA：http://mina.apache.org/
Grizzly：https://grizzly.dev.java.net/
QuickServer: http://www.quickserver.org/
2、相關站點
http://highscalability.com
http://www.royans.net
http://developer.yahoo.com/performance/rules.html
yahoo關於website效能的站點（Firebug 及yslow的相關資料）
http://www.productionscale.com/
http://www.performanceengineer.com
http://www.webperformancematters.com/
http://www.javaperformancetuning.com/
http://www.allthingsdistributed.com/ amazon CTO的blog
3、相關文章
http://www.kegel.com/c10k.html
http://pl.atyp.us/content/tech/servers.html
http://poorbuthappy.com/ease/archives/2007/04/29/3616/the-top-10-presentation-on-scaling-websites-twitter-flickr-bloglines-vox-and-more

http://www.royans.net/arch/library/
http://freescienceonline.blogspot.com/2007/08/scalability-and-scalable-architecture.html
http://www.webperformance.org/caching/caching_for_performance.html

相關推薦

高負載高併發伺服器開發參考

1、軟體框架 高效能的軟體框架，一般都基於event-driven、非同步模式，同時提供諸如執行緒池、epoll（*unx）IOCP（I/O Completion Port，windows）等技術來提高併發處理效能，python、C++、Java中有一個典型的框架性專案提供了對高效能網路通訊框架的支援，常用

epoll程式設計，如何實現高併發伺服器開發？

閒答。 按重要性和基礎程度，打亂下順序吧～～ 先回問題，然後說怎麼實現。 注：以下資料，均基於亞馬遜AWS c3.xlarge 機型。 虛擬CPU：4 記憶體：7.5 GB c3.xlarge 配置和價格: AWS | Amazon EC2 ～～～～～～～～～～ 分割線 ～～～～～～～～～～ 2、查了很多資料

高併發伺服器開發--網路模型

1 I/O型別 Read分為兩步： a.Waiting for thedata to be ready(等待資料準備)。 b.Copying thedata from the kernel to the process（將資料從核心拷貝到程序中） Blocking I/O

C++教程網 大併發高效能高可用可伸縮性伺服器開發無KEY

01大併發伺服器架構介紹 02大型網站架構演變過程 03poll（一） 04poll（二） 05epoll（一） 06epoll（二） 07muduo介紹 08面向物件程式設計風格 09基於物件程式設計風格 10執行緒封裝 11執行緒特定資料

Websocket全講解。跨平臺的通訊協議 ！！基於websocket的高併發即時通訊伺服器開發

本博文，保證不用裝B的話語和太多專業的語言，保證簡單易懂，只要懂JAVAEE開發的人都可以看懂。 本博文發表目的是，目前網上針對Websocket的資料太散亂，導致初學者的知識體系零零散散，學習困難加大。本博加以整理，並且實踐。 所用核心技術選型：

Netty 100萬級高併發伺服器配置

前言 每一種該語言在某些極限情況下的表現一般都不太一樣，那麼我常用的Java語言，在達到100萬個併發連線情況下，會怎麼樣呢，有些好奇，更有些期盼。 這次使用經常使用的順手的netty NIO框架（netty-3.6.5.Final），封裝的很好，介面很全面，就像它現在的域名 netty.io，專注於網路I

用程序池和執行緒池實現高併發伺服器

思想： 　　1.　　建立與伺服器相同cpu個數的程序個數來監聽(accept)客戶端響應，並在每個程序中先建立好一個執行緒池 　　2.　　有客戶端訪問時，解除其中一個程序的accpet阻塞，進入到執行緒中來執行接收資料工作( recv() )，用執行緒防止recv阻塞，執行緒呼叫recv方法 　　3.　

您的快遞（高併發伺服器之poll和epoll）請簽收

　　前言 　　之前已經介紹過select函式，請參考這篇部落格:https://www.cnblogs.com/liudw-0215/p/9661583.html,原理都是類似的，有時間先閱讀下那篇部落格，以便於理解這篇部落格。 　　一、poll函式 　　1、函式說明 　　原型：int poll(st

高併發伺服器---基礎----IO模式和IO多路複用

轉自：https://www.cnblogs.com/zingp/p/6863170.html   閱讀目錄 1 基礎知識回顧 2 I/O模式 3 事件驅動程式設計模型 4 select/poll/epoll的區別及其Python示例 　　網路程式設計裡常聽到阻塞IO、

轉 開發大型高負載類網站應用的幾個要點

也歡迎大家轉載本篇文章。分享知識，造福人民，實現我們中華民族偉大復興！                原貼：http://blog.csdn.net/heiyeshuwu/archive/2007/01/04/1473941.aspx[轉]開發大型高負載類網站應

lvs+keepalived+memcached+varnish+LNMP 實現高可用的負載均衡排程伺服器

實驗環境： web1 :eth0 192.168.4.11     web2 : eth0192.168.4.12    兩臺web伺服器需要配置VIP                    排程器Lvs1: eth0 192.168.4.5    排程器Lvs2: eth

golang-gin-mgo高併發伺服器搭建

gin-mgo伺服器搭建 該伺服器實現簡單接收請求並將請求引數封裝儲存在mongodb資料庫中,本文將講述gin－mgo的使用方法。 gin web框架使用介紹 首先獲取gin框架依賴 go get gopkg.in/gin-gonic/g

說說大型高併發高負載網站的系統架構

15套java架構師、叢集、高可用、高可擴充套件、高效能、高併發、效能優化、Spring boot、Redis、ActiveMQ、Nginx、Mycat、Netty、Jvm大型分散式專案實戰 視訊課程內容包含： 高階Java架構師包含：spring boot、S

java處理高併發高負載類網站的優化方法

java處理高併發高負載類網站中資料庫的設計方法（java教程,java處理大量資料，java高負載資料） 一：高併發高負載類網站關注點之資料庫 沒錯,首先是資料庫,這是大多數應用所面臨的首個SPOF。尤其是Web2.0的應用，資料庫的響應是首先要解決的。 一般來說

基於sysctl.conf優化高併發伺服器的TCP引數

sysctl.conf工作原理   sysctl命令被用於在核心執行時動態地修改核心的執行引數，可用的核心引數在目錄/proc/sys中。它包含一些TCP/IP堆疊和虛擬記憶體系統的高階選項， 這可以讓有經驗的管理員提高引人注目的系統性能。用sysctl可以讀取設定超過五百個系統變

從0開始，部署.NetCore並構建非阻塞高併發伺服器（2）

工具篇看我這篇部落格想搭建伺服器的朋友多半是想在Linux上使用，正所謂工欲善其事必先利其器，一個好用的SSH對我們的工作效率影響也很大，簡單的說下我在Win下常用的SSH軟體和使用教程，老手自動忽略即可推薦工具1--WinSCPWinSCP可以說是我最常用的遠端連線Linu

【Linux】高併發伺服器模型（多程序模型和多執行緒模型）

多程序併發伺服器 使用多程序併發伺服器時要考慮以下幾點：             1.      父程序最大檔案描述個數(父程序中需要close關閉accept返回的新檔案描述符)             2.      系統內建立程序個數(與記憶體大小相關)      

Linux高併發伺服器解決方案

Linux高併發伺服器案例演示 在網路通訊中，我們常常的伺服器經常會受到成千上萬的請求提示，而電腦會根據請求建立相對應的socket連結，但是接觸過Linux網路程式設計的人都知道，Linux連結和客戶端建立連線，會經過四步（這裡以TCP說明） 第一步，建立socket

分散式高併發高可用FastDFS檔案伺服器叢集部署----

在搭建fastDFS檔案系統時遇到一些問題，總結下來與大家一起分享。也可以給大家作為參考。FastDFS叢集規劃（一個IP對應一個伺服器）VIP為對外訪問入口Proxy-1/Proxy-2組成高可用的代理伺服器，分搶佔模式和非搶佔模式。搶佔模式下:MASTER故障中恢復後會繼

高併發伺服器

12.7 socket IPCsocket API原本是為網路通訊設計的，但後來在socket的框架上發展出一種IPC機 制，就是UNIX Domain Socket。雖然網路socket也可用於同一臺主機的程序間通訊(通過 loopback地址127.0.0.1)，但是UNIX Domain Socket用