依國際電信聯盟的規定(ITU),視頻會議系統在設計過程當中涉及到了多種協議。H.323協議棧就是低三層為分組網協議，第四層傳輸層包括傳送和不可傳送兩類協議，之上的均為應用層，主要分為聲響應用、數據應用、終端控制和管理三類。

而作為成熟的協議棧來講，H.323協議棧主要由以下幾部分構成：

H.323協議棧

①：語音編碼采用相應的G系列建議，其中G711為必備的編碼方式，其余為任選方式，主要以G722、G729等為主;

②：視頻編碼采用H.260系列，主要是H.261、H.263、H.264等;

③：音頻和視頻編碼信號均封裝在RTP協議分組中，提供定時信息和數據，供接收端重組信號;

④：數據通信采用T.120系列建議，是一種用于多媒體會議的數據協議;

⑤：RAS信令協議是H.225.0協議的一種，是端點和網守之間使用的協議;

⑥：H.225.0呼叫信令協議是H.323的核心協議，主要用于呼叫控制;

⑦：H.245是一種通用的多媒體通信控制協議，主要針對會議通信而設計。

以上H.323協議棧的組成部分當中，最主要的就是RAS信令協議、H.225.0呼叫信令協議以及H.245控制協議，三種協議定義了H.323實體之間相互交換的消息類型和格式。是協議棧的主要組成部分。