一般的视频会议系统包括MCU多点控制器(视频会议服务器)、视频会议终端(会议室型硬件终端、PC桌面型硬件终端、软件视频会议终端)、网关(Gateway)、Gatekeeper(网闸)等几个部分。各种不同的终端都连入MCU进行集中交换，组成一个视频会议网络。
(1)多点处理单元(MCU)
多点处理单元(MCU)由多点控制器(MC)和多点处理器(MP)组成。
MC能提供支持多点会议的控制功能。在多点会议中，MC与每一会议终端进行能力交换，最终确定会议中的公共能力。MC还为会议选定通信模式，使会议中各个终端工作在选定的通信模式上。
MP可以处理视频、音频和数据码流。MP对视频码流的处理有两种方式：视频切换和视频复合。MP对音频的处理主要是混合，它可以将M个通道的输入经过处理后得到N个通道的输出。在数据处理方面，MP主要处理的对象是T.120数据（目前只在软件中有使用，硬件视频会议主要采用双硫协议实现数据交互）。
    MCU是视频会议系统的核心部分，为用户提供群组会议、多组会议的连接服务。目前主流厂商的MCU一般可以提供单机多达100个用户以上的接入服务，并且可以进行级联，可以基本满足用户的使用要求。MCU的使用和管理不应该太复杂，要使客户方技术部甚至行政部的一般员工能够操作。目前主流的MCU（如POLYCOM DST MCS4200系列MCU）操作界面非常人性化，全中文，使用非常方便，并符合中国企业和政府会议的需要。
(2)大中小型会议室硬件视频会议终端产品
大中小型会议室硬件视频会议终端产品是提供给用户在会议室内使用的，视频会议终端有的设备自带摄像头和遥控器（如POLYCOM VSX系列视频会议终端），有的设备不带摄像头（如POLYCOM DST系列视频会议终端出厂时不带摄像头，但这样也增加了用户选择的余地，配置可以更加灵活），视频会议终端可以通过电视机或者投影仪进行视频显示，用户可以根据会场的大小选择不同的设备及数量。一般视频会议会议室设备带SONY EVI-D100P/EVI-D70P或CANON的专用摄像头，可以通过遥控方式前后左右转动从而覆盖参加会议的任何人和物。
(3)桌面型硬件视频会议终端产品
桌面型硬件视频会议终端一般集成显示器和摄像机，直接在该桌面型硬件视频会议终端上举行视频会议，常规情况下只能1-4人使用，以1人使用为好（主要是给企业领导在自己办公室使用或政府领导在自己办公室使用），该设备的典型是POLYCOM V500视频会议终端设备。
    (4)软件视频会议终端
    直接在电脑安装客户端软件就可以举行视频会议，一般配置费用比较低的PC摄像头（USB摄像头），和使用耳麦实现音频采集和输出，常规情况下只能一个人使用。
(5)网关(Gateway)
在基于IP网的视频会议系统中，网关是跨接在两个不同网络之间的设备，把位于两个不同网络上的会议终端连接起来组成一组会议。网关有三大主要功能：
    ①通信格式的转换，例如，IP网上的会议终端要和电路交换网上的会议终端实现互访，就需通过网关来完成H.225.0码流和H.221码流之间的互译；
    ②视频、音频和数据信息编码格式之间的互译，以完成表示层之间的相互通信；
    ③通信协议和通信规程的互译，以完成应用层的通信。
    目前，用户直接通过电话或手机在移动的情况下加入视频会议，这点对国内许多领导和出差多的人尤其重要。可以说电话接入网关(PSTN Gateway)今后将成为视频会议不可或缺的功能。
    (6)Gatekeeper(网闸)
    与电路交换网络上的会议系统不同，基于IP网的视频会议系统，面向的是分组交换的质量不能保证的IP网，从而导致了网闸这一特殊角色的出现。网闸是一个可选的角色，但基于IP网的实际视频会议系统，如果没有网闸，则难以很好地工作。
网闸有以下三个主要的功能：
①用户别名和运输层地址的翻译。在实际应用中，用户很难记住对方会议终端的网络地址(运输层地址)，而比较容易记住用户的别名。在此情况下，网闸的作用就十分明显了。
②用户进入会场许可的管理和控制。网闸对每一个要进入会场的用户进行检察和论证，以确定用户的合法性。
③网络带宽的管理和控制。通过对带宽的控制能根据网络实际情况来控制用户数或者用户的使用带宽，以此保证会议有一个基本的质量。
RAS信道，就是为了网闸工作而在H.323中专门设计的一个信道。