WebRTC一对一通话实战讲解

       WebRTC是一门实时通信技术,可以实现P2P或者中继模式进行建立连接,其中P2P的连接方式需要经过信令服务器交换SDP,在没有信令服务器的情况下P2P是建立不了连接的,而中继(relay)模式则是以TURN服务器进行中继转发音视频流数据。

        为什么要使用P2P呢?

        主要原因是因为P2P具有低延迟节省服务器带宽,但此时NAT以及防火墙问题却是P2P建立连接的主要障碍,此时Nginx服务器可以作为HTTP服务器进行反向代理颁发证书进行HTTP协议加密,来建立安全稳定的连接。

       到了这里还有个非常重要的概念需要理清楚就是websocket、HTTP、STUN、TURN、ICE、SDP(offer、answer)、candidate、ICE、P2P打洞连接、relay中继转发、信令服务器、http反向代理以及nginx这些名词在webrtc一对一通话中的实际作用与功能还有生命周期。其中最容易混淆的就是Nginx、HTTP与websocket的联系,Nginx做HTTP反向代理将信令转请求转给信令服务器,而信令服务器(Node)提供HTTP接口和websocket服务,在客户端场景中,利用HTTP协议进入房间和退出房间,而利用websocket进行发送接收SDP和candidate等实时信令。

       具体实现方式就是可以根据以下图片的中的步骤一一实现建立连接,当然要建立webrtc连接需要双方通过信令进行SDP协商(包括发送offer和answer),在webrtc进行一对一通话中SDP协商期间客户端通过发送信令,服务端进行客户端实时信令接收进行回调调用函数进行信令转发继续SDP协商,在SDP协商之后交换candidate进行打洞建立P2P连接,最重要的一点就是服务端还兼顾房间管理服务,使用RoomMap这个类进行房间管理。

 

 

        在WebRTC一对一通话中第一步就是要通过websocket进行建立连接,服务端采用npm中的Node进行搭建服务器,而客户端则需要通过服务器地址和端口进行与服务端建立连接。建立连接之后仅仅能够有一对一聊天的功能,如果想要传输音视频数据就得看第二步。

       第二步想要传输音视频数据流就得进行建立P2P连接或者通过TURN服务器进行中继转发,其中STUN的作用是为了P2P模式提供可用的公网地址,而TURN中继服务器不依赖STUN的公网地址在P2P连接中ICE打洞失败TURN中继服务器会为客户端分配一个中继地址,这个中继地址是公网可访问的,当然在建立P2P连接中要先进行peerconnection的创建,之后进行SDP协商,之后进行交换candidate进行ICE打洞连接,如果ICE打洞失败那么ICE将进行切换中继模式进行连接。

Read more

2026年,我整理了中国 200 多家机器人(具身智能)公司名单

2026年,我整理了中国 200 多家机器人(具身智能)公司名单

近几年,机器人行业突然变得异常热闹。尤其是2022年9月特斯拉首次亮相具身智能人形机器人 Optimus 之后,国内外都掀起了一波浪潮。2023年之后,国内出现了一批新的人形机器人公司,为了更好地理解这个行业,我整理了一份中国机器人企业名单,包含200 多家企业,涵盖人形机器人、工业机器人、移动机器人、服务机器人、特种机器人等领域。 注:名单中的企业排序没有特殊含义,仅表示本人收集信息的先后顺序。 序号企业简称总部成立时间主营产品网址企业全称1优必选深圳2012年人形机器人、轮式机器人https://ubtrobot.com深圳市优必选科技股份有限公司2宇树科技杭州2016年四足机器狗、人形机器人https://unitree.com宇树科技股份有限公司3智元上海2023年四足、轮式、双足人形机器人、具身模型https://zhiyuan-robot.com智元创新(上海)科技股份有限公司4海康机器人杭州2016年机器视觉、移动机器人https://hikrobotics.com杭州海康机器人股份有限公司5傅利叶上海2015年康复机器人、双足人形机器人、灵巧手https://f

ESP32-C6物联网开发实战:基于Wi-Fi 6与BLE 5.2的智能家居节点设计

ESP32-C6物联网开发实战:基于Wi-Fi 6与BLE 5.2的智能家居节点设计

文章目录 * 摘要 * 一、项目概述 * 1.1 智能家居节点需求分析 * 1.2 ESP32-C6核心优势 * 二、开发环境配置 * 2.1 硬件准备 * 2.2 软件环境配置 * 三、Wi-Fi 6通信实现 * 3.1 STA模式连接代码 * 3.2 TWT节能配置 * 四、BLE 5.2功能开发 * 4.1 BLE服务构建 * 4.2 2M PHY高速模式 * 五、系统集成 * 5.1 传感器数据采集 * 5.2 继电器控制代码 * 六、云端交互 * 6.1

从0到1打造RISC-V智能家居中控:硬件+固件+通信全链路实战

从0到1打造RISC-V智能家居中控:硬件+固件+通信全链路实战

👋 大家好,欢迎来到我的技术博客! 📚 在这里,我会分享学习笔记、实战经验与技术思考,力求用简单的方式讲清楚复杂的问题。 🌱 无论你是刚入门的新手,还是正在进阶的开发者,希望你都能有所收获! 文章目录 * 从0到1打造RISC-V智能家居中控:硬件+固件+通信全链路实战 🏠💡 * 为什么选择RISC-V?🤔 * 系统整体架构概览 🧩 * 第一步:硬件选型与电路搭建 🔌 * 主控芯片选择 * 外设连接 * 第二步:开发环境搭建 🛠️ * 安装步骤(以Ubuntu为例) * 第三步:裸机驱动开发(Bare Metal)⚡ * 示例1:DHT11温湿度读取(Bit-banging) * 示例2:BH1750光照传感器(I2C) * 第四步:引入FreeRTOS实现多任务调度 🔄 * 第五步:Wi-Fi连接与MQTT通信 ☁️📡 * 连接Wi-Fi * MQTT客户端(使用esp-mqtt库) * 第六步:BLE本地控制(无需Wi-Fi)📱