基于netty框架开发的局域网IP电话,用户输入对方IP地址便能够进行语音通话。为了实现网络连接与Activity无关,使用service管理netty对象,现阶段可以在APP的任意界面监听到打电话请求,并跳转到响铃界面。另外,本项目将需要的操作封装到了ApiProvider类中。
ps:本项目是在VideoCalling上进行改进的,该项目是实现局域网的视频传输,我将其语音传输抽取出来进行更改实现语音通话,感谢作者的无私贡献。
Releases v3为最新版本,将两个手机连接到同一个局域网中,一方输入对方IP便可以进行语音通话。网络监听线程设置在Service中,当监听到打电话请求便会直接跳转到响铃界面。
首先使用AudioRecord进行音频录制,使用speex进行降噪并编码生成语音流,然后使用socket发送给出去, 接受方收到语音数据后将进行解码,然后使用AudioTrack播放。其中,电话交互逻辑使用文本信令控制。
对于群组通话,假设有ABC三人进行通话,首先A开启一个聊天室,然后BC加入聊天室,此时BC只需将自己的语音流发送给A,然后在A进行语音的合成操作,将合成的语音在本地播放和发送给BC即可。
打电话的逻辑是基于以下API实现,包括音频的录制与播放,语音流的发送与接收,连接的断开与关闭,以上包括了实现PhoneCall所需要的全部功能。
public class ApiProvider {
/**
* 注册回调,处理接收到的音频和文本。
* @param callback 回调变量。
*/
public void registerFrameResultedCallback(NettyReceiverHandler.FrameResultedCallback callback){}
/**
* 发送音频数据
* @param data 音频流
*/
public void sendAudioFrame(byte[] data) {}
/**
* 通过设置默认IP进行发送数据。
* @param msg 消息
*/
public void sentTextData(String msg) {}
/**
* 通过指定IP发送文本信息
* @param targetIp 目标IP
* @param msg 文本消息。
*/
public void UserIPSentTextData(String targetIp, String msg) {}
/**
* 通过指定IP发送音频信息
* @param targetIp 目标IP
* @param data 数据流
*/
public void UserIpSendAudioFrame(String targetIp ,byte[] data) {}
/**
* 关闭Netty客户端,
*/
public void shutDownSocket(){}
/**
* 关闭连接,打电话结束
* @return true or false
*/
public boolean disConnect(){}
/**
* 获取目标地址
* @return 此时目标地址。
*/
public String getTargetIP() {}
/**
* 设置目标地址
* @param targetIP 设置目标地址。
*/
public void setTargetIP(String targetIP) {}
/**
* 开始录音 在开始以下操作之前,必须先把目标IP设置对,否则会出现问题。
*/
public void startRecord(){}
/**
* 停止录音
*/
public void stopRecord(){}
/**
* 录音线程是否正在录音
* @return true 正在录音 or false 没有在录音
*/
public boolean isRecording(){}
/**
* 开始播放音频
*/
public void startPlay(){}
/**
* 停止播放音频
*/
public void stopPlay(){}
/**
* 是否正在播放
* @return true 正在播放; false 停止播放
*/
public boolean isPlaying(){}
/**
* 开启录音与播放
*/
public void startRecordAndPlay(){}
/**
* 关闭录音与播放
*/
public void stopRecordAndPlay(){}
}
每个客户端在启动时,都需要初始化一个Netty客户端进行监听请求,当收到请求以后,需要捕获发送方IP,然后进行主动的回复。
Bootstrap b = new Bootstrap();
group = new NioEventLoopGroup();
try {
//设置netty的连接属性。
b.group(group)
.channel(NioDatagramChannel.class) //异步的 UDP 连接
.option(ChannelOption.SO_BROADCAST, true)
.option(ChannelOption.SO_RCVBUF, 1024 * 1024)//接收区2m缓存
.option(ChannelOption.RCVBUF_ALLOCATOR, new FixedRecvByteBufAllocator(65535))//加上这个,里面是最大接收、发送的长度
.handler(handler); //设置数据的处理器
b.bind(localPort).sync().channel().closeFuture().await();
} catch (Exception e) {
e.printStackTrace();
} finally {
group.shutdownGracefully();
}
主要包括两种数据:
每次传输需要判断需要发送的是什么类型的数据,做相应的处理后装入运输载体Message对象中,最后用ChannelHandlerContext
对象将转换为Json格式的Message对象发送至目标IP地址相应的端口。
//发送数据。
public void sendData(String ip, int port, Object data, String type) {
Message message = null;
if (data instanceof byte[]) {
message = new Message();
message.setFrame((byte[]) data);
message.setMsgtype(type);
message.setTimestamp(System.currentTimeMillis());
}else if (data instanceof String){
message = new Message();
message.setMsgBody((String) data);
message.setMsgtype(type);
message.setTimestamp(System.currentTimeMillis());
message.setMsgIp(MLOC.localIpAddress);
}
if (channelHandlerContext != null) {
channelHandlerContext.writeAndFlush(new DatagramPacket(
Unpooled.copiedBuffer(JSON.toJSONString(message).getBytes()),
new InetSocketAddress(ip, port)));
}
}
在进行接收数据的时候也是需要进行相同判断操作,然后进行数据的获取。
//接收数据。
ByteBuf buf = (ByteBuf) packet.copy().content(); //字节缓冲区
byte[] req = new byte[buf.readableBytes()];
buf.readBytes(req);
String str = new String(req, "UTF-8");
Message message = JSON.parseObject(str,Message.class);
Netty框架中有一个类SimpleChannelInboundHandler,主要是对监听的端口传来的数据进行处理的。自定义一个继承自它的类,并重写处理收到数据的方法channelRead0(),将数据写入Message对象。
//发送文字类型信息回调
if (message.getMsgtype().equals(Message.MES_TYPE_NOMAL)){
if (frameCallback !=null){
frameCallback.onTextMessage(message.getMsgBody());
frameCallback.onGetRemoteIP(message.getMsgIp());
}
}else if (message.getMsgtype().equals(Message.MES_TYPE_AUDIO)){
//发送语音数据接口回调
if (frameCallback !=null){
frameCallback.onAudioData(message.getFrame());
}
}
总共的控制代码有三种:
// control text
public static final Integer PHONE_MAKE_CALL = 100; // make call
public static final Integer PHONE_ANSWER_CALL = 200; // answer call
public static final Integer PHONE_CALL_END = 300; // call end
假设A向B进行打电话:
// 状态切换逻辑
@SuppressLint("HandlerLeak")
private Handler mHandler = new Handler() {
public void handleMessage(Message msg) {
//根据标志记性自定义的操作,这个操作可以操作主线程。
if (msg.what == PHONE_MAKE_CALL) { //收到打电话的请求。
if (!isBusy){ //如果不忙 则跳转到通话界面。
showRingView(); //跳转到响铃界面。
isBusy = true;
}
}else if (msg.what == PHONE_ANSWER_CALL){ //接听电话
showTalkingView();
provider.startRecordAndPlay();
isAnswer = true; //接通电话为真
}else if (msg.what == PHONE_CALL_END){ //收到通话结束的信息
if (newEndIp.equals(provider.getTargetIP())){
showBeginView();
isAnswer = false;
isBusy = false;
provider.stopRecordAndPlay();
timer.stop();
}
}
}
};
混音采用的是平均混音算法,通过测试可以实现混音。主要涉及到安卓文件的创建和以字节流的方式进行文件的读取。
public static byte[] averageMix(String file1,String file2) throws IOException {
byte[][] bMulRoadAudioes = new byte[][]{
FileUtils.getContent(file1), //第一个文件
FileUtils.getContent(file2) //第二个文件
};
byte[] realMixAudio = bMulRoadAudioes[0]; //保存混音之后的数据。
Log.e("ccc", " bMulRoadAudioes length " + bMulRoadAudioes.length); //2
//判断两个文件的大小是否相同,如果不同进行补齐操作
for (int rw = 0; rw < bMulRoadAudioes.length; ++rw) { //length一直都是等于2.依次检测file长度和file2长度
if (bMulRoadAudioes[rw].length != realMixAudio.length) {
Log.e("ccc", "column of the road of audio + " + rw + " is diffrent.");
if (bMulRoadAudioes[rw].length<realMixAudio.length){
realMixAudio = subBytes(realMixAudio,0,bMulRoadAudioes[rw].length); //进行数组的扩展
}
else if (bMulRoadAudioes[rw].length>realMixAudio.length){
bMulRoadAudioes[rw] = subBytes(bMulRoadAudioes[rw],0,realMixAudio.length);
}
}
}
int row = bMulRoadAudioes.length; //行
int column = realMixAudio.length / 2; //列
short[][] sMulRoadAudioes = new short[row][column];
for (int r = 0; r < row; ++r) { //前半部分
for (int c = 0; c < column; ++c) {
sMulRoadAudioes[r][c] = (short) ((bMulRoadAudioes[r][c * 2] & 0xff) | (bMulRoadAudioes[r][c * 2 + 1] & 0xff) << 8);
}
}
short[] sMixAudio = new short[column];
int mixVal;
int sr = 0;
for (int sc = 0; sc < column; ++sc) {
mixVal = 0;
sr = 0;
for (; sr < row; ++sr) {
mixVal += sMulRoadAudioes[sr][sc];
}
sMixAudio[sc] = (short) (mixVal / row);
}
//合成混音保存在realMixAudio
for (sr = 0; sr < column; ++sr) { //后半部分
realMixAudio[sr * 2] = (byte) (sMixAudio[sr] & 0x00FF);
realMixAudio[sr * 2 + 1] = (byte) ((sMixAudio[sr] & 0xFF00) >> 8);
}
//保存混合之后的pcm
FileOutputStream fos = null;
//保存合成之后的文件。
File saveFile = new File(FileUtils.getFileBasePath()+ "averageMix.pcm" );
if (saveFile.exists()) {
saveFile.delete();
}
fos = new FileOutputStream(saveFile);// 建立一个可存取字节的文件
fos.write(realMixAudio);
fos.close();// 关闭写入流
return realMixAudio; //返回合成的混音。
}
//合并两个音轨。
private static byte[] subBytes(byte[] src, int begin, int count) {
byte[] bs = new byte[count];
System.arraycopy(src, begin, bs, 0, count);
return bs;
}
传入文件名称,返回文件内容的字节流
//将文件流读取到数组中,
public static byte[] getContent(String filePath) throws IOException {
File file = new File(filePath);
long fileSize = file.length();
if (fileSize > Integer.MAX_VALUE) {
Log.d("ccc","file too big...");
return null;
}
FileInputStream fi = new FileInputStream(file);
byte[] buffer = new byte[(int) fileSize];
int offset = 0;
int numRead = 0;
//while循环会使得read一直进行读取,fi.read()在读取完数据以后会返回-1
while (offset < buffer.length
&& (numRead = fi.read(buffer, offset, buffer.length - offset)) >= 0) {
offset += numRead;
}
//确保所有数据均被读取
if (offset != buffer.length) {
throw new IOException("Could not completely read file "
+ file.getName());
}
fi.close();
return buffer;
}
万水千山总是情,点个star行不行~
问题内容: 从Docker 1.10(和libnetwork更新)开始,我们可以手动为用户定义网络内的容器提供IP,这很酷! 我想在局域网中给容器一个IP地址(就像我们可以在“桥接”模式下使用虚拟机一样)。我的局域网是192.168.1.0/24,我的所有计算机内部都有IP地址。而且我希望我的容器的IP处于此范围内,以便可以从LAN中的任何位置(不使用NAT/ PAT / etc …)访问它们。
该部分 API 将帮助您使用光环上基于 Wi-Fi 的组建局域网,并在局域网内实现广播通信。 省略代码中的halocode 注意:该部分 API 省略了“halocode.”,本篇提及的所有 API 均省略了“halocode.” ,如 led_driver.off( )实际为halocode.led_driver.off()。mBuild 电子模块平台的所有功能均维护在halocode库中,因此
光环板之间可以组成局域网,组成局域网的设备之间可以相互通讯,使用一个光环板就可以控制其他光环板。 用光环板A控制光环板B 让我们新建一个项目,使用两块光环板,实现用光环板A控制光环板B。 启动光环板A的局域网 1. 选择“设备”,添加光环板。用USB数据线将光环板与电脑相连,点击“连接”,连接设备。 2. 启用上传模式 3. 添加事件类积木 当光环板启动时,和局域网类积木 建立名为(mesh1)的
问题内容: 在我的android设备中,我试图找到其IP地址(IPV4)。 如果我执行以下代码 该代码给了我127.0.0.1。 我想获得实际的IP198.168.xx.xx。 (在“我的电脑”中,相同的代码为我提供了实际的IP。) 问题答案: 授予权限 还添加mainfest。
本文向大家介绍基于NIO的Netty网络框架(详解),包括了基于NIO的Netty网络框架(详解)的使用技巧和注意事项,需要的朋友参考一下 Netty是一个高性能、异步事件驱动的NIO框架,它提供了对TCP、UDP和文件传输的支持,Netty的所有IO操作都是异步非阻塞的,通过Future-Listener机制,用户可以方便的主动获取或者通过通知机制获得IO操作结果。 Netty的优点有: a、功
无线局域网络省电模式 更换无线局域网络机能的电源模式。 关 以最大电力进行通讯 开 以省电模式进行通讯 重要 选择[开]时,部分网络环境可能无法正确通讯。遭遇此情形时请调整为[关]。
本文向大家介绍python实现扫描局域网指定网段ip的方法,包括了python实现扫描局域网指定网段ip的方法的使用技巧和注意事项,需要的朋友参考一下 一、问题由来 工作的局域网中,会接入很多设备,机器人上的网络设备就2个了,一个巨哥红外,一个海康可见光。机器人还有自身的ip。 有时候机器人挂的多了,设备维修更换中,搞来搞去就不记得ip是什么,用自带的软件的确能扫出来,但是这就要开两个window
1. 建立名为()的局域网 建立一个名为()的局域网。 示例: 光环板启动后,建立一个名为“mesh1”的局域网。 2. 加入名为()的局域网 加入名为()的局域网。 示例: 光环板启动后,建立并加入一个名为“mesh1”的局域网。 3. 面向局域网广播消息() 向局域网广播指定消息。 示例: 光环板启动后,建立并加入一个名为“mesh1”的局域网,并广播消息“message”。 4. 面向局域网