许多浏览器现在都可以访问用户的视频和音频输入。不过,根据浏览器的不同,这可能是完全动态的内嵌体验,也可能是委托给用户设备上的其他应用。
从简单做起,循序渐进
最简单的方法是直接要求用户提供预先录制的文件。为此,请创建一个简单的文件输入元素,并添加 accept
过滤条件(指示我们只能接受视频文件)和 capture
属性(指示我们直接从相机获取视频文件)。
<input type="file" accept="video/*" capture />
此方法适用于所有平台。在桌面设备上,它会提示用户从文件系统上传文件(忽略 capture
属性)。在 iOS 版 Safari 中,它会打开相机应用,以便您录制视频,然后将其发送回网页;在 Android 上,它可以让用户选择使用哪个应用录制视频,然后再将其发送回网页。
许多移动设备都有多个摄像头。如果您有偏好设置,可将 capture
属性设置为 user
(如果您希望摄像头朝向用户)或 environment
(如果您希望摄像头朝外)。
<input type="file" accept="video/*" capture="user" />
<input type="file" accept="video/*" capture="environment" />
请注意,这只是一个提示 - 如果浏览器不支持该选项,或者您想询问的摄像头类型不可用,浏览器可能会选择其他摄像头。
用户完成录制并返回到网站后,您需要以某种方式获取文件数据。将 onchange
事件附加到输入元素,然后读取事件对象的 files
属性,即可快速访问。
<input type="file" accept="video/*" capture="camera" id="recorder" />
<video id="player" controls></video>
<script>
var recorder = document.getElementById('recorder');
var player = document.getElementById('player');
recorder.addEventListener('change', function (e) {
var file = e.target.files[0];
// Do something with the video file.
player.src = URL.createObjectURL(file);
});
</script>
获得该文件的访问权限后,您就可以对其执行任何所需的操作。例如,您可以:
- 将其直接附加到
<video>
元素,即可播放 - 将应用下载到用户的设备上
- 通过附加到
XMLHttpRequest
,将其上传到服务器 - 将相框绘制到画布中并对其应用滤镜
虽然使用输入元素方法访问视频数据普遍存在,但这是最没有吸引力的选项。我们非常希望能够使用相机,并直接在网页中提供良好的体验。
以交互方式使用相机
现代浏览器可以直接连接摄像头,这使我们能够打造与网页完全集成的体验,让用户永远不会离开浏览器。
获取相机使用权限
我们可以使用 WebRTC 规范中名为 getUserMedia()
的 API 直接访问相机。getUserMedia()
将提示用户授予对其连接的麦克风和摄像头的访问权限。
如果成功,该 API 将返回一个 Stream
,其中包含来自摄像头或麦克风的数据,然后我们可以将其附加到 <video>
元素、将其附加到 WebRTC 流或使用 MediaRecorder
API 保存。
如需从相机获取数据,我们只需在传递给 getUserMedia()
API 的约束对象中设置 video: true
<video id="player" controls></video>
<script>
var player = document.getElementById('player');
var handleSuccess = function (stream) {
player.srcObject = stream;
};
navigator.mediaDevices
.getUserMedia({audio: true, video: true})
.then(handleSuccess);
</script>
如果您想选择特定的摄像头,可以先枚举可用的摄像头。
navigator.mediaDevices.enumerateDevices().then((devices) => {
devices = devices.filter((d) => d.kind === 'videoinput');
});
然后,您可以传递在调用 getUserMedia
时要使用的 deviceId。
navigator.mediaDevices.getUserMedia({
audio: true,
video: {
deviceId: devices[0].deviceId,
},
});
这本身就没什么用处。我们所能做的就是获取视频数据并进行播放。
从相机访问原始数据
如需访问相机的原始视频数据,您可以将每一帧绘制到 <canvas>
中并直接操控像素。
对于 2D 画布,您可以使用上下文的 drawImage
方法将 <video>
元素的当前帧绘制到画布中。
context.drawImage(myVideoElement, 0, 0);
借助 WebGL 画布,您可以将 <video>
元素用作纹理的来源。
gl.texImage2D(
gl.TEXTURE_2D,
0,
gl.RGBA,
gl.RGBA,
gl.UNSIGNED_BYTE,
myVideoElement,
);
请注意,这两种方式都会使用正在播放的视频的当前帧。如需处理多个帧,您每次都需要将视频重新绘制到画布上。
如需了解详情,请参阅有关对图片和视频应用实时效果的文章。
保存相机中的数据
如需保存相机数据,最简单的方法是使用 MediaRecorder
API。
MediaRecorder
API 将获取 getUserMedia
创建的数据流,然后逐步将数据流中的数据保存到首选目标位置。
<a id="download">Download</a>
<button id="stop">Stop</button>
<script>
let shouldStop = false;
let stopped = false;
const downloadLink = document.getElementById('download');
const stopButton = document.getElementById('stop');
stopButton.addEventListener('click', function() {
shouldStop = true;
})
var handleSuccess = function(stream) {
const options = {mimeType: 'video/webm'};
const recordedChunks = [];
const mediaRecorder = new MediaRecorder(stream, options);
mediaRecorder.addEventListener('dataavailable', function(e) {
if (e.data.size > 0) {
recordedChunks.push(e.data);
}
if(shouldStop === true && stopped === false) {
mediaRecorder.stop();
stopped = true;
}
});
mediaRecorder.addEventListener('stop', function() {
downloadLink.href = URL.createObjectURL(new Blob(recordedChunks));
downloadLink.download = 'acetest.webm';
});
mediaRecorder.start();
};
navigator.mediaDevices.getUserMedia({ audio: true, video: true })
.then(handleSuccess);
</script>
在本例中,我们会直接将数据保存到数组中,稍后将其转换为 Blob
,然后该数组可用于保存到 Web 服务器或直接保存到用户设备上的存储空间。
以负责任的方式请求使用摄像头的权限
如果用户之前未向您的网站授予摄像头使用权限,那么在您调用 getUserMedia
时,浏览器会立即提示用户向您的网站授予摄像头使用权限。
用户讨厌在其机器上收到要求访问强大设备的提示,他们经常会屏蔽请求,或者如果他们不了解提示的创建环境,也会将其忽略。最佳做法是仅在首次需要时才请求访问摄像头。用户授予访问权限后,系统不会再次询问其权限,但如果他们拒绝授予访问权限,您就无法再次获得访问权限以向用户请求权限。
使用 Permission API 检查您是否已拥有访问权限
getUserMedia
API 并不让您了解自己是否已获得相机访问权限。这就带来了一个问题:为了提供漂亮的界面来让用户授予您对相机的访问权限,您必须请求对相机的访问权限。
在某些浏览器中,可以使用 Permission API 来解决此问题。借助 navigator.permission
API,您可以查询访问特定 API 的功能的状态,而无需再次提示。
如需查询您是否有权访问用户的相机,可以将 {name: 'camera'}
传入查询方法,该方法会返回以下任一项:
granted
- 用户之前已授权您访问相机;prompt
- 用户尚未授予您访问权限,当您调用getUserMedia
时,系统会提示;denied
- 系统或用户已明确阻止对摄像头的访问,您将无法访问摄像头。
现在,您可以进行快速检查,以确认是否需要更改界面以适应用户需要执行的操作。
navigator.permissions.query({name: 'camera'}).then(function (result) {
if (result.state == 'granted') {
} else if (result.state == 'prompt') {
} else if (result.state == 'denied') {
}
result.onchange = function () {};
});