qq_33277028的博客

原创 机器视觉系列(05)----TensorFlow可视化开发环境搭建：jupyter notebook安装

说明：本安装在前面安装的基础上，前面主要是安装好Python，修改了Pip源。 Jupyter Notebook，一个重要的Python开发环境。前身是IPython notebook，是一个交互式编译文本软件，支持运行 40 多种编程语言。目前在开发领域广泛使用。 Jupyter Notebook 依托浏览器内核，在浏览器上完成编辑、编译、连接、运行等开发工作。是一个 Web应用程序。 支持实时代码，数学方程，可视化和markdown。...

原创 机器视觉系列(04)----TensorFlow可视化开发环境搭建：Visual Studio Code安装

本篇在前面机器视觉系列文章02、03的基础上，进行环境搭建，需要说明的是，可视化开发环境有很多，根据个人爱好选择。由于Visual Studio Code免费，微软的东西向来效率高，所以本人选择Visual Studio Code。本质上，任何一个Python可视化开发环境都可以。 很多初学者对安装环境肝肠寸断，欲哭无泪，本篇进行详细讲述。1、环境选择 Visual Studio Code（简称“VS Code”）是Microsoft在2015年4月30...

原创 Android安装的误区

本篇作为一个安装感悟，不是逐步讲述，网上有很多讲述细节的，适合有一定安装经验的技术人员。1、回顾 乔布斯创造了IOS，谷歌创造了Android，在编译系统发展的历史过程中，移动APP编译环境有自己的特点。 早期PC桌面编译环境崇尚简单，配置也相对容易。手机端开发环境搭建，早期SmartPhone开发环境出自微软之手，相对也容易，模拟器使用也很方便。Symbian开发环境也很友好，模拟器使用起来，效率很高。但这些都已经过去。2、吐槽...

原创 短视频SDK接入(4)---预览实现

预览是流媒体基本的功能，美摄SDK便捷的实现了预览编程，授权后，利用流媒体上下文和显示控件，可方便的实现预览。4.1、原理说明4.1.1、显示控件与流媒体上下文的绑定。 美摄SDK对流媒体上下文和显示控件进行了封装，实现无缝连接，通过connectCapturePreviewWithLiveWindow函数，流媒体数据传递给live控件，进行视频显示。4.1.2、权限说明 android权限通过requestPermissions函数来进行申请，在申...

原创 短视频SDK接入(3)---流媒体上下文对象与流媒体显示控件

流媒体上下文对象是美摄SDK中核心对象，是美摄SDK功能引擎，美摄SDK所有的核心功能都依附于该对象实现。 流媒体的处理必须有显示部分，美摄SDK做了NvsLiveWindow控件,便捷的对流媒体进行显示。3.1、说明 流媒体处理是美摄SDK处理的核心，通过美摄SDK，可以方便的对视频进行处理。视频处理最基本的功能是拍摄。拍摄往往和预览联系在一起。 NvsStreamingContext流媒体包装了摄像头拍摄的实现，NvsLiveWindow...

原创 短视频SDK接入(2)---环境搭建

2.1、新建Android工程 使用Android Studio新建相关工程。2.2、导入相关包 如果没有Meishe SDK库，请从美摄官网下载最新andriod开发版本。2.2.1、导入底层核心库2.2.1.1、导入操作 导入库文件的方式有两种：2.2.1.1.1、直接拷贝（第一种导入形式） 打开Android Studio，新建工程，在工程文件夹\app\src\main\目录下，新建jniLibs文件夹下，在jniLib...

原创 短视频接入(1)---开始

目录1.1、美摄SDK技术架构1.2、类库介绍1.2.1、核心类库1.2.2、静态链接库1.2.3、应用开发类库 媒体开发一直是一个比较专业的领域，相比常规的信息应用系统开发，流媒体开发规范多、专业性强，导致国内流媒体开发一直以浅层应用为主，国外以编辑合成渲染开发为主。 美摄科技长期致力于广电领域的软件研发，在非线性编辑方面有多年的研发经验。为了适应互联网视频的发展，美摄科技互联网视频业务线致力于底层开发，为广大软件公司提供音视频编辑的SDK，使广大程序员...

原创 显示硬件发展与视频开发系列(9)----相关术语

9.1、APU APU：Accelerated Processing Unit，加速处理器。AMD公司推出加速图像处理芯片产品。9.2、BPU BPU： Brain Processing Unit，大脑处理器。地平线科技提出的嵌入式人工智能处理器架构。第一代是高斯架构，第二代是伯努利架构，第三代是贝叶斯架构。目前地平线已经设计出了第一代高斯架构，并与英特尔在2017年CES展会上联合推出了ADAS系统（高级驾驶辅助系统）。9.3、CPU ...

原创 显示硬件发展与视频开发系列(8)----总结

材料与制造技术的进步推动了微电子技术的发展，微电子技术的进步推动集成电路的发展，集成电路的发展推动了显示芯片的发展。 显示技术发展过程中，遵从了双色芯片，2D芯片，3D芯片，再到智能芯片的发展过程，在芯片发展的背后，计算机图形学从早期的文本显示到后来2D、3D世界的呈现，再到今天机器视觉技术的发展。 硬件技术的提升，带来了显示标准的变化。显示标准从早期的MDA，EGA、VGA、V-Sync到今天的G-Sync和Freesync 2。标准的出现指导着硬件的...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(7)：总结

时光变幻，岁月横流，计算机应用的深度与广度增大，对图形图像处理也提出了更高的要求。传统的硬件设计、计算框架、运算理论、软件接口都面临着极大的挑战。为了适应人工智能技术的发展，软硬件技术都在进行着巨变。 智能时代创造了很多机会，塑造了无数的科技巨头，公司有更大的科技自由度。智能时代技术百花齐放，硬件辈出、框架争鸣、平台显现、万马奔腾。 不同的硬件框架适应显示的需求。显示技术的后面，有着GPU架构和并行计算架构在支持。在相关专题。阐述主流的C...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(6)：NPU

NPU（Neural network Processing Unit）， 即神经网络处理器。用电路模拟人类的神经元和突触结构。NPU为神经网络而生，对神经网络进行硬件支持。 嵌入式神经网络处理器（NPU）采用“数据驱动并行计算”的架构，特别擅长处理视频、图像类的海量多媒体数据。视频与图像是人工智能数据的重要组成部分，在今天有着最广泛的应用。 NPU是网络处理器，可以认为是一个组件（或者子系统），有时候也称为NPU协处理器。NPU和TPU一样，偏...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(5)：TPU

TPU（Tensor Processing Unit）张量处理单元，为机器学习定制的芯片，经过专门深度机器学习方面的训练，它有更高效能（每瓦计算能力）。 谷歌，2015年6月，I/O开发者大会上推出的计算神经网络专用芯片，为优化自身的TensorFlow机器学习框架而打造，主要用于AlphaGo系统，谷歌地图、谷歌相册和谷歌翻译等应用中。进行搜索、图像、语音等模型和技术的并行处理。 7.5.1、TPU发展史 20...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(4)：GPGPU

通用图形处理器（General-purpose computing on graphics processing units，简称GPGPU），利用处理图形任务的图形处理器来计算原本由中央处理器处理的通用计算任务。这些通用计算与图形处理没有关系。 现代图形处理器有强大的并行处理能力和可编程流水线，流处理器可以处理非图形数据。在面对单指令流多数据流（SIMD），且数据处理的运算量远大于数据调度和传输的需要时，通用图形处理器在性能上大大超越了传统的中央处理器应用程序。7...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(3)：APU

APU是“Accelerated Processing Units”的简称，中文名字叫加速处理器，是AMD融聚未来理念的产品，它第一次将处理器和独显核心做在一个晶片上。 CPU与APU协同计算、彼此加速，具有高性能处理器和最新支持DX11独立显卡的处理性能，大幅提升电脑运行效率，实现了CPU与GPU真正的融合。APU是处理器未来发展的趋势。7.3.1、AMD与APU 从APU发展来看，AMD让CPU和GPU彻底融为一体，无论是AMD的Llano，还是...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(2)：VPU

VPU(Video Processing Unit，视频处理单元）是一种全新的视频处理平台核心引擎，具有硬解码功能以及减少CPU负荷的能力。VPU可以减少服务器负载和网络带宽的消耗。 VPU由ATI提出，区别于传统GPU（Graph Process Unit，图形处理单元）。图形处理单元又包括视频处理单元、外视频模块和后处理模块这三个主要模块。7.2.1、VPU的基础特性 A、支持视频编解码标准类别丰富，图像高清。 B、支持多种抗误码工具...

原创 显示硬件发展与视频开发系列(6)----显示标注与视频处理单元(1)：显示标准

7、显示标准与视频处理单元 消费级视频智能处理大体有10年左右，有了巨大的发展，展望未来，对应于大厂而言，竞争是标准的竞争。包含显示标准与处理单元，竞争推动了科技的进步，市场的繁荣。 新的显示硬件也不断发展，GPU基础上，出现了GPGPU、TPU、NPU、VPU、APU等新的视频处理单元，相信未来有更多的数据硬件处理单元出现。 人工智能还处在初级阶段，标准与规范处在变化中，随着高清晰视频硬件的出现，软件算法很多方面也面临着调整。近些年各国重视人工智能的发展，资...

原创 美摄SDK 局部特效接入文档

美摄SDK 局部特效接入文档1.0版本目 录1、局部特效... 42、编程原理... 43、SDK支持... 44、参数ID.. 45、开发实例1、局部正方形与椭圆... 55.1、整体流程... 55.2、流程说明... 55.3、知识总结... 105.4、实例说明... 115.5、相关代码... 116、开发实例2---三阶贝塞尔曲线... 116.1、贝塞尔曲线... 116.2、三阶贝塞尔曲线... 126.3、美摄SDK...

原创 局部特效

原创 Master Keyer技术文档

Master Keyer技术文档1.0版本目 录15、抠像技术文档... 3前置说明：... 315.1、抠像... 315.2、素材要求... 415.3、如何利用美摄SDK进行抠像开发... 415.3.1、总体思想... 415.3.2、抠像参数ID.. 415.4、类与函数... 515.4.1、NvsColor类... 515.4.2、相关函数... 615.4.2.1、getCaptureVideoFxByIndex. 615.4...

原创 抠像技术文档

原创 特效制作样例说明书----前景动画滤镜

原创 特效制作样例说明书----分屏滤镜

原创 边框分屏滤镜样例说明书

原创 特效制作样例说明书----影集制作案例

原创 特效制作样例说明书----前景动画滤镜

美摄SDK 特效制作样例说明书1.4版本前景动画滤镜制作本案例为模拟相机对焦的特效滤镜制作。素材包中有预览视频和相关文件，先查看最终效果。1、创作思路特效使用了数个素材轨道和两个模拟输入源轨道，进行效果实现。两个模拟输入源轨道起到以下作用。模拟输入源1：模拟开始时，画面放缩和模糊动画，持续1.6秒。模拟输入源2：动画完成后，正常显示输入画面。2、制作过程2.1、开始动画轨道2.1.1、输入源轨道添加 添加【输入源轨道】，替换视频用于模拟输入源。2.1...

原创 Alpha通道介绍

原创 特效制作样例说明书----分屏滤镜

美摄SDK 特效制作样例说明书1.4版本特效制作案例分屏滤镜制作，下图是最终效果。1、创作思路让输入的画面变为三分屏，每一屏尺寸占据画面的三分之一。使用三个模拟输入源轨道，以及alpha patten功能进行实现。本案例以16:9比例画幅实现，其它雷同。2、制作过程2.1、插入一个清晰视频作为输入源为此轨道添加alpha通道图，导入16:9的图片，添加亮度通道后，显示如下效果。alpha通道图是美摄独有的概念，每个轨...

原创 边框分屏滤镜样例说明书

美摄SDK特效制作样例说明书1.4版本特效制作案例特效滤镜中，边框滤镜是常见的一种。从简单的前景边框，到与特效结合，形式丰富，应用广泛。制作一个分屏边框滤镜，下图是效果图。1、创作思路从效果看到，滤镜包含以下内容，带分割线条的前景边框，一系列分割画面，每个画面占用视频界面一部分进行呈现。每个画面形状大小不一致，拼接后组成一个画幅。一般边框滤镜会针对每一种画幅，进行比例设置。本次讲解制作16:9比例的画幅，其它画幅制作雷同。2、制作过程2.1、建立输...

原创 影集模板制作教程

美摄SDK 特效制作样例说明书1.4版本影集模板制作教程将多张照片处理成一个照片视频，这就是影集功能。选择不同模板，导入照片形成影集视频，这就是影集模板。利用美摄特效制作工具，进行影集模板制作，参考本教程。准备阶段 1、影集是制作720x1280比例的影片，也就是9:16比例，整体构思按照这个比例进行。 2、首先准备一系列照片，这些照片最终被用户素材替换。例如，希望影集模板是一个5张照片的影集，准备5张PNG图片，每张照片分辨率为720x1280。...

原创 美摄SDK Alpha产品说明书

美摄SDK Alpha产品说明书1.4版本北京美摄网络科技有限公司Alpha通道图特技“alpha通道图”作用，以素材A的亮度用作素材B的alpha通道。素材A为特技内指定的素材，素材B为特技所在的图像轨道。素材A可以是单张JPG/PNG图片，也可以是CAF序列文件。1、使用模式该特技有两种使用模式，请注意区分。1.1、亮度进程模式亮度进程模式。计算素材A画面不同区域的亮暗程度，决定素材B在alpha变化进程中，哪些区域先被看到，哪些区域后被看到。黑色对应进...

原创 07---Meishe SDK Special Effects Production Sample Manual---Foreground animation filter

原创 Meishe SDK Special Effects Production Sample Manual---Foreground animation filter

Meishe SDK Special Effects Production Sample ManualVersion 1.4Beijing Meishe Network Technology Co., Ltd.Foreground animation filter productionThis case is the production of special effects filters that simulate camera focus.There are...

原创 Meishe SDK Special Effects Production Sample Manual---Split screen filter

原创 Meishe SDK Special Effects Production Sample Manual

Meishe SDK Special Effects Production Sample ManualVersion 1.4Beijing Meishe Network Technology Co., Ltd.Special effects production caseSplit screen filter production, the picture below is the final result.1、Creative ideasLet the input ..

原创 Meishe SDK Special Effects Production Sample Manual---Border filter split screen

原创 Meishe SDK Special Effects Production Sample Manual

Meishe SDK Special Effects Production Sample ManualVersion 1.4Beijing Meishe Network Technology Co., Ltd.Special effects production caseIn the special effect filter, the border filter is a common one. From the simple foreground border...

原创 Meishe SDK Special Effects Production Sample Manual

原创 Meishe SDK Special Effects Production Sample Manual

Meishe SDK Special Effects Production Sample ManualVersion 1.4Beijing Meishe Network Technology Co., Ltd.Photo album template making tutorialProcess multiple photos into one photo video, this is the album function. Choose a different template, impo

原创 Alpha channel graph

原创 Flower Word User‘s Guide