作为深度学习炼丹炉核心,GPU 的选型一直是很多人工智能学习者、科研人员最为头疼的问题。从 GPU 架构、系列、型号、版本到最后的显卡品牌,无不需要一系列从显存、CUDA、图像模型:NasNet Large/DeepLabv3/Yolo/Pix2Pix HD/StyleGAN/MaskRCNN 的 Batch size 和处理时间、 语言模型:Transformer Big/Conv. Seq2Seq/unsupMT/BERT Base/BERT Finetune/MT-DNN 的 Batch size 和处理时间,最后到每 G 显存、每 CUDA 的性价比的一番衡量。
作者: 跨象乘云
人工智能训练师 – 国家职业技能标准发布
据中华人民共和国人力资源和社会保障部 2021 年 11 月 25 日消息,根据《中华人民共和国劳动法》有关规定,人力资源社会保障部、工业和信息化部共同制定了人工智能训练师等六个国家职业技能标准,现予颁布施行。原相应国家职业技能标准同时废止。
本次发布的《人工智能训练师》国家职业技能标准(点击下载原报告 PDF),从:数据采集和处理、数据标注、智能系统运维、业务分析、智能训练、智能系统设计 … 等维度,划分了 L5 – L1 的五个等级,并对各个等级的职业能力给出了具体的描述和要求,为人工智能训练师这一新职业提供了职业发展指引,将有效促进人工智能训练师职业规范化和规模化发展。[……]
自动机器学习 (AutoML) 工业落地
机器学习方法已被用于各种现实世界的应用,从社交网络、在线图像/视频分享平台、电子商务到教育、医疗等。然而,机器学习方法的几个组成部分,包括:数据表示,超参数和模型架构,可以在很大程度上影响它们在实践中的性能。此外,数据规模和模型大小的爆炸式增长,使得机器学习开发人员对这些组件进行优化的时间越来越长。为了解决这些挑战,自动化机器学习 (AutoML) 的目标是自动化应用机器学习方法的过程,以解决现实世界的应用任务,减少调整机器学习方法的时间,同时保持良好的性能。
在 2021 年 KDD 大会上, 阿里团队介绍了 AutoML 的主要研究主题,包括:超参数优化,神经结构搜索和元学习。同时,[……]
2021 元宇宙发展研究报告 – 清华大学
2021 年是元宇宙 (MetaVerse) 的元年。堪比大航海时代的大迁徙,人类全面走进数字世界,开辟鸿蒙、创世而生。创造、生活、娱乐,乃至工作的数字时空,是为元宇宙。其中,需要重新思考存在和虚无、肉体和精神、性善和性恶、自我和宇宙的哲学命题,需要不断探索有限和无限、秩序与自由、自治与法治、经济与治理、伦理和文明的边界,需要全面融合区块链、AR、5G、大数据、人工智能、3D 引擎等新技术,形成数字创造、数字资产、数字市场、数字货币、数字消费的新模式。元宇宙是 “心” 的绽放,是 “梦” 的具象,是 “我思故我在” 的全息展现。内求于心,外形于物,物物相生,元宇宙成矣。或许,互联网的终极形态就[……]
开源自动化机器学习框架,轻松搞定机器学习
自动化机器学习 (AutoML) 可以帮助机器学习管道中的某些关键组件实现自动化。其中机器学习管道包括数据理解、数据工程、特征工程、模型训练、超参数调整、模型监控等。
在这篇文章中,分享 8 个开源的 autoML 框架:
- Auto-Sklearn
- TPOT
- Auto-ViML
- H2O AutoML
- Auto-Keras
- MLBox
- Hyperopt Sklearn
- AutoGluon
1、Auto-Sklearn
Auto-sklearn 是基于 scikit-learn 软件包构建的开源 AutoML 库。它为给定的数据集找[……]
计算机视觉智能农业领域应用
农业被认为是促进经济发展的部门,使每个国家都在全球市场上脱颖而出。 产量大的国家在出口市场上占主导地位。 然而,一些国家面临着高劳动力成本、不发达的方法以及缺乏自动化导致更高的生产成本。人类通过大脑处理的视觉来解释现实世界,以了解周围环境。 随着世界被类人能力所吞没,计算机视觉的分支旨在训练计算机解释和理解视觉世界。 通过计算机视觉,机器可以准确地识别和检测物体,分析一系列图像并做出有意义的解释。
计算机视觉领域正在农业中站稳脚跟。从提高生产力到通过自动化降低生产成本,计算机视觉改善了农业部门的整体运作。本文深入探讨了计算机视觉在农业中的潜力及其贡献。
农业行业见证了计算机视觉-人[……]
GPU 虚拟化与算力隔离
一、术语介绍
- GPU:Graphics Processing Unit,显卡
- CUDA:ompute Unified Device Architecture,英伟达 2006 年推出的计算 API
- VT/VT-x/VT-d :Intel Virtualization Technology。-x 表示 x86 CPU,-d 表示 Device。
- SVM :AMD Secure Virtual Machine。AMD 的等价于 Intel VT-x 的技术。
- EPT :Extended Page Table,Intel 的 CPU 虚拟化中的页表虚拟化硬件支持。
[……]
卡位农业大数据
人口增长与消费推动对农业生产增长的需求,而气候变化和地球可持续发展也已成为粗放型农业发展头上的紧箍咒。要解开矛盾,「需要实现生产效率的飞跃」,随着传感器、算力和算法的发展,农业是最能从大数据中受益的行业之一。基于中国农业当下的特殊情况,我们还面临许多基础设施方面的挑战,农业大数据也才起步。
大风、大雨和冰雹,接连的极端天气导致部分新疆棉花地区受灾,需要重播。清明前后,棉农就开始忙碌,种什么种子?什么时候种?种植密度如何?浇多少水?现又要考虑是否补苗。受灾多大程度再补?60% 以上?还是 50% ?
从生产规划、种植前准备、再到棉花中间管理阶段,直到采收,农民要做四、五十项决[……]
图像标注的基础内容介绍
给大家介绍图像标注的种类,应用场景,以及各种标注的优缺点。
如果没有数据分析,公司就会变得既盲又聋,就像高速公路上的鹿一样在网络上游荡。— Geoffrey Moore
每个数据科学任务都需要数据。具体地说,是输入系统的干净易懂的数据。说到图像,计算机需要看到人类眼睛看到的东西。
例如,人类有识别和分类物体的能力。同样,我们可以使用计算机视觉来解释它接收到的视觉数据。这就是图像标注的作用。
图像标注在计算机视觉中起着至关重要的作用。图像标注的目标是为和任务相关的、特定于任务的标签。这可能包括基于文本的标签(类),绘制在图像上的标签(即边框),甚至是像素级的标签。我们将在下面探讨这[……]
教你搭建计算机视觉开发环境
本文将以 Linux 系统下安装 tensorflow 为例来讲解计算机视觉开发环境的搭建过程。
1、安装 nvidia 驱动
首先去 Nvidia 官网上查看适合你的 GPU 的驱动(http://www.nvidia.com/Download/index.aspx?lang=en-us)。选择 GPU 产品类型(以下用的是 NVIDIA TITAN Xp),查找适合的驱动如下图:
下载 NVIDIA 驱动安装包(.run格式)。下载后的文件为: