特征提取场景与常见方法

新年第一篇, 先做个机器学习实践总结—几种常见场景下的特征提取方法： 机器学习中最重要的一环就是特征工程，特征工程的好坏直接影响模型的效果，如果做得不好大概率会出现“garbage in,garbage out ”的情况; 特征的提取主要指特征信息的数值化，向量化的过程，下面仅仅根据个人实践经验和理解简要总结常见应用场景下的特征提...

没有评论 admin 阅读更多

一个简单的线上质量预测模型

1. 问题分析 发布一个子系统到线上，根据测试流程中收集的质量数据 预测其可能的 线上问题数； 2. 模型设计 一般影响子系统质量的因素可能有哪些？ 能获取到多少纬度的数据，取决于各厂的质量大数据平台的数据挖掘能力， 这里，由于本人无实际数据平台，举个样例，纬度不一定齐全 构造的训练数据： https://github.com/margaretmm/AI/blob/mas...

没有评论 margaret 阅读更多

Applitools –AI powered UI测试工具

测试原理 比较适合做回归测试，基于baseline image比对的UI测试   测试工具数据流图 AI能力体现在哪里？ Eyes Sever中提供图片screenshot比对功能， 使用了AI 算法， 只返回2个图片的差异点，包括图像尺寸和位置差异； 用户不用做 图像处理和模型训练，使用很方便 Eggplant AI 的AI智能也是用在图像识别上...

3条评论 margaret 阅读更多

智能算法系统评估

智能算法系统如何评估？ 算法模型的评估： 主要衡量模型对未知新数据的预测能力，即泛化能，衡量泛化能力的指标（也叫模型的性能度量）： 1.1   准确率（accuracy） :对于给定的数据集，正确分类的样本数占总样本数的比率。 1.2   精确率（precision）==查准率:对于给定的数据集，预测为正例的样本中真正例样本的比率。 1.3 召回率（ rec...

没有评论 margaret 阅读更多

房价预测–基于NN算法详解

1. 问题分析 基于房屋的各种纬度特征，预测房屋价格 2.原始数据扒取 从http://hz.ganji.com/fang5 网站上扒取 杭州市房屋特征数据： 'Address':div.find('span',class_=re.compile('area')).text.strip().replace(' ','').replace('\n',''), 'Rooms': div.find('d......

没有评论 margaret 阅读更多
0
简单 OCR识 字符识别
未分类 / 2019年6月11日

相关的类似场景有车牌识别，验证码识别等格式固定且短小的字符串识别 图片预处理 从目录读出文件, 并且随机抽取文件名 , 形成训练集和测试集列表 准备好图像数据和标签数据,并且向量化: 把文件读入内存中,并转换成灰度图片( 3层图像转为1层图像,减少存储信息,方便计算),同时把矩阵信息转化为一维数组, 并且做归一化处理 标签...

0
tensorflow CNN实践
未分类 / 2019年6月10日

###############tensorflow实现 风格迁移 实例################ 原理之前介绍过，这里只介绍实现： 基于 VGG19 定义自己的图像特征提取NN网络模型: 从预训练的模型中，获取卷积层部分的参数，用于构建我们自己的模型。VGG19中的全连接层舍弃掉，这一部分对提取图像特征基本无用。 这里提取出来的VGG参数全部是作为constant（即常量）使用的，...

0
数据分析实践1
大数据 , 笔记 / 2019年1月2日

整个机器学习的流程主要分如下几个主要过程: 业务理解 数据分析理解  数据预处理 建模 模型效果评估 使用合格的模型做预测 数据分析理解是机器学习建模的基础，目的是分析挖掘数据维度中和预测目标强相关的因素, 剔除不相关或者弱相关的因素, 用于后续的机器学习; Python ,spark框架中常用dataframe结构处理数据集，下面使用python...

0
特征提取场景与常见方法
AI , 笔记 / 2019年1月1日

新年第一篇, 先做个机器学习实践总结—几种常见场景下的特征提取方法： 机器学习中最重要的一环就是特征工程，特征工程的好坏直接影响模型的效果，如果做得不好大概率会出现“garbage in,garbage out ”的情况; 特征的提取主要指特征信息的数值化，向量化的过程，下面仅仅根据个人实践经验和理解简要总结常见应用场景下的...