Win10 Tensorflow训练一个自己的物体检测

环境首先要搭建好,没搭建好的童鞋请先搭建环境

在实现我们的目标之前那必须要准备我们的图片素材了,准备一些你想要检测的图片把他们整理到一个文件夹内。



百度上随便搜了一些车牌的图片放在文件夹内。

接下来我们去下载labelImg工具

下载完成后解压出来

data目录里有个predefined_classes文件,这里面就写着我们分类的的名称,我里面就一个类别。

XXXX(有就写没有就不写,每个分类一行),这只是工具的配置文件,不过最好不要用中文,转码这还是比较麻烦的。

接下来我们打开labelimage工具。

Open Dir-->选择我们资源图片所放的位置

快捷键W选择我们需要识别的物体位置

选择识别的物体类别点击ok

我们在我们图片资源目录下新建一个xml文件夹来存放我们的标注文件

在工具中选择我们标注文件所保存的位置


然后Ctrl+S就会将标注信息保存在xml文件里

我们接着工具点击 Next Image继续我们的标注工作

全部标注完成后我们开始编译xml文件将xml和图片转换为我们tf可识别的资源文件。

首先将我们xml文件转为csv文件

创建py文件代码如下(将xml转为csv文件):

import glob

import pandasas pd

import xml.etree.ElementTreeas ET

def xml_to_csv(path):

    xml_list = []

    # 读取注释文件

    for xml_filein glob.glob(path +'/*.xml'):

    tree = ET.parse(xml_file)

    root = tree.getroot()

    for memberin root.findall('object'):

    value = (root.find('filename').text,

                    int(root.find('size')[0].text),

                    int(root.find('size')[1].text),

                    member[0].text,

                    int(member[4][0].text),

                    int(member[4][1].text),

                    int(member[4][2].text),

                    int(member[4][3].text)

    )

    xml_list.append(value)

    column_name = ['filename', 'width', 'height', 'class', 'xmin', 'ymin', 'xmax', 'ymax']

    # 将所有数据分为样本集和验证集,一般按照3:1的比例

    train_list = xml_list[0:int(len(xml_list) *0.67)]

    eval_list = xml_list[int(len(xml_list) *0.67) +1:]

    train_df = pd.DataFrame(train_list, columns=column_name)

    eval_df = pd.DataFrame(eval_list, columns=column_name)

    train_df.to_csv('data/train.csv', index=None)

    eval_df.to_csv('data/eval.csv', index=None)

if __name__ =='__main__':

    path =r'E:\pyWork\ziyuan\License_plate\xml'  # path参数更具自己xml文件所在的文件夹路径修改

    xml_to_csv(path)

    print('Successfully converted xml to csv.')

path所指我们xml文件所存放的目录。运行后会在次py文件下data目录下生成两个csv文件,一个训练一个测试

接下来我们将csv转为tfrecord文件,在这之前我们需要写一个labelitem文件

格式就是这样,要是自己解析能力强随你怎么变。

在创建一个py文件代码如下:

import os
import io
import pandas as pd
import tensorflow as tf

from PIL import Image
# from object_detection.utils import dataset_util
from object_detection.utils import dataset_util
from collections import namedtuple, OrderedDict

flags = tf.app.flags
flags.DEFINE_string('csv_input', '', 'Path to the CSV input')
flags.DEFINE_string('output_path', '', 'Path to output TFRecord')
FLAGS = flags.FLAGS


# 将分类名称转成ID号
def class_text_to_int(row_label):
    if row_label == 'computer':
        return 1
    elif row_label == '可自己添加自己的分类':
        return 2
    else:
        print('NONE: ' + row_label)


def split(df, group):
    data = namedtuple('data', ['filename', 'object'])
    gb = df.groupby(group)
    return [data(filename, gb.get_group(x)) for filename, x in zip(gb.groups.keys(), gb.groups)]


def create_tf_example(group, path):
    print(os.path.join(path, '{}'.format(group.filename)))
    with tf.gfile.GFile(os.path.join(path, '{}'.format(group.filename)), 'rb') as fid:
        encoded_jpg = fid.read()
    encoded_jpg_io = io.BytesIO(encoded_jpg)
    image = Image.open(encoded_jpg_io)
    width, height = image.size

    filename = (group.filename + '.jpg').encode('utf8')
    image_format = b'jpg'
    xmins = []
    xmaxs = []
    ymins = []
    ymaxs = []
    classes_text = []
    classes = []

    for index, row in group.object.iterrows():
        xmins.append(row['xmin'] / width)
        xmaxs.append(row['xmax'] / width)
        ymins.append(row['ymin'] / height)
        ymaxs.append(row['ymax'] / height)
        classes_text.append(row['class'].encode('utf8'))
        classes.append(class_text_to_int(row['class']))

    tf_example = tf.train.Example(features=tf.train.Features(feature={
        'image/height': dataset_util.int64_feature(height),
        'image/width': dataset_util.int64_feature(width),
        'image/filename': dataset_util.bytes_feature(filename),
        'image/source_id': dataset_util.bytes_feature(filename),
        'image/encoded': dataset_util.bytes_feature(encoded_jpg),
        'image/format': dataset_util.bytes_feature(image_format),
        'image/object/bbox/xmin': dataset_util.float_list_feature(xmins),
        'image/object/bbox/xmax': dataset_util.float_list_feature(xmaxs),
        'image/object/bbox/ymin': dataset_util.float_list_feature(ymins),
        'image/object/bbox/ymax': dataset_util.float_list_feature(ymaxs),
        'image/object/class/text': dataset_util.bytes_list_feature(classes_text),
        'image/object/class/label': dataset_util.int64_list_feature(classes),
    }))
    return tf_example


def main(csv_input, output_path, imgPath):
    writer = tf.python_io.TFRecordWriter(output_path)
    path = imgPath
    examples = pd.read_csv(csv_input)
    grouped = split(examples, 'filename')
    for group in grouped:
        tf_example = create_tf_example(group, path)
        writer.write(tf_example.SerializeToString())

    writer.close()
    print('Successfully created the TFRecords: {}'.format(output_path))


if __name__ == '__main__':
    imgPath = r'E:\pyWork\ziyuan\quiz-w8-data\images'

    # 生成train.record文件
    output_path = 'data/train.record'
    csv_input = 'data/train.csv'
    main(csv_input, output_path, imgPath)

    # 生成验证文件 eval.record
    output_path = 'data/eval.record'
    csv_input = 'data/eval.csv'
    main(csv_input, output_path, imgPath)

运行后会生成record文件。

我们在object_detection/samples目录下将ssd_mobilenet_v1_coco.config复制一份到object_detection/legacy/training目录下,没有training目录的童鞋自己新建一个就好。

然后打开config文件里面凡是有PATH_TO_BE_CONFIGURED的字样都是我们需要指定的目录。

我的分类是1,num_classes:1

提一下这里

这里我们可以从官方下载预训练参数,如果不想用可以把这两端注释掉。

object_detection/legacy目录下有train.py这是官方已经写好的训练代码不需要任何修改,我们只需要传递参数开启训练就好

两个目录,一个是训练输出的目录,一个就是config文件所在位置,我直接吧地址设置成默认值,直接在pycharm里运行。你们也可以在cmd上运行。

在运行过程中会产生

训练步数的保存文件,我们可以用ckpt来测试当前训练是否满足需求

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,607评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,047评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,496评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,405评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,400评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,479评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,883评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,535评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,743评论 1 295
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,544评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,612评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,309评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,881评论 3 306
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,891评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,136评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,783评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,316评论 2 342

推荐阅读更多精彩内容