IOS | Software Engineer in Deep Learning

Firebase ML Kit ile Görüntü Üzerindeki Metinlerin Tanınması | iOS

Uygulama ile Google I/O Mayıs 2018 etkinliğinde duyurulan Firebase ML Kit içesinde hazır olarak kullanılabilen (Model eklenmeden) metin tanıma işlemi gerçekleştirilmiştir. Kameradan çekilen görüntü üzerinde varsa metinlerin, cihaz üzerinde ve Cloud tarafında sorgulanarak tanınması sağlanmıştır.

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “Firebase ML Kit ile Görüntü Üzerindeki Metinlerin Tanınması | iOS”

Gelişmiş Metin Algılama Teknikleri (Vision + TesserAct OCR) | iOS

Merhaba, uygulama ile seçilen bir resim içerisindeki metinlerin Vision Framework ve TesserAct (Tesseract, çeşitli işletim sistemleri için geliştirilen özgür bir optik karakter tanıma motorudur) OCR (Optical Character Recognition – Optik Karakter Tanıma) ile metin tanıma örneği yapılmıştır.

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “Gelişmiş Metin Algılama Teknikleri (Vision + TesserAct OCR) | iOS”

Gelişmiş Yüz Özellikleri Algılama (Advanced Face Features Detection) | iOS

Merhaba, uygulama ile seçilen bir resim içerisindeki yüzlerin sayısını, çevresini ve bulunan yüzlerin özellikleri nasıl tespit edileceğini gösteren basit bir uygulamadır. Yüz özelliklerinden kasıt sol göz, sağ göz, burun çevresi, burun üstü, yüz hattı, dudağın dış çevresi, dudağın iç hatları, sol kaş, sağ kaş, sol ve sağ göz bebeğidir. Ekran görüntülerinde uzak yüzleri bile başarıyla tespit edildiği gözlemlenebilmektedir.

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “Gelişmiş Yüz Özellikleri Algılama (Advanced Face Features Detection) | iOS”

IBM Watson Eğitilmiş Model (Core ML) ile Trafik İşaretleri Tanımlama | iOS

Model üretme aşamaları için IBM Watson Servis ile CoreML için Custom Model Üretme linkinden detaylı inceleyebilirsiniz.
Eğitilmiş Model: Trafikisaretleri.mlmodel

Ekran Görüntüleri:

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “IBM Watson Eğitilmiş Model (Core ML) ile Trafik İşaretleri Tanımlama | iOS”

IBM Watson Eğitilmiş Model (Core ML) ile Meyve Tanımlama | iOS

Model üretme aşamaları için IBM Watson Servis ile CoreML için Custom Model Üretme linkinden detaylı inceleyebilirsiniz.
Eğitilmiş Model: ElmaMandalinePortakal.mlmodel

Ekran Görüntüleri:

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “IBM Watson Eğitilmiş Model (Core ML) ile Meyve Tanımlama | iOS”

IBM Watson Servis ile CoreML için Custom Model Üretme

Apple geçtiğimiz günlerde IBM ile işbirliği yaparak, CoreML için makine öğrenimi modellerini eğitmek üzere IBM’in Watson hizmetinden(servislerinden) yararlandığını duyurdu. Yani, artık cihazınız çevrimdışı olduğunda bile, iPhone ve iPad’de Watson makine öğrenim modellerinden yararlanan uygulamalar oluşturabilirsiniz. Uygulamalarınız görüntüleri hızlı bir şekilde analiz edebilir, görsel içeriği doğru bir şekilde sınıflandırabilir ve Watson Servislerini kullanarak modelleri kolayca eğitebilir. Detaylı bilgi için https://developer.apple.com/ibm/

IBM Watson New York merkezli IBM firması tarafından geliştirilen bir yapay zeka programı. Watson’nın en önemli yeteneklerinden biri mükemmel bir veri analizi kabiliyetine sahip olması. Milyarlarca veri içerisinde çok hızlı bir şekilde tarama gerçekleştirerek, doğal dilde sorulan sorulara cevap verebiliyor. Watson süper bilgisayarı 80 teraflop hızında yani saniyede 80 trilyon adet kayan nokta (floating point) işlemi yapabiliyor. Ayrıca süper bilgisayar yüksek kabiliyetli insan fonksiyonlarına cevap verebilmek için 6 milyondan fazla mantık kuralına karşılık gelen 200 milyondan fazla sayfa bilgiyi veri deposunda barındırıyor. Watson barındırdığı yapay zeka algoritmalarıyla da birçok çözümlenmesi zor soruna çözüm sunabiliyor. Watson süper bilgisayarı temel olarak aşağıdaki bileşenleri bünyesinde barındırıyor.

Model oluşturma aşamaları

https://www.ibm.com/cloud/apple-developer Kayıt açmakla başlayabiliriz.

Okumaya devam et “IBM Watson Servis ile CoreML için Custom Model Üretme”

Core ML ile Doğal Dil İşleme Örneği (NSLinguisticTagger)| IOS

Merhaba, Core ML ile Doğal Dil İşleme üzerine temel bir örnek olması amacıyla hazırlanmıştır. Örnekte arama bölümüne girilen kelime NSLinguisticTagger ile aranacak cümleler içerisinde oluşturduğu etiket şemalarına göre aranıp daha ilgili sonuçlar gözlenmektedir. Örnek için Türkçe uygun cümlele bulamadım ama İngilizce cümlelerden oluşan kümede ‘buy’ ve ‘goose’ sözcükleri aratıldığında bu kelimelerin düzensiz diğer durumlarına rağmen arama sonuçlarında gözlemlenmektedir.

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “Core ML ile Doğal Dil İşleme Örneği (NSLinguisticTagger)| IOS”

Core ML ile Kameradan Görüntü Tanımlama (Inceptionv3 Model) | IOS

Merhaba, Core ML ile temel bir örnek olması amacıyla oluşturulmuştur. Örnekte Inceptionv3.mlmodel isimli modelle canlı kamera ile alınan görüntü ile nesne tanımlama yapılmaktadır.

Modelin detayı: Bir resimde baskın bulunan ağaçlar, hayvanlar, yiyecekler, araçlar, insanlar gibi 1000 kategoriden oluşan bir kümeden oluşmaktadır.

//
//  CanliKameraileNesneViewController.swift
//  ML Ornekleri
//
//  Created by Bülent Siyah on 17.06.2018.
//  Copyright © 2018 Bülent Siyah. All rights reserved.
//

import UIKit
import AVFoundation
import Vision

class CanliKameraileNesneViewController:  UIViewController {
    
    @IBOutlet weak var previView2: PreviewView!
    
    @IBOutlet weak var objectTextView2: UITextView!


    
    // Live Camera Properties
    let captureSession = AVCaptureSession()
    var captureDevice:AVCaptureDevice!
    var devicePosition: AVCaptureDevice.Position = .back
    
    var requests = [VNRequest]()
    
    override func viewDidLoad() {
        super.viewDidLoad()
        setupVision()
    }
    
    override func viewWillAppear(_ animated: Bool) {
        super.viewWillAppear(animated)
        prepareCamera()
    }
    
    func setupVision() {
        
        // Rectangle Request
        let rectangleDetectionRequest = VNDetectRectanglesRequest(completionHandler: handleRectangles)
        rectangleDetectionRequest.minimumSize = 0.1
        rectangleDetectionRequest.maximumObservations = 1
        
        // Object Classification
        guard let visionModel = try? VNCoreMLModel(for: Inceptionv3().model) else {fatalError("cant load Vision ML model")}
        
        let classificationRequest = VNCoreMLRequest(model: visionModel, completionHandler: handleClassification)
        classificationRequest.imageCropAndScaleOption = .centerCrop
        
        
        
        self.requests = [rectangleDetectionRequest, classificationRequest]
    }
    
    func handleRectangles (request:VNRequest, error:Error?) {
        DispatchQueue.main.async {
            self.drawVisionRequestResults(request.results as! [VNRectangleObservation])
        }
    }
    
    
    func drawVisionRequestResults (_ results:[VNRectangleObservation]) {
        previView2.removeMask()
        
        let transform = CGAffineTransform(scaleX: 1, y: -1).translatedBy(x: 0, y: -self.previView2.frame.height)
        
        let translate = CGAffineTransform.identity.scaledBy(x: self.previView2.frame.width, y: self.previView2.frame.height)
        
        
        for rectangle in results {
            let rectangleBounds = rectangle.boundingBox.applying(translate).applying(transform)
            previView2.drawLayer(in: rectangleBounds)
        }
        
        
        
    }
    
    func handleClassification (request:VNRequest, error:Error?) {
        guard let observations = request.results else {print("no results:\(String(describing: error?.localizedDescription))"); return}
        
        let classifcations = observations[0...4]
            .flatMap({$0 as? VNClassificationObservation})
            .filter({$0.confidence > 0.3})
            .map({$0.identifier})
        
        for classification in classifcations {
            DispatchQueue.main.async {
                self.objectTextView2.text = classification
            }
        }
        
    }
    
    
}

// CanliKameraileNesneViewController.swift

// ML Ornekleri

// Created by Bülent Siyah on 17.06.2018.

import UIKit

import AVFoundation

import Vision

class CanliKameraileNesneViewController: UIViewController {

@IBOutlet weak var previView2: PreviewView!

@IBOutlet weak var objectTextView2: UITextView!

// Live Camera Properties

let captureSession = AVCaptureSession()

var captureDevice:AVCaptureDevice!

var devicePosition: AVCaptureDevice.Position = .back

var requests = [VNRequest]()

override func viewDidLoad() {

super.viewDidLoad()

setupVision()

}

override func viewWillAppear(_ animated: Bool) {

super.viewWillAppear(animated)

prepareCamera()

}

func setupVision() {

// Rectangle Request

let rectangleDetectionRequest = VNDetectRectanglesRequest(completionHandler: handleRectangles)

rectangleDetectionRequest.minimumSize = 0.1

rectangleDetectionRequest.maximumObservations = 1

// Object Classification

guard let visionModel = try? VNCoreMLModel(for: Inceptionv3().model) else {fatalError("cant load Vision ML model")}

let classificationRequest = VNCoreMLRequest(model: visionModel, completionHandler: handleClassification)

classificationRequest.imageCropAndScaleOption = .centerCrop

self.requests = [rectangleDetectionRequest, classificationRequest]

}

func handleRectangles (request:VNRequest, error:Error?) {

DispatchQueue.main.async {

self.drawVisionRequestResults(request.results as! [VNRectangleObservation])

}

func drawVisionRequestResults (_ results:[VNRectangleObservation]) {

previView2.removeMask()

let transform = CGAffineTransform(scaleX: 1, y: -1).translatedBy(x: 0, y: -self.previView2.frame.height)

let translate = CGAffineTransform.identity.scaledBy(x: self.previView2.frame.width, y: self.previView2.frame.height)

for rectangle in results {

let rectangleBounds = rectangle.boundingBox.applying(translate).applying(transform)

previView2.drawLayer(in: rectangleBounds)

}

func handleClassification (request:VNRequest, error:Error?) {

guard let observations = request.results else {print("no results:\(String(describing: error?.localizedDescription))"); return}

let classifcations = observations[0...4]

.flatMap({$0 as? VNClassificationObservation})

.filter({$0.confidence > 0.3})

.map({$0.identifier})

for classification in classifcations {

DispatchQueue.main.async {

self.objectTextView2.text = classification

}

Okumaya devam et “Core ML ile Kameradan Görüntü Tanımlama (Inceptionv3 Model) | IOS”

Core ML ile Cinsiyet Tahmini (CoreML Convert Model) | IOS

Merhaba, Core ML ile temel bir örnek olması amacıyla oluşturulmuştur. Örnekte GenderByName.mlmodel isimli modelle girilen isim bilgine göre tahmin yapılmaktadır.

Bu slayt gösterisi için JavaScript gerekir.

Okumaya devam et “Core ML ile Cinsiyet Tahmini (CoreML Convert Model) | IOS”

Core ML ile Görüntü Tanımlama Örneği | IOS

Bu slayt gösterisi için JavaScript gerekir.

Modeller: https://developer.apple.com/machine-learning/run-a-model/

Gist Linki: https://gist.github.com/bulentsiyah/b761521c781d24dcf7ccf376959ea930