2016-09-28

Swift落穂ひろい　プトロコル準拠

Swift

Swiftで少しわかりにくかった所を整理しておきます。Swift3です。

二つのプロトコル準拠

複数のプロトコル準拠な変数宣言に&を使います。

let animal3:Animal & Helloable = seri

Switch文で特定の型に対して

protocol Animal {
    
}

protocol Helloable {
    func hello()
}


struct Dog : Animal,Helloable {
    let name:String
    let legs:Int
    let age:Int
    
    func hello() {
        print("bow!")
    }
}

struct Cat : Animal, Helloable {
    let name:String
    let legs:Int
    let age:Int
    
    func hello() {
        print("nyao!")
    }
}

struct Fish : Animal {
    let name:String
    let age:Int
}

let seri = Dog(name: "Seri", legs: 4, age:13)
seri.hello()

let tama = Cat(name: "Tama", legs: 4, age:5)
tama.hello()

let kin = Fish(name: "Kin", age:1)

let animal:Animal = seri
let animal2:Helloable = seri
let animal3:Animal & Helloable = seri
let animal4:Any&Helloable = seri

let animals:[Animal] = [seri, tama, kin]

animals.forEach { (p:Animal) in
    switch(p) {
    case let p as Animal & Helloable:
        p.hello()
    default:
        break
    }
}

2016-09-20

コンパイル時間計測

XCode

other Swift Flagsに-Xfrontend -debug-time-function-bodiesをつける。

Speeding Up Slow Swift Build Times

2016-09-16

ネットワーク

iOS

引き続き
developer.apple.com

の一部の要点

NSURLSessionを使う。

旧iOSとの互換がいるときはNSURLConnectionを使う。

dataTaskWithRequest:completionHandler:ないしdataTaskWithURL:completionHandler:を呼ぶ

NSURLRequestにはリクエストに必要な情報をつめる。

もう少し制御が必要な場合はNSURLSessionでデリゲートを実装する。

独自認証、リダイレクトに従う等をデリゲートで都度訊かれる。

ディスクにダウンロードするならNSURLSession

一時停止等もできる。

POST要求

やはりリクエストを作る。
コンテンツタイプの指定はsetValue:forHTTPHeaderField:
メモリ上の短いデータはURLエンコード
ディスクのデータはNSMutableURLRequest.setHTTPBodyStream でNSInputStreamとして。
大量のデータはCFStreamCreateBoundPairでストリームの組を作りNSMutableURLRequest.setHTTPBodyStreamで。
進捗状況はconnection:didSendBodyData:totalBytesWritten:totalBytesExpectedToWrite:

認証

URLSession:task:didReceiveChallenge:completionHandler:の実装
1. 証明書を渡す場合　NSURLSessionAuthChallengeUseCredentialで証明書を渡す。
2. 認証せず処理を続行 NSURLSessionAuthChallengeUseCredentialでnilを渡す。
3. キャンセルしたい　NSURLSessionAuthChallengeCancelAuthenticationChallengeを渡す。
4. OSにまかせる NSURLSessionAuthChallengePerformDefaultHandling
5. 特定の型の認証拒否 NSURLSessionAuthChallengeRejectProtectionSpace

認証書オブジェクト作成

ログインパスワード認証 credentialWithUser:password:persistence:
証明書ベース credentialWithIdentity:certificates:persistence:にSecIdentityRefを渡す。(SecIdentityRefはユーザのキーチェーンから、SecItemCopyMatchingで取得)

developer.apple.com

2016-09-16

ネットワーク

iOS

iOSDevネットワーキングオーバービュー
developer.apple.com

詳細はリンク先をみるとして冒頭の要点をまとめてみる。

ネットワークは信頼性が低いから以下に注意。

必要なデータのみ通信
タイムアウトじゃなくて取り消し手段を入れる
というか遅い通信では取り消しできるようなUIにせよ
DLは再開できるようにしてね
通信が切れてもオフライン状態でとにかく機能し続けるようにしてね
モーダルでネットワークが切れたとか出さないでね。復旧したら自動的に再試行するように。
低レベルのAPIじゃなくて高レベルのAPIを使うように。
セキュリティに気をつける(SSL, TLS活用)。安全性はアプリ側責任　等

現実

負荷が高いとパケット紛失が起こるよ。通信はガタ落ちだよ。
ネットワークリンクが飽和すると遅延が生じるよ。(ルータがトラフィックをバッファに保存しようとする)
公衆無線LANはHTTP要求に対しログインページを出そうとするよ。
ファイアウォールが特定ポート以外への切断を遮断するよ。
NAT(ネットワーク・アドレス変換)によってサーバからユーザへ向かう接続ができないことがあるよ。等

対策

まずデータのアップロード・ダウンロードはユーザに時間と費用を課していることに気づけ。これを最小限にせよ。

なるべくまとめる。

どんなときも一括ダウンロード。都度ダウンロードすると遅延にも脆弱になるし、操作性も悪くなる。
ダウンロードの量を最小にしてローカルにキャッシュしてね。前回から更新があるかを問い合わせてダウンロードしてね。
大きな画像を小さく表示するならはじめから小さな画像を用意してね。
キャッシュ容量は各自工夫して下さい。
トレードオフがいつもあるよ。例えば商品画像が並ぶとき、この画像をどこまで一括ダウンロードすべきか。。

ネットワークの状況変化への備え

いつでも圏外、機内モード、Wifiを切る等の自体に対処してね。
ユーザが意図的に接続しようとしているかが重要だよ。そういうときはいつでも接続しようとするべきだよ。すぐに接続できないときはユーザがキャンセルしない限り再接続を試みようとして下さいね。SCNetworkReachabilityをうまくつかってね。接続状態はモダールでない手段で表示してね。
バックグラウンドで接続しようとした場合もモーダルでダイアログとか表示しないでね。再試行するにしても時間を開けていくようにしてね。
SCNetworkReachabilityは状態が変換したときに通知が飛ぶよ。でもこのAPIは接続を事前に判断するものではなくて、接続に失敗してその原因を調べる時に使ってね。

通信速度の判断

少量のデータをダウンロードしてそれに費やした時間から評価してね。この評価値は都度図り直して精度を高めてみてね。
動画配信とかで速度が再生に追いついていないときは低帯域幅用の処理に一時的に切り替えるとか。

遅延

遠隔ホストへの要求で、応答を待ってからやっているとどんどん遅れていくよ。同時に送ったほうが良い。
NSURLConnectionのパイプライン処理 NSMutableURLRequest.setHTTPShouldUsePipeliningを使うと複数のHTTP要求を同時に出せるよ。

テスト

XCodeのNetwork Link Conditionerツールを使って色々な状況で試験できるよ。
1. 帯域幅を抑える。
2. 応答時間を伸ばす。
3. DNS応答に遅延を加える。
4. パケット紛失

分単位の処理がでないように、でたらキャンセルできるように。

2016-09-15

プロトコル指向の例

Swift

WWDC2015から
developer.apple.com

重要だが未消化なのであとで感想を追記したい。

2016-09-15

プロトコル指向+値型なコーディング

Swift

WWW2016におけるコーディングの指針

developer.apple.com

モデルは値型に
Viewのレイアウト調整はプロトコルとジェネリクスを使ってUIViewから独立なクラスを作ると単体テストできる。
Controllerの状態はenum一つにまとめる。モデルの更新を通知してコントロールは差分を見てUIを更新すると更新が一箇所になる。

継承よりも合成、プロトコル(つまりインターフェイス)に対してコードを書くというのはGOFのデザインパターンの設計方針と同じだ。

2016-09-15

値型

Swift

WWDC2015においてSwiftでは参照より値型を用いることを推奨している。

Building Better Apps with Value Types in Swift - WWDC 2015 - Videos - Apple Developer

参照型を混ぜる際にはgetにmutatingをつけてコピーして渡すようにする。
isUniquelyReferenceNonObjCを用いるとなお良い。

以下の説明が参考になる。
wpdev.hatenablog.com

2016-09-01

iPhoneの実機でネットワーク環境を試す

XCode

図は「On-Demand Resources Guide: Optimization with Testing」を参照

設定

Settings/Developer/Network Link Conditioner/Status

enableをオンにし、
Profileを設定する。

Profile

Profileは基本のpresetがあり、自分でも設定できる。
主な値は以下

100%LOSS

3G

下り 780kbps
下りパケットロス 0％
下り遅延 100ミリ秒

DSL

Edge

High Latency DNS

Very Bad NetWork

下りバンド幅 1000kbps
下りパケットロス 10%
下り遅延 500ミリ秒

Wifi

下りバンド幅 40000kbps
下りパケットロス 0%
下り遅延 1ミリ秒

2016-08-18

railsやってみたインデックス

インデックス

rails チュートリアル

設定

チュートリアルをする。セットアップ編 - Rodhos Soft

フォルダ構成

チュートリアルをする。最初のアプリ - Rodhos Soft

静的なページ

チュートリアルをする。静的なページ編 - Rodhos Soft
チュートリアルをする。静的なページ作成 - Rodhos Soft

RubyGem

RubyGemsとは - Rodhos Soft

レイアウト作成

チュートリアルをやってみる。レイアウト作成編 - Rodhos Soft

Asset Pipe, Sass

チュートリアルをやってみる。Asset PipelineとSass編 - Rodhos Soft

ユーザモデル

チュートリアルをやってみる。ユーザモデル編 - Rodhos Soft

ユーザ登録画面

チュートリアルをやってみる。ユーザ登録画面編 - Rodhos Soft

サインイン、アウト

チュートリアルをやってみる。サインイン、サインアウト編 - Rodhos Soft

ユーザ更新

チュートリアルをやってみる。ユーザ更新編 - Rodhos Soft

マイクロポスト

チュートリアルをやる。マイクロポスト編 - Rodhos Soft

ユーザフォロー

チュートリアルをやってみる。ユーザフォロー編 - Rodhos Soft

タイムライン

チュートリアルをする。フィード(タイムライン)の作成 - Rodhos Soft

モデルをつくる

モデルをつくる最初 - Rodhos Soft

多対多

多対多関係 - Rodhos Soft

改訂3版基礎 Ruby on Rails 基礎シリーズ

作者: 黒田努,佐藤和人
出版社/メーカー: インプレス
発売日: 2015/05/29
メディア: Kindle版
この商品を含むブログを見る

2016-08-18

AVFoundation関連のサンプルコード

動画技術

Apple

基本AV Foundation for iOS and macOS - Apple Developerのコーナーへ見に行けばよい

sample code

かなりあるので用途別に整理したい。

AVLoupe
StitchedStreamPlayer
AVFoundationPiPPlayer: Picture-in-Picture Playback with AVKit
AVReaderWriter: Offline Audio / Video Processing
Using AVAudioEngine for Playback, Mixing and Recording
Real-time Video Processing Using AVPlayerItemVideoOutput
AVFoundationSimplePlayer-iOS: Using AVFoundation to Play Media
AVFoundationQueuePlayer-iOS: Using a Mixture of Local File Based Assets and HTTP Live Streaming Assets with AVFoundation
AVCustomEdit
VideoSnake
AVMetadataRecordPlay: Timed Metadata Capture Recording and Playback
AVPlayerDemo
avTouch
AVMovieExporter
AVSimpleEditoriOS
RosyWriter
AVCam-iOS: Using AVFoundation to Capture Images and Movies
AVCamManual: Extending AVCam to Use Manual Capture API
AVLocationPlayer: Using AVFoundation Metadata Reading
AVFoundation - Timecode Reader/Writer (avtimecodereadwrite)
BracketStripes: Using the Bracketed Capture API
Using AVFoundation APIs to record a movie with location metadata
AVTimedAnnotationWriter: Using Custom Annotation Metadata for Movie Writing and Playback
AVARLDelegateDemo
AVCompositionDebugVieweriOS
MTAudioProcessingTap Audio Processor
SquareCam
GLCameraRipple
StopNGo for iOS
AVCamBarcode: Using AVFoundation to Detect Barcodes and Faces
HLS Catalog: Using AVFoundation to play and persist HTTP Live Streams
AVAutoWait: Using AVFoundation to play HTTP assets with minimal stalls
AVCaptureAudioDataOutput To AudioUnit iOS

document

前述のappleのコーナーをみにいくのが早い

About AVFoundation
Exploring AVFoundation
Technical Note TN2310 AVFoundation - Timecode Support with AVAssetWriter and AVAssetReader
Technical Q&A QA1668 Playing media while in the background using AV Foundation on iOS
Technical Q&A QA1772 How to determine whether an AVPlayerItem can be played at rates greater than 1.0
Technical Note TN2288 Example Playlist Files for use with HTTP Live Streaming プレイリストの内容

2016-08-16

フレーム間予測

動画技術

概要

フレームの間の画像を予測し生成する。
動き補償とともに画像圧縮に用いる。

符号化の概要

符号化の可逆/不可逆

可逆符号化
不可逆符号化

符号化方式

予測符号化　フレーム内予測、フレーム間予測　★ここ
変換符号化　離散フーリエ変換、ウェーブレット変換
ベクトル量子化　
エントロピー符号化　ハフマン符号化、算術符号化

符号化の参考サイト

画像符号化

Iフレーム、Pフレーム、Bフレーム

フレーム間予測を用いて圧縮した際、そのなかでも

Iフレーム　フレーム間予測を使わないフレーム(キーフレーム)　ランダムアクセス等に使用
Pフレーム　前方予測のみ使うフレーム
Bフレーム　前方予測、後方予測、または両方を使うフレーム

フレームの間予測の参考サイト

Video compression - ビデオ圧縮 | Axis Communications

2016-08-16

フレームレート

動画技術

単位時間あたりの静止画像数(フレーム数)。1秒あたりをfpsと呼ぶ。

どの程度

8fps 一般のTVアニメ
15fps以下　カクカクする
24fps 映画
30fps 一般の動画、テレビ
60fps なめらかな映像が再現できる

補足

通信路容量の計算

2016-08-09

HLSのメモ

動画動画技術

基本的な事項の復習

HTTP Live Streamingの略
Appleの開発した動画ストリーミングのプロトコル
HTTPプロトコルを利用する

MPEG-2 TS

映像・音声データ
MPEG-2 TSを10秒単位で細切れにし、エンコードする。エンコードはビットレートに応じて幾つか作る。
m3u8形式(プレイリスト、インデックスファイル)でこの細切れのファイルをどうつなげて再生するか指定する。

m3u8形式

m3u形式

パスないしURLの羅列、#はコメント

EXTM3U

拡張版

#EXTM3Uヘッダをファイル先頭につける。
#EXTINF 秒単位で長さ、タイトル等の拡張情報つける

例は以下を参照
M3U - Wikipedia

m3u8形式はm3u形式の拡張

例

   #EXT-X-VERSION:3
   #EXTM3U
   #EXT-X-TARGETDURATION:10

   #EXTINF:9.010,
   http://media.hoge.com/a.ts
   #EXTINF:9.001,
   http://media.hoge.com/b.ts
   #EXTINF:2.001,
   http://media.hoge.com/c.ts

これはVERSIONが3のプロトコルを満たす必要があることを意味する。EXTINFに浮動小数点数値でdurationを設定する。
各プロトコルで必須なものは以下に記載がある。
Understanding the EXT-X-VERSION tag
developer.apple.com

詳しくは HTTP Live Streaming draft-pantos-http-live-streaming-19
draft-pantos-http-live-streaming-19 - HTTP Live Streaming

iOS Devの資料

HTTP Live Streaming (HLS) - Apple Developer
https://developer.apple.com/jp/documentation/StreamingMediaGuide.pdf

配信

httpなので通常のwebサーバでOK

クライアントの動き

1. まずインデックスファイルを取得する。
2. インデックスファイルで指定されたファイルをダウンロード
3. ある程度たまったらユーザに表示
4. #EXT-X-ENDLISTタグがある場合、終了、ない場合はは1に戻って新しいインデックファイルを取得

ツール

mediastreamsegmenter

MPEG-2 tsを分割する。インデックスファイルも作ってくれるコマンドラインツール。
man mediastreamsegmenter参照

mediafilesegmenter

エンコードされたメディアファイルを入力としてMPEG-2 tsにして分割。インデックスファイルも作ってくれる。

mediastreamvalidator

HLSと連動できるか検証するコマンド

variantplaylistcreator

mediafilesegmenter(-generate-variant-playlist付与)の出力から各種のビットレートのストリームを含むインデックスファイル作成

id3taggenerator

ID3メタデータタグ生成
アルバムのジャケット画像、アーティスト名、曲名、画像内の対象の名前と統計情報等も付与できる。
AVPlayerItem.timedMetaDataでアクセスできる。詳しくは「Timed
Metadata for HTTP Live Streaming」

mediastreamsegmenter(mediafilesegmenter)の-Fオプションでこのメタデータタグを追加できる。

セッションタイプ

VODとライブの二種類あり。

VOD

インデックスファイルが静的でその内容が全時間を表す。

ライブ

インデックスファイルは更新される。

暗号化

復号キーをインデクスファイルに付与しておく。

参考スライド

http://www.slideshare.net/aurot/http-live-streaming-10069443

2016-08-06

pip基本操作をメモ

python

pip -V pipのバージョン
pip list　インストールしている#パッケージ一覧
pip -U パッケージ　#インストールしているパッケージのアップデート
pip install パッケージ　#パッケージのインストール
pip uninstall パッケージ #パッケージのアンインストール
pip search パッケージ #パッケージの検索

パッケージ検索は
PyPI - the Python Package Index : Python Package Index

2016-07-04

Abstract Factory

デザインパターン

擬似コード

abstract class AbstFactory {
 Product createProduct()
}

abstract class Product {
}

class FactoryA extends AbstFactory

class ProductA extends Product

IFで済む気がする。

二つのプロトコル準拠

Switch文で特定の型に対して

NSURLSessionを使う。

dataTaskWithRequest:completionHandler:ないしdataTaskWithURL:completionHandler:を呼ぶ

もう少し制御が必要な場合はNSURLSessionでデリゲートを実装する。

ディスクにダウンロードするならNSURLSession

POST要求

認証

認証書オブジェクト作成

ネットワークは信頼性が低いから以下に注意。

現実

対策

なるべくまとめる。

ネットワークの状況変化への備え

通信速度の判断

遅延

テスト

設定

Profile

100%LOSS

3G

Edge

High Latency DNS

Very Bad NetWork

Modelからデータを取り出す

辞書でシンボルの利用

rake

scaffold

設定

フォルダ構成

静的なページ

RubyGem

レイアウト作成

Asset Pipe, Sass

ユーザモデル

ユーザ登録画面

サインイン、アウト

ユーザ更新

マイクロポスト

ユーザフォロー

タイムライン

モデルをつくる

多対多

sample code

document

概要

符号化の概要

符号化の可逆/不可逆

符号化方式

符号化の参考サイト

Iフレーム、Pフレーム、Bフレーム

フレームの間予測の参考サイト

どの程度

補足

MPEG-2 TS

m3u8形式

m3u形式

EXTM3U

m3u8形式はm3u形式の拡張

iOS Devの資料

配信

クライアントの動き

ツール

mediastreamsegmenter

mediafilesegmenter

mediastreamvalidator

variantplaylistcreator

id3taggenerator

セッションタイプ

VOD

ライブ

暗号化

参考スライド