目的
有名所のDNN特許を調べてみました。ほとんどがGoogleの特許ですがBatchNorm、transformer以外日本で登録されていないのが多いですね。 調べたところで力尽きてちゃんとクレームはトップ以外読んでません。随時リストはアップデートしていきます。
参考: https://www.reddit.com/r/MachineLearning/comments/c5mdm5/d_googles_patent_on_dropout_just_went_active_today/www.reddit.com
感想
Dropout,Batchnorm,transformerなど根幹特許を多くGoogleに抑えられていますが、基本的にはPatent Trollに対しての防衛でGoogleから権利行使することはないようです。(訴訟は今の所ない)
Tips
特許の状態は大きく分けて3つあります。
出願
:特許庁に特許を提出した段階です。この段階では特許内容を他社が読むことは出来ません。
公開
: 2年立つと特許は公開されます。この段階では特許内容を他社が読むことは出来ますが、まだ法的に特許は有効ではありません。
登録
: 審査官が許可を出すと特許は登録
され、特許として効力を持ちます。
ちなみに論文と同じで特許は審査官に拒絶されることもあり、最大2度ほど修正の機会が与えられます。
画像認識
Inception方式のDNN
patents.google.com クレーム:インセプション方式のDNN
Assignee:Google
Status:登録
日本:なし
Faster-RCNN
クレーム: 2-stageの物体検出器(Fast-RCNN方式)
Assignee:Microsoft
Status:登録
日本:なし
学習系
hirotaka-hachiya.hatenablog.com
Dropout
patents.google.com クレーム:Dropout正則化を用いて学習されたモデル
Assignee:Google
Status:登録
日本:なし
Batchnorm
トップクレーム範囲:BatchNormを用いて学習されたモデル
Assignee:Google
Status:登録
日本:あり
登録国がこの特許だけ異様に多いことからGの本気度が伺えます。
学習並列化
patents.google.com クレーム:並列化を用いて学習されたDNNモデル
Assignee:Google
Status:登録
日本:なし
蒸留
patents.google.com Assignee:Google
Status:登録
日本:なし
Neural Architecture Search (NAS)
Assignee:Google
Status:登録
日本:なし
NLP
Transformer
Transformer も日本含め公開されてると思われますね。。。(つまりViT系は…)https://t.co/0AcakhQPE0
— ふぁむたろう (@fam_taro) 2021年1月25日
Assignee:Google
Status:US 登録
日本:あり
この特許も当たり前ですが出願国が多く、本気ですね。
word2vec
patents.google.com Assignee:Google
Status:登録
日本:なし
GAN
Spectral Normalization
patents.google.com Assignee:PFN
Status:公開
日本:あり