VGGNet

["VGGNet\u306f\u3001\u30aa\u30c3\u30af\u30b9\u30d5\u30a9\u30fc\u30c9\u5927\u5b66\u306eVisual Geometry Group\uff08VGG\uff09\u306b\u3088\u3063\u3066\u958b\u767a\u3055\u308c\u305f\u7573\u307f\u8fbc\u307f\u30cb\u30e5\u30fc\u30e9\u30eb\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\uff08CNN\uff09\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306e\u30d5\u30a1\u30df\u30ea\u30fc\u3092\u6307\u3059\u3002\u3053\u308c\u3089\u306e\u30e2\u30c7\u30eb\u306f\u3001\u305d\u306e\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306e\u5358\u7d14\u3055\u3067\u77e5\u3089\u308c\u3001\u5c0f\u3055\u306a3x3\u7573\u307f\u8fbc\u307f\u30d5\u30a3\u30eb\u30bf\u306e\u4e00\u69d8\u306a\u30b9\u30bf\u30c3\u30af\u306b\u4f9d\u5b58\u3057\u3066\u304a\u308a\u3001CNN\u8a2d\u8a08\u3092\u3088\u308a\u6df1\u3044\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u3078\u3068\u30b7\u30d5\u30c8\u3055\u305b\u308b\u4e0a\u3067\u91cd\u8981\u306a\u5f79\u5272\u3092\u679c\u305f\u3057\u305f\u3002\u3053\u306e\u30d5\u30a1\u30df\u30ea\u30fc\u306e\u6700\u3082\u4e00\u822c\u7684\u306a\u5909\u7a2e\u3067\u3042\u308bVGG-16\u3068VGG-19\u306f\u30012014\u5e74\u306eImageNet Large Scale Visual Recognition Challenge\uff08ILSVRC\uff09\u3067\u6700\u5148\u7aef\u306e\u6027\u80fd\u3092\u9054\u6210\u3057\u3001\u3053\u306e\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306f\u6570\u5e74\u306b\u308f\u305f\u308a\u30b3\u30f3\u30d4\u30e5\u30fc\u30bf\u30d3\u30b8\u30e7\u30f3\u30bf\u30b9\u30af\u5168\u4f53\u3067\u5e83\u304f\u63a1\u7528\u3055\u308c\u305f\u3002\n\n\u5b66\u8853\u7814\u7a76\u306e\u7523\u7269\u3068\u3057\u3066\u3001VGGNet\u306f\u30aa\u30fc\u30d7\u30f3\u3067\u975e\u5546\u7528\u306e\u30e2\u30c7\u30eb\u3067\u3042\u308a\u3001\u305d\u306e\u8a2d\u8a08\u306f\u5b66\u754c\u3068\u7523\u696d\u754c\u306e\u4e21\u65b9\u3067\u5e83\u304f\u8907\u88fd\u30fb\u9069\u5fdc\u3055\u308c\u3066\u304d\u305f\u3002\u3053\u306e\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306f\u3001ResNet\u3084DenseNet\u30d5\u30a1\u30df\u30ea\u30fc\u306a\u3069\u306e\u5f8c\u306e\u767a\u5c55\u306b\u3068\u3063\u3066\u91cd\u8981\u306a\u53c2\u7167\u70b9\u3092\u5f62\u6210\u3057\u3001\u305d\u306e\u539f\u7406\u306f2021\u5e74\u306bRepVGG\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u3067\u518d\u691c\u8a0e\u3055\u308c\u305f\u3002\n\n## \u958b\u767a\u3068\u6b74\u53f2\u7684\u80cc\u666f\n\nVGGNet\u30b7\u30ea\u30fc\u30ba\u306f\u3001\u30aa\u30c3\u30af\u30b9\u30d5\u30a9\u30fc\u30c9\u5927\u5b66\u306eVisual Geometry Group\u306b\u3088\u3063\u3066\u8a2d\u8a08\u3055\u308c\u3001Karen Simonyan\u3068Andrew Zisserman\u304c\u4e3b\u5c0e\u3057\u305f\u3002\u3053\u308c\u3089\u306e\u30e2\u30c7\u30eb\u306f\u30012014\u5e74\u306b\u767a\u8868\u3055\u308c\u305f\u300cVery Deep Convolutional Networks for Large-Scale Image Recognition\u300d\u3068\u3044\u3046\u8ad6\u6587\u3067\u7d39\u4ecb\u3055\u308c\u305f\u3002\u3053\u306e\u7814\u7a76\u306f\u3001\u3088\u308a\u5927\u304d\u304f\u591a\u69d8\u306a\u30d5\u30a3\u30eb\u30bf\u30b5\u30a4\u30ba\u3067\u300c\u30bc\u30ed\u304b\u3089\u300d\u8a2d\u8a08\u3055\u308c\u305f\u521d\u671f\u306eAlexNet\uff082012\uff09\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u3068\u306f\u5bfe\u7167\u7684\u306b\u3001\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u306e\u6df1\u3055\u3092\u5897\u3084\u3059\u3053\u3068\u304c\u7cbe\u5ea6\u306b\u3069\u306e\u3088\u3046\u306b\u5f71\u97ff\u3059\u308b\u304b\u3092\u4f53\u7cfb\u7684\u306b\u8a55\u4fa1\u3059\u308b\u3053\u3068\u3092\u76ee\u7684\u3068\u3057\u305f\u3002\n\nVGGNet\u306e\u30a2\u30d7\u30ed\u30fc\u30c1\u306f\u3001\u6c4e\u7528\u7684\u3067\u53cd\u5fa9\u7684\u306a\u30e2\u30b8\u30e5\u30fc\u30eb\u3092\u69cb\u6210\u3059\u308b\u3053\u3068\u3060\u3063\u305f\u3002\u3059\u306a\u308f\u3061\u3001ReLU\u6d3b\u6027\u5316\u3092\u4f34\u30463x3\u7573\u307f\u8fbc\u307f\u30012x2\u306e\u6700\u5927\u30d7\u30fc\u30ea\u30f3\u30b0\u5c64\u3092\u9593\u306b\u631f\u307f\u3001\u305d\u306e\u5f8c\u306b\u5168\u7d50\u5408\u5c64\u3068\u30bd\u30d5\u30c8\u30de\u30c3\u30af\u30b9\u5c64\u3092\u7d9a\u3051\u308b\u3068\u3044\u3046\u3082\u306e\u3067\u3042\u308b\u3002\u3053\u306e\u30e2\u30b8\u30e5\u30fc\u30eb\u8a2d\u8a08\u306b\u3088\u308a\u3001\u6df1\u3044\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u306e\u69cb\u7bc9\u3068\u89e3\u6790\u304c\u7c21\u7d20\u5316\u3055\u308c\u3001\u8ad6\u6587\u306e\u5b9f\u8a3c\u7d50\u679c\u306f\u3001\u5c0f\u3055\u306a\u30d5\u30a3\u30eb\u30bf\u3092\u6301\u3064\u6df1\u3044\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u304c\u3001\u6d45\u304f\u3066\u5e83\u3044\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u3088\u308a\u3082\u512a\u308c\u3066\u3044\u308b\u3053\u3068\u3092\u793a\u3057\u305f\u3002\n\n## \u4e3b\u8981\u306a\u8a2d\u8a08\u7279\u5fb4\n\nVGGNet\u306e\u6838\u3068\u306a\u308b\u8a2d\u8a08\u539f\u7406\u306f\u3001\u30b9\u30c8\u30e9\u30a4\u30c91\u306e\u5c0f\u3055\u306a3x3\u7573\u307f\u8fbc\u307f\u30d5\u30a3\u30eb\u30bf\u3092\u4e00\u8cab\u3057\u3066\u4f7f\u7528\u3059\u308b\u3053\u3068\u3067\u3042\u308b\u3002\u3053\u306e\u3088\u3046\u306a\u7573\u307f\u8fbc\u307f\u30922\u3064\u91cd\u306d\u308b\u3068\u3001\u5358\u4e00\u306e5x5\u30d5\u30a3\u30eb\u30bf\u3068\u540c\u3058\u53d7\u5bb9\u91ce\u304c\u5f97\u3089\u308c\u308b\u4e00\u65b9\u3001\u4f7f\u7528\u3059\u308b\u30d1\u30e9\u30e1\u30fc\u30bf\u306f\u5c11\u306a\u304f\u306a\u308b\u30022\u3064\u306e3x3\u5c64\u306f18\u00b7c\u00b2\u30d1\u30e9\u30e1\u30fc\u30bf\u3092\u4f7f\u7528\u3059\u308b\u306e\u306b\u5bfe\u3057\u30011\u3064\u306e5x5\u5c64\u306f25\u00b7c\u00b2\u30d1\u30e9\u30e1\u30fc\u30bf\u3092\u4f7f\u7528\u3059\u308b\uff08c\u306f\u30c1\u30e3\u30cd\u30eb\u6570\uff09\u3002\u3053\u306e\u30d1\u30e9\u30e1\u30fc\u30bf\u524a\u6e1b\u306b\u3088\u308a\u3001\u8a08\u7b97\u91cf\u3084\u904e\u5b66\u7fd2\u306e\u5897\u52a0\u3092\u6bd4\u4f8b\u3055\u305b\u308b\u3053\u3068\u306a\u304f\u3001\u3088\u308a\u591a\u304f\u306e\u5c64\u3092\u8ffd\u52a0\u3067\u304d\u308b\u3002\n\n\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u306f\u898f\u5247\u7684\u306a\u69cb\u9020\u306b\u5f93\u3044\u3001\u5165\u529b\u753b\u50cf\uff08\u901a\u5e38\u306f224x224\u30d4\u30af\u30bb\u30eb\u306a\u3069\u306e\u56fa\u5b9a\u30b5\u30a4\u30ba\uff09\u304c\u4e00\u9023\u306e\u7573\u307f\u8fbc\u307f\u30b9\u30c6\u30fc\u30b8\u3092\u901a\u904e\u3059\u308b\u3002\u5404\u30b9\u30c6\u30fc\u30b8\u306f\u30011\u3064\u4ee5\u4e0a\u306e3x3\u7573\u307f\u8fbc\u307f\u3068\u3001\u305d\u308c\u306b\u7d9a\u304f\u30b9\u30c8\u30e9\u30a4\u30c92\u306e2x2\u6700\u5927\u30d7\u30fc\u30ea\u30f3\u30b0\u5c64\u3067\u69cb\u6210\u3055\u308c\u3001\u7a7a\u9593\u6b21\u5143\u3092\u534a\u5206\u306b\u3059\u308b\u3002\u30c1\u30e3\u30cd\u30eb\u6570\u306f\u6df1\u3055\u3068\u3068\u3082\u306b\u7dda\u5f62\u30d1\u30bf\u30fc\u30f3\u3067\u5897\u52a0\u3059\u308b\u300264\u304b\u3089\u59cb\u307e\u308a\u3001128\u3001256\u3001512\u3068\u500d\u5897\u3057\u3001\u6700\u7d42\u30b9\u30c6\u30fc\u30b8\u3067\u306f512\u30c1\u30e3\u30cd\u30eb\u3092\u4f7f\u7528\u3059\u308b\u3002\u4f8b\u3048\u3070\u3001VGG-19\u69cb\u6210\uff08\u5143\u306e\u8ad6\u6587\u3067\u306fE\u3068\u8868\u8a18\uff09\u306f\u300116\u306e\u7573\u307f\u8fbc\u307f\u5c64\u30683\u3064\u306e\u5168\u7d50\u5408\u5c64\uff08\u5408\u8a0819\u306e\u91cd\u307f\u5c64\uff09\u3092\u542b\u307f\u30011\u51044400\u4e07\u306e\u30d1\u30e9\u30e1\u30fc\u30bf\u3092\u6301\u3064\u3002\n\n## \u5909\u7a2e\u3068\u30d1\u30e9\u30e1\u30fc\u30bf\n\nVGG\u8ad6\u6587\u3067\u306f\u3001A\u304b\u3089E\u307e\u3067\u306e\u30e9\u30d9\u30eb\u304c\u4ed8\u3044\u305f\u3044\u304f\u3064\u304b\u306e\u69cb\u6210\u304c\u5c0e\u5165\u3055\u308c\u3001\u6df1\u3055\u304c\u7570\u306a\u308b\u3002\u6700\u3082\u4e00\u822c\u7684\u306a2\u3064\u306f\u3001VGG-16\uff08\u69cb\u6210D\u300113\u306e\u7573\u307f\u8fbc\u307f\u5c64\u30683\u3064\u306e\u5168\u7d50\u5408\u5c64\uff09\u3068VGG-19\uff08\u69cb\u6210E\u300116\u306e\u7573\u307f\u8fbc\u307f\u5c64\u30683\u3064\u306e\u5168\u7d50\u5408\u5c64\uff09\u3067\u3042\u308b\u3002\u3053\u308c\u3089\u306e\u30e2\u30c7\u30eb\u306f\u3001\u305d\u308c\u305e\u308c1\u51043800\u4e07\u30681\u51044400\u4e07\u306e\u30d1\u30e9\u30e1\u30fc\u30bf\u3092\u6301\u3064\u3002\u5168\u7d50\u5408\u5c64\u306e\u30b5\u30a4\u30ba\u306f4096\u30684096\u3067\u3001\u6700\u5f8c\u306e\u5c64\u306f1000\u306eImageNet\u30af\u30e9\u30b9\u306b\u5bfe\u5fdc\u3059\u308b1000\u30e6\u30cb\u30c3\u30c8\u3092\u6301\u3064\u3002\n\n\u3053\u306e\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306f\u5206\u985e\u7528\u306b\u8a2d\u8a08\u3055\u308c\u305f\u304c\u3001\u305d\u306e\u6c4e\u7528\u7684\u306a\u30e2\u30b8\u30e5\u30fc\u30eb\u6027\u306b\u3088\u308a\u3001\u7269\u4f53\u691c\u51fa\u306a\u3069\u306e\u4ed6\u306e\u30bf\u30b9\u30af\u306b\u3082\u9069\u5fdc\u3067\u304d\u3001Fast R-CNN\u30d5\u30ec\u30fc\u30e0\u30ef\u30fc\u30af\u306e\u30d9\u30fc\u30b9\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u3068\u3057\u3066\u6a5f\u80fd\u3057\u3001\u30cb\u30e5\u30fc\u30e9\u30eb\u30b9\u30bf\u30a4\u30eb\u8ee2\u9001\u3067\u306f\u7279\u5fb4\u62bd\u51fa\u5668\u3068\u3057\u3066\u4f7f\u7528\u3055\u308c\u305f\u3002\n\n## \u5f71\u97ff\u3068\u907a\u7523\n\nVGGNet\u306f\u3001\u6df1\u5c64\u5b66\u7fd2\u7814\u7a76\u306b\u304a\u3051\u308b\u91cd\u8981\u306a\u30de\u30a4\u30eb\u30b9\u30c8\u30fc\u30f3\u3067\u3042\u3063\u305f\u3002\u305d\u306e\u5358\u7d14\u3067\u30e2\u30b8\u30e5\u30fc\u30eb\u7684\u306a\u8a2d\u8a08\u306b\u3088\u308a\u3001\u6bd4\u8f03\u306e\u305f\u3081\u306e\u7c21\u5358\u306a\u30d9\u30fc\u30b9\u30e9\u30a4\u30f3\u3068\u306a\u308a\u3001ResNet\u8ad6\u6587\u3084\u4ed6\u306e\u591a\u304f\u306e\u7814\u7a76\u3067\u53c2\u7167\u3068\u3057\u3066\u4f7f\u7528\u3055\u308c\u305f\u3002\u6a19\u6e96\u7684\u306a\u7573\u307f\u8fbc\u307f\u30ab\u30fc\u30cd\u30eb\u30b5\u30a4\u30ba\u3092\u5927\u304d\u306a\u3082\u306e\uff08AlexNet\u306e11x11\u30ab\u30fc\u30cd\u30eb\u306a\u3069\uff09\u304b\u30893x3\u306b\u5909\u66f4\u3059\u308b\u3068\u3044\u3046\u8ca2\u732e\u306f\u30012022\u5e74\u306eConvNext\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u3067\u3088\u3046\u3084\u304f\u6539\u8a02\u3055\u308c\u305f\u3002\n\n\u3053\u306e\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306f\u3001Inception\u3001ResNet\u3001DenseNet\u306e\u5c0e\u5165\u5f8c\u3001\u3088\u308a\u826f\u3044\u6027\u80fd\u3084\u52b9\u7387\u3092\u63d0\u4f9b\u3059\u308b\u3053\u308c\u3089\u306b\u3088\u3063\u3066\u6642\u4ee3\u9045\u308c\u3068\u306a\u3063\u305f\u3002\u3057\u304b\u3057\u3001\u305d\u306e\u5358\u7d14\u3055\u306f\u6559\u80b2\u30c4\u30fc\u30eb\u3084\u30d9\u30fc\u30b9\u30e9\u30a4\u30f3\u3068\u3057\u3066\u5b58\u7d9a\u3057\u305f\u30022021\u5e74\u306b\u5c0e\u5165\u3055\u308c\u305fRepVGG\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306f\u3001\u63a8\u8ad6\u901f\u5ea6\u3092\u5411\u4e0a\u3055\u305b\u308b\u305f\u3081\u306e\u518d\u30d1\u30e9\u30e1\u30fc\u30bf\u5316\u30d6\u30ed\u30c3\u30af\u3092\u5099\u3048\u305f\u5358\u7d14\u306aVGG\u30b9\u30bf\u30a4\u30eb\u8a2d\u8a08\u3092\u518d\u691c\u8a0e\u3057\u305f\u66f4\u65b0\u7248\u3067\u3042\u308b\u3002\n\nVGGNet\u306f\u307e\u305f\u3001\u30b3\u30f3\u30d4\u30e5\u30fc\u30bf\u30d3\u30b8\u30e7\u30f3\u3068\u753b\u50cf\u8a8d\u8b58\u306e\u6587\u8108\u3067\u6b74\u53f2\u7684\u306b\u91cd\u8981\u3067\u3042\u308a\u3001\u7573\u307f\u8fbc\u307f\u30cd\u30c3\u30c8\u30ef\u30fc\u30af\u306b\u304a\u3051\u308b\u6df1\u3055\u306e\u4fa1\u5024\u3092\u5b9f\u8a3c\u3057\u3001\u5b66\u754c\u3068\u5546\u696d\u90e8\u9580\u306e\u4e21\u65b9\u304b\u3089\u4e16\u4ee3\u3092\u8d85\u3048\u305f\u8a2d\u8a08\u306b\u5f71\u97ff\u3092\u4e0e\u3048\u305f\u3002\u30aa\u30c3\u30af\u30b9\u30d5\u30a9\u30fc\u30c9\u5927\u5b66\u3067\u306e\u958b\u767a\u3068\u3001\u6a19\u6e96\u7684\u306a\u6df1\u5c64\u5b66\u7fd2\u30e9\u30a4\u30d6\u30e9\u30ea\uff08\u4f8b\u3048\u3070\u3001\u4e8b\u524d\u5b66\u7fd2\u6e08\u307f\u30e2\u30c7\u30eb\u3092\u901a\u3058\u3066\uff09\u3078\u306e\u7d44\u307f\u8fbc\u307f\u306b\u3088\u308a\u3001\u5e83\u304f\u30a2\u30af\u30bb\u30b9\u53ef\u80fd\u3068\u306a\u3063\u305f\u3002VGGNet\u306e\u6210\u529f\u306f\u3001\u753b\u50cf\u51e6\u7406\u306b\u304a\u3051\u308b\u6df1\u5c64\u5b66\u7fd2\u306e\u53f0\u982d\u306b\u8ca2\u732e\u3057\u3001\u4eba\u5de5\u77e5\u80fd\u3084\u6a5f\u68b0\u5b66\u7fd2\u3068\u3044\u3063\u305f\u7528\u8a9e\u3068\u306e\u6574\u5408\u6027\u3092\u3082\u305f\u3089\u3057\u305f\u3002\n\nVGGNet\u30b7\u30ea\u30fc\u30ba\u306f\u3001\u6280\u8853\u6587\u732e\u3067\u6700\u3082\u5e83\u304f\u53c2\u7167\u3055\u308c\u308b\u30a2\u30fc\u30ad\u30c6\u30af\u30c1\u30e3\u306e1\u3064\u3067\u3042\u308a\u7d9a\u3051\u3001\u305d\u306e\u5f8c\u306e\u591a\u304f\u306e\u30e2\u30c7\u30eb\u306e\u30c6\u30f3\u30d7\u30ec\u30fc\u30c8\u3092\u63d0\u4f9b\u3057\u3001\u3055\u307e\u3056\u307e\u306a\u7814\u7a76\u3067\u5171\u901a\u306e\u8a55\u4fa1\u30d9\u30f3\u30c1\u30de\u30fc\u30af\u3068\u3057\u3066\u6a5f\u80fd\u3057\u3066\u3044\u308b\u3002", true]