Både konvolutionella och återkommande operationer är byggstenar som bearbetar ett område i taget. I detta dokument presenterar vi icke-lokal verksamhet som en generisk familj av byggstenar för att fånga långdistansberoenden. Inspirerad av den klassiska icke-lokala metoden [4] i datorseende, beräknar vår icke-lokala operation svaret på en position som en viktad summa av funktioner på alla positioner. Detta byggnadsblock kan anslutas till många datorseende arkitekturer. När det gäller videoklassificering, även utan klockor och visselpipor, kan våra icke-lokala modeller konkurrera eller överträffa nuvarande tävlingsvinnare på både Kinetics och Charades datauppsättningar. I statisk bildigenkänning förbättrar våra icke-lokala modeller objektdetektering/segmentering och ger en uppskattning i COCO-sviten av uppgifter. Kod kommer att göras tillgänglig.
Ett relaterat arbete för icke-lokal funktionsberäkning föreslås av Wang et al. REF, där svaret på en position är den viktade summan av funktioner på alla platser.
Non-local Neural Networks
{'venue': '2018 IEEE/CVF Conference on Computer Vision and Pattern Recognition', 'journal': '2018 IEEE/CVF Conference on Computer Vision and Pattern Recognition', 'mag_field_of_study': ['Computer Science']}