پس از طرح الگوريتم و ساختار FAM در مجامع بين المللي و كنفرانس هاي علمي در سال 1992 ميلادي، پيشرفت و نوآوري در زمينه بهينه سازي الگوريتم و پيكربندي اين شبكه ها و واريته هاي آن به شكل روزافزوني گسترش يافت. اين پيشرفت ها را مي توان به دو دسته كلي تقسيم بندي نمود: يكي بهينه سازي ساختار و الگوريتم ابتدايي FAM و ديگري معرفي و بهبود الگوريتمهاي جديد بر پايه FAM. اين تقسيم بندي در واقع كمك مي كند تا بين موارد ذيل تميز ايجاد شود.
- متدهاي نوين آموزش و بهينه سازي FAM
- اصلاح و ساده سازي FAM
- بهينه سازيهايي كه در آنها تغييرات ايجاد شده، اساساً باعث تغيير ساختار كلي FAM نشده اند، از يك سو و از سوي ديگر تغييراتي كه بر پايه رويكردهاي نوين بنا شده اند.
با اين وجود، باز هم نمي توان در برخي موارد دقيقاً مرز بين اين دو حيطه را مشخص كرد.