title: Sonderbericht Nr. 15/98 über die Bewertung der Strukturfonds-Interventionen in den Zeiträumen 1989-1993 und 1994-1999, zusammen mit den Antworten der Kommission (Vorgelegt gemäß Artikel 188c Absatz 4 Unterabsatz 2 des EG-Vertrags)

eurovoc_concepts:
Community support framework
Structural Funds
impact study
management
operational programme
project evaluation

text: 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/1 I (Mitteilungen) RECHNUNGSHOF SONDERBERICHT Nr. 15/98 über die Bewertung der Strukturfonds-Interventionen in den Zeiträumen 1989-1993 und 1994-1999, zusammen mit den Antworten der Kommission (Vorgelegt gemäß Artikel 188c Absatz 4 Unterabsatz 2 des EG-Vertrags) (98/C 347/01) INHALT Ziffer Seite 1. EINLEITUNG. 1. 1 — 1. 4 2. PRÜFUNGSUMFANG. 2. 1 — 2. 3 3. WICHTIGSTE BEMERKUNGEN. 3. 1 — 3. 12 4. ALLGEMEINE PROBLEME. 4. 1 — 4. 36 Einleitung. 4. 1 — 4. 11 Bezugsrahmen. 4. 12 — 4. 13 Statistische Datenbanken und Angaben zu den verfolgten Zielen. 4. 14 — 4. 15 Indikatoren. 4. 16 — 4. 21 Berücksichtigung der Bewertung. 4. 22 — 4. 27 Objektivität der Bewertungen. 4. 28 — 4. 30 Von der Kommission vergebene Bewertungsaufträge. 4. 31 — 4. 36 5. EX-POST-BEWERTUNGEN DER UNTER DIE ZIELE 1 UND 2 FALLEN- DEN GFK (1989-1993). 5. 1 — 5. 17 Einleitung. 5. 1 Ex-post-Bewertung der Ziel-1-GFK (1989-1993). 5. 2 — 5. 8 Ex-post-Bewertungen zu Ziel 2 (1989-1993). 5. 9 — 5. 17 3 3 4 5 5 6 7 7 8 8 9 9 9 10 11 C 347/2 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Ziffer Seite 6. ZWISCHENBEWERTUNGEN (1994-1999). 6. 1 — 6. 27 Entwicklung und Einbindung der Zwischenbewertungsgrundsätze. 6. 1 — 6. 7 Durchführungsverfahren. 6. 8 — 6. 13 Priorität der einzelnen Bewertungsziele. 6. 14 — 6. 20 Ansätze, Methoden und Techniken. 6. 21 — 6. 26 Durchführung der Ziel-2-Programme (1994-1996). 6. 27 7. AUSWIRKUNGEN DER STRUKTURFONDS UND BEWERTUNGS- MODELLE. 7. 1 — 7. 22 Auswirkungen auf der Ebene der GFK und Programme. 7. 1 — 7. 15 Ergebnisse der Modelle im Hinblick auf die Auswirkungen der Struktur- fonds. 7. 1 — 7. 13 BIP-Wachstum. 7. 2 — 7. 3 Am Pro-Kopf-BIP gemessene tatsächliche Konvergenz. 7. 4 — 7. 8 Beschäftigung und Arbeitslosigkeit. Wirksamkeit der GFK-Instrumente. 7. 9 7. 10 Verpflichtung zur Zusätzlichkeit und Kofinanzierung. 7. 11 — 7. 12 Dauerhafte Entwicklung. 7. 13 Rolle der makroökonomischen Bewertung im Strukturfonds-Entschei- dungsprozeß. 7. 14 — 7. 15 Auswirkungen auf der Ebene der Unterprogramme, Maßnahmen und Vorhaben. 7. 16 — 7. 22 8. SCHLUSSFOLGERUNG. 8. 1 — 8. 19 TABELLEN. ANHÄNGE. Antworten der Kommission. 13 13 14 15 15 16 17 17 17 17 17 18 18 18 18 19 19 20 22 31 40 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/3 1. EINLEITUNG 1. 1. Bei der Reform der Strukturfonds (SF) von 1988 wurden die Kommission und die Mitgliedstaaten zur Bewertung der europäischen strukturpolitischen Maßnah- men verpflichtet. Mit den 1993 im Rahmen der Überar- beitung der Strukturfondsreform geänderten Rechtsvor- schriften (1994-1999) sowie mit den Standardklauseln der neuen gemeinschaftlichen Förderkonzepte (GFK) und der einzigen Programmplanungsdokumente (PPD) wurde diese Verpflichtung zur Bewertung noch verstärkt. 1. 2. Bei der Bewertung, die für eine reibungslose Ver- waltung der SF unerläßlich ist, handelt es sich gemäß den wichtigsten Verordnungsbestimmungen (1) um eine Beur- teilung der Wirksamkeit unter drei Gesichtspunkten: a) Gesamtauswirkung der Strukturmaßnahmen auf die in Artikel 130a des Vertrages genannten Ziele; b) Gesamtauswirkung der in den GFK vorgesehenen Aktionen; c) spezifische Auswirkung der einzelnen operationellen Maßnahmen (Programme und andere Interventions- formen). 1. 3. Die Bewertung umfaßt hauptsächlich drei Phasen: a) Bei der Vorausbeurteilung (2) werden einerseits die zu lösenden sozioökonomischen Probleme und die zu erreichenden Ziele korrekt ermittelt, andererseits wird die für diese Aufgabe angesichts der vorhandenen Mittel anzuwendende Strategie festgelegt. b) Bei der Zwischenbewertung kann während der Durchführung eines Programms geprüft werden, ob die Ziele noch angemessen sind und der richtige Weg zur Erreichung der angestrebten Ergebnisse einge- schlagen wurde. c) Bei der nach Beendigung des Programms durchgeführ- ten Ex-post-Bewertung wird analysiert, ob die erziel- ten Ergebnisse und Wirkungen als positiv zu betrach- ten sind. Dabei ist zu beachten, daß die langfristigen Auswirkungen einer Strukturmaßnahme erst mehrere Jahre nach ihrem Abschluß erfaßt werden können. (1) Dies sind insbesondere a) Artikel 6 der Rahmenverordnung (Verordnung (EWG) Nr. 2052/88, geändert durch die Verordnung (EWG) Nr. 2081/93) über Aufgaben und Effizienz der Strukturfonds und über die Koordinierung ihrer Interventionen unter- einander; b) Artikel 26 der Koordinierungsverordnung für die Struk- turfonds (Verordnung (EWG) Nr. 4253/88, geändert durch die Verordnung (EWG) Nr. 2082/93). (2) Die Vorausbeurteilung wird manchmal auch als „Ex-ante- Bewertung“ bezeichnet. In diesem Bericht verwendet der Hof den Verordnungsterminus „Vorausbeurteilung“. 1. 4. In den Rechtsvorschriften in der geänderten Fassung von 1993 wird unterstrichen, daß die Bewertung sowohl den Mitgliedstaaten als auch der Kommission obliegt und in den Rahmen der Partnerschaft fällt (3). In diesem Zusammenhang ergriff die Kommission bei der Gestal- tung und allgemeinen Koordinierung der Bewertung die Initiative. Außerdem legt sie nach Artikel 16 der Verord- nung (EWG) Nr. 2052/88 alle drei Jahre einen Bewer- tungsbericht vor, in dem die bei der Verwirklichung des wirtschaftlichen und sozialen Zusammenhalts erzielten Fortschritte und die entsprechenden Beiträge insbesondere der Fonds und der nationalen Kofinanzierung festgehal- ten sind. 2. PRÜFUNGSUMFANG 2. 1. Allgemeines Ziel der Untersuchung des Hofes (4) war die Prüfung der im Bereich der Bewertung der Strukturmaßnahmen der Gemeinschaft auf der Ebene der Bewertungssysteme und -verfahren und auf methodischer Ebene erzielten Fortschritte. Die Prüfung bezog sich auf die Einzelheiten der sowohl seitens der Kommission als auch im Rahmen der Partnerschaft durchgeführten Bewertung der Strukturmaßnahmen. Außerdem wurden die rechtmäßige und ordnungsgemäße Verwendung der aus dem Haushaltsplan der Europäischen Gemeinschaften für die Bewertung bereitgestellten Mittel sowie die Quali- tät der Mittelbewirtschaftung untersucht. 2. 2. Ferner wurden die Techniken zur Bewertung der sozioökonomischen Auswirkungen der Strukturmaßnah- men beurteilt. Obwohl die Programme, die zu neuen wissenschaftlichen Ergebnissen führten, bei dieser Unter- suchung nicht direkt bewertet werden sollten, werden doch einige dieser von Fachleuten festgestellten Ergeb- nisse angeführt, um das Verhältnis zwischen den einge- setzten wirtschaftspolitischen Instrumenten und den erzielten Ergebnissen besser auszuleuchten. 2. 3. Spezifische Untersuchungen bezogen sich auf die Ex-post-Bewertungen der unter die Ziele 1 und 2 fallen- den GFK und operationellen Programme (OP) des Pro- grammplanungszeitraums 1989-1993 und auf die Zwi- schenbewertungen der GFK, PPD und OP des Programm- planungszeitraums 1994-1999. Es wurden sämtliche Ex- post-Bewertungen der unter Ziel 1 fallenden GFK des (3) Die Gemeinschaftsaktion stellt eine Ergänzung oder einen Beitrag zu den entsprechenden nationalen Aktionen dar. Sie kommt zustande durch eine als „Partnerschaft“ bezeichnete enge Konzertierung zwischen der Kommission, dem Mitglied- staat, den regionalen und lokalen Behörden, den sonstigen zuständigen Behörden, den Wirtschafts- und Sozialpartnern und den sonstigen zuständigen Einrichtungen. Die Partner- schaft gestaltet sich unter voller Wahrung der jeweiligen institutionellen, rechtlichen und finanziellen Befugnisse der Partner. (4) In seinen Jahresberichten insbesondere zu den Haushaltsjah- ren 1990 (Kapitel 7), 1993 (Kapitel 6, 7, 8 und 9) und 1994 (Kapitel 4) hat der Hof im Hinblick auf den Programmpla- nungszeitraum 1989-1993 bereits auf zahlreiche Mängel im Bereich der Bewertung hingewiesen. C 347/4 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Zeitraums 1989-1993 sowie rund 20 % der unter Ziel 2 fallenden Ex-post-Bewertungsberichte der GFK 1989- 1993 und 15 % der Zwischenbewertungsberichte der GFK 1994-1999 berücksichtigt, die nach ihrer geographi- schen Verteilung und der Art der Interventionen (GFK, PPD, OP) ausgewählt wurden. Im übrigen wurden 15 der 25 hauptsächlich makroökonomische Aspekte behandeln- den Bewertungsberichte analysiert. Die Untersuchung fand in der Kommission und in acht Mitgliedstaaten (Belgien, Frankreich, Griechenland, Irland, Italien, Nie- derlande, Portugal und Spanien) statt, wo die Bewerter und die Verantwortlichen in den zuständigen nationalen Behörden konsultiert wurden. 3. WICHTIGSTE BEMERKUNGEN 3. 1. Die Entwicklung und breitere Anwendung der Bewertung vollzogen sich auf Betreiben der Kommission hauptsächlich im Programmplanungszeitraum 1994-1999, und zwar insbesondere im Rahmen des EFRE. Seit diesem Programmplanungszeitraum 1994-1999 wird die Bewer- tung systematisch in den beiden ersten Phasen (Ex-ante- Phase und Zwischenphase) durchgeführt und wird auch am Ende des Zeitraums (in der Ex-post-Phase) zur Anwendung kommen (siehe Ziffern 4. 2-4. 8). 3. 2. Die Kommission kennt zwar die Höhe ihrer direk- ten Ausgaben für die Bewertung, ist jedoch nicht immer umfassend über die Ausgaben für die im Rahmen der Partnerschaft stattfindende Bewertung informiert (siehe Ziffern 4. 9-4. 11). 3. 3. Die Kommission hat einen wichtigen Beitrag zur Verbreitung der Bewertungskultur geleistet, obwohl sie in ihrem Programm „Methoden zur Bewertung der struktur- politischen Aktionen“ (MEANS) nicht genau genug fest- gelegt hat, welche Bewertungsindikatoren und -methoden anzuwenden sind. Angesichts der Komplexität der mit der Bewertung verbundenen methodischen Aspekte gibt es keine einheitliche Methodik, die sich in jeder spezifischen Situation anwenden ließe. Die Kommission sollte jedoch in der Lage sein, einen methodischen Rahmen vorzuge- ben, der bei der Durchführung von an spezifische Situa- tionen angepaßten Bewertungen eine angemessene Orien- tierungshilfe bildet (siehe Ziffern 4. 12-4. 13). 3. 4. Die Qualität der Indikatoren steht in engem Zusam- menhang mit der Zuverlässigkeit der bei der Begleitung der Interventionen ermittelten Angaben und der vorhan- denen statistischen Datenbanken. Letztere fallen unter die Zuständigkeit der Mitgliedstaaten und sind oft unzuläng- lich; die Mitgliedstaaten sollten für qualitative Verbesse- rungen sorgen (siehe Ziffern 4. 14-4. 21). 3. 5. Viele Bewertungen werden mit Verspätung abge- schlossen, so daß sich die Anpassungen der Programme entsprechend verzögern können. Im übrigen könnten die Bewertungsergebnisse zur Leistungsfähigkeit oder Wirk- samkeit der Interventionsformen bei den Entscheidungen über die Änderung der Programmplanung bessere Berück- sichtigung finden (siehe Ziffern 4. 22-4. 27). 3. 6. Was die Objektivität der Bewertungen angeht, wird die Stimmigkeit und Zuverlässigkeit der Indikatoren oder der ihnen zugrunde liegenden Systeme von der Kommis- sion nicht an Ort und Stelle kontrolliert (siehe Ziffern 4. 29-4. 30). 3. 7. Die Verfahren zur Vergabe von Berateraufträgen im Bereich der Bewertung weisen auf Kommissionsebene noch erhebliche Schwachstellen auf. Die Auswahl der Berater wird nicht immer klar begründet. Die Lastenhefte sind im Hinblick auf die methodische Vorgehensweise, die Indikatoren und die Zielvorgaben sehr allgemein gehalten. Dadurch ergeben sich Verzögerungen und Stö- rungen bei der Erstellung der Bewertungsberichte, eine uneinheitliche Analysequalität und bisweilen vage Emp- fehlungen (siehe Ziffern 4. 31-4. 36). 3. 8. Die Anwendung der für die Ex-post-Bewertungen der Ziele 1 und 2 1989-1993 vorgesehenen Methoden wurde durch lückenhafte Statistiken, fehlende quantifi- zierte Ziele und Vorhersageindikatoren und eine ineffi- ziente Begleitung der Auswirkungen beeinträchtigt und erfolgte nicht immer mit der nötigen Strenge. Diese Bewertungen zeigten jedoch dennoch sowohl im Hinblick auf Durchführung, Ergebnisse und Auswirkungen der GFK, OP und Maßnahmen als auch im Hinblick auf die Programmplanung, Organisation, Begleitung, Koordinie- rung, Partnerschaft und Zusätzlichkeit eine ergänzende und verstärkende Wirkung der Strukturmaßnahmen der Gemeinschaft (siehe Ziffern 4. 15-4. 19, 5. 1, 5. 4 und 5. 10- 5. 16). 3. 9. Bei den partnerschaftlich im Rahmen der Begleitaus- schüsse vorgenommenen Zwischenbewertungen der SF- Interventionen des Zeitraums 1994-1999 wird den ver- schiedenen Bewertungszielen unterschiedliche Priorität gegeben. Die Untersuchung des materiellen und finanziel- len Durchführungsstands nimmt jedoch bei allen Zwi- schenbewertungen einen wichtigen Platz ein. Die Bewer- tung der Auswirkungen wird insbesondere durch Pro- bleme mit den Indikatoren und bei der modellmäßigen Erfassung der Auswirkungen beeinträchtigt. Der Nutzen dieser Bewertungen im Entscheidungsprozeß, bei der Ver- waltung der Vorhaben, bei der Änderung der Programm- planung und bei der Vorbereitung zukünftiger Interven- tionen ist immer noch recht beschränkt (siehe Ziffern 4. 16-4. 21, 6. 5, 6. 7 und 6. 14-6. 26). 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/5 3. 10. Speziell im Hinblick auf Ziel 2 (Z2) wurden bei der Bewertung insbesondere folgende Schwachstellen fest- gestellt: a) Mißverhältnis zwischen dem Durchführungsstand der Programme und der Gemeinschaftsfinanzierung, da weiterhin erhebliche Mittel von einem Programm auf das nächste übertragen werden (in der Größenord- nung von durchschnittlich 12 % beim Übergang vom Zeitraum 1994-1996 auf den Zeitraum 1997-1999) (siehe Ziffer 6. 27). b) Die Aufeinanderfolge der kurzen Programmplanungs- zeiträume ermöglicht keine optimale Nutzung der Bewertungsergebnisse (siehe Ziffer 4. 23). c) Bei der Ermittlung der Auswirkungen der Strukturin- terventionen, im Hinblick auf die Beschäftigung, werden indirekte Effekte noch nicht ausreichend gemessen (siehe Ziffern 5. 12-5. 15). insbesondere 3. 11. Die makroökonomischen Bewertungen führten ins- besondere im Hinblick auf die Auswirkungen der Struk- turmaßnahmen zu positiven Ergebnissen (Erhöhung des BIP, Auswirkungen auf Angebot und Nachfrage, Verbes- serung der Beschäftigungslage und der Konvergenz, Wirk- samkeit der GFK-Instrumente), obwohl die Programmpla- nungs-, Durchführungs- und Begleitsysteme Mängel auf- wiesen (siehe Ziffern 7. 1-7. 14). 3. 12. Die Bewertungen von Unterprogrammen oder Maßnahmen sind weiterhin unzulänglich. Im übrigen treten dabei wegen der Streuung und mangelnden Kohä- renz vieler Maßnahmen und Unterprogramme technische Schwierigkeiten auf (siehe Ziffer 7. 17). 4. ALLGEMEINE PROBLEME Einleitung 4. 1. Ziel der Bewertung ist die Ermittlung der sozioöko- nomischen Auswirkungen der durchgeführten Aktionen, d. h. die Untersuchung der erzielten Ergebnisse, ihr Ver- gleich mit den eingesetzten Mitteln und die Analyse der Kosten. Außerdem müssen all diese Punkte mit den entsprechenden Vorhersagen verglichen werden. Für diese Bewertungsaufgabe bedarf es einer guten statistischen Basis, quantifizierter Ziele, die auf der Grundlage eines Systems von Indikatoren erstellt wurden, und der Ent- wicklung eines methodischen und analytischen Rahmens. Gleichzeitig muß der Bewertung eine Analyse des Verhält- nisses zwischen den eingesetzten Mitteln, den Endergeb- nissen und den Zwischenergebnissen zugrunde liegen. Der Hof hat auf all diesen Ebenen Mängel aufgedeckt, die den Nutzen der im Rahmen der Strukturfonds durchgeführten Bewertungen bisher beschränkt haben. Dabei konnten durchaus echte Fortschritte festgestellt werden, die zur Stärkung des Bewertungsverfahrens beitrugen. 4. 2. Seit der Reform von 1988 fällt die Bewertung ausdrücklich in den Rahmen der Partnerschaft (Artikel 26 der Verordnung (EWG) Nr. 4253/88 — mit genaueren Ausführungen in der geänderten Verordnung vom 20. Juli 1993). Im ersten Programmplanungszeitraum (bis 1995) wurden die Bewertungen jedoch in erster Linie auf Initia- tive der Kommission durchgeführt (5). Diese Bewertungen — insbesondere die Ex-post-Bewertungen — wurden durch unpräzise Entwicklungsstrategien und eine unbe- friedigende Begleitung erschwert; im übrigen wurden sie im allgemeinen von den Begleitausschüssen nicht wirklich berücksichtigt oder ausführlich besprochen. 4. 3. Die Kommission sorgte zunächst vor allem für die Einrichtung ihres eigenen Bewertungssystems für sämtli- che unter die fünf vorrangigen Ziele der Reform fallenden GFK (6). Zu den Kommissionsinitiativen im Zusammen- hang mit der Entwicklung der Bewertung und der Bewer- tungsmethoden gehören insbesondere die Einrichtung der Fachgruppe „Bewertung der Regionalpolitik“ im Jahre 1992 und auf methodischer Ebene die Einleitung des Programms „Methoden zur Bewertung der strukturpoliti- schen Aktionen“ (MEANS) im Jahre 1994. 4. 4. Für den Programmplanungszeitraum 1994-1999 entwickelte die Kommission im Bereich der Bewertung neue Tatkraft, so daß nun in den beiden ersten Phasen (vor der Durchführung und während der Durchführung) und später in der Ex-post-Phase systematisch Bewertun- gen stattfinden. 4. 5. Die Zwischenbewertung ist zwar in den Struktur- fondsverordnungen nicht ausdrücklich vorgesehen, wurde jedoch ab 1995-1996 bei allen GFK, PPD und OP des Programmplanungszeitraums 1994-1999 durchgeführt. Sie fällt ganz konkret in den Rahmen der Partnerschaft und kann daher von den Begleitausschüssen zu einem (5) Es handelt sich um folgende Bewertungen: a) Programmplanungszeitraum 1989-1993: — Vorausbeurteilungen der Z1- und Z5b-GFK (1990- 1991), — Ex-post-Bewertungen der Z1-GFK (1994-1995), — Ex-post-Bewertungen der Z2-GFK (1996-1997), — thematische Bewertungen (KMU, Telekommunika- tion); b) Programmplanungszeitraum 1994-1999: — Vorausbeurteilungen der regionalen Entwicklungspläne für Ziel 1, — Vorausbeurteilungen der unter Z5b fallenden Pro- gramme, — Vorausbeurteilungen der unter Z2 fallenden PPD (1994- 1996), — Vorausbeurteilungen der unter Z2 fallenden PPD (1997- 1999), — kritische Analysen der unter Z1 fallenden PPD und GFK (1995). Außerdem gab die Kommission für die einzelnen Mitglied- staaten Bewertungen der Auswirkungen der europäischen Strukturpolitik auf den wirtschaftlichen und sozialen Zusam- menhalt der Union in Auftrag. (6) Vermerk der GD XXII vom 14. März 1991. C 347/6 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Instrument der integrierten Verwaltung gemacht werden. Damit trägt sie zur weiten Verbreitung der Bewertungs- kultur bei. Die Kommission hat für die Durchführung der Zwischenbewertung in den Mitgliedstaaten schrittweise ein Verfahren entwickelt (7). 4. 6. Dabei machte sie jedoch keine genauen Angaben zu den konkreten Verfahrensmodalitäten (genaue Beschrei- bung des Lastenhefts, Kriterien für die Auswahl des Bewerters, Struktur des Bewertungsberichts, Erfassung der Angaben, geforderte Qualitätsnormen, Zeitplan usw. ). 4. 7. Parallel organisierte die Kommission mehrere Ver- anstaltungen (8), die durch zahlreiche Veröffentlichungen ergänzt wurden. Diese Veranstaltungen, auf denen die Bewertungsfachleute mit den mittelbewirtschaftenden Stellen der Strukturfonds zusammentrafen, trugen dazu bei, die Bewertungskultur zu entwickeln und die mittelbe- wirtschaftenden Stellen für dieses Thema zu sensibilisie- ren. Die Bewertung wurde im wesentlichen als erfah- rungsbedingter Lernprozeß dargestellt. 4. 8. Die Kommission legte im Mai 1998 im Zusammen- hang mit dem Vorentwurf des Gesamthaushaltsplans der Europäischen Gemeinschaften für das Haushaltsjahr 1999 das Arbeitspapier „Bewertungsbilanz 1996/1997“ vor. Darin beschreibt sie die 1996-1997 durchgeführten Bewertungstätigkeiten, listet die durchgeführten und lau- (7) a) 1994 erarbeitete sie die ersten Auftragsbedingungen für die Zwischenbewertung der unter Ziel 1 fallenden GFK und Interventionsformen. Darin wird bestätigt, daß die Zwischenbewertung den Begleitausschüssen bei der Ent- scheidungsfindung hilft und partnerschaftlich vorgenom- men wird. Außerdem sind die Durchführungsmodalitäten festgelegt, insbesondere das Profil des Bewertungsteams und seine Aufgaben. b) 1995 verteilte sie allgemeine Leitlinien für die Begleitung und die Zwischenbewertungen im Bereich der Struktur- fonds der Gemeinschaft. Darin sind die Analyseelemente (globale und spezifische Ziele, Indikatoren) sowie das Verhältnis zwischen Begleitung und Zwischenbewertung definiert. c) 1995 übermittelte sie den Mitgliedstaaten Schreiben, in denen sie an die Verpflichtung zur Zwischenbewertung erinnerte und erneut die gewünschten Durchführungsmo- dalitäten darlegte. (8) Unter anderem waren dies folgende Veranstaltungen: a) Konferenz über die Bewertung der europäischen Regio- nalpolitik (Brüssel, 16. November 1995), auf der haupt- sächlich die Ergebnisse der Ex-post-Bewertungen für Z1 1989-1993 und der Vorausbeurteilungen 1994-1999 behandelt wurden; b) europäische Konferenz über die Bewertungsmethoden für die Strukturfonds-Interventionen (Berlin, 2. und 3. Dezember 1996), auf der im wesentlichen die Probleme der Bewertung der Auswirkungen auf mikroökonomi- scher, makroökonomischer und thematischer Ebene erör- tert wurden; c) Konferenz in Sevilla von März 1998, die den partner- schaftlichen Erfahrungsaustausch im Bereich Bewertung fördern sollte. fenden Bewertungen auf und faßt die Ergebnisse der 1996-1997 durchgeführten Bewertungen zusammen. 4. 9. Die Ausgaben für die Bewertung können entweder direkt von der Kommission übernommen oder in Partner- schaft mit den Mitgliedstaaten kofinanziert werden. Aus den Tabellen 1 und 2 gehen die für die Bewertung der beiden Programmplanungszeiträume 1989-1993 und 1994-1999 direkt von der GD XVI getätigten Ausgaben hervor. 4. 10. Für den Zeitraum 1989-1993 beliefen sich die Ausgaben für die Bewertung auf ungefähr 10 Mio ECU (siehe Tabelle 1). Rund zwei Drittel dieser Ausgaben entfielen auf zwei Bereiche, für die die Kommission unmittelbar verantwortlich ist und in denen sie die Initia- tive ergreift: Auf die Gemeinschaftsinitiativen gemäß Arti- kel 11 der Verordnung (EWG) Nr. 4253/88 entfielen 3,1 Mio ECU, auf die Querschnitt- und thematischen Bewer- tungen (z. B. KMU, Telekommunikation, Umwelt oder Humanressourcen) 3,2 Mio ECU. Für die Bewertung der Ziele 1 und 2 der Strukturfonds wurden jedoch nur relativ geringe Beträge bereitgestellt, da die Partnerschaft im Bereich der Bewertung in diesem Zeitraum noch nicht sehr weit entwickelt war. Der für die Bewertung des Zeitraums 1994-1999 bereitgestellte Betrag belief sich im April 1998 auf 25,2 Mio ECU (siehe Tabelle 2). Diese Erhöhung gegenüber dem vorangehenden Zeitraum ist auf die im Rahmen der Partnerschaft vorgenommene Entwicklung der Zwischenbewertung und der entspre- chenden Methoden zurückzuführen. 4. 11. Über die in diesem Zusammenhang von der Kom- mission und den Mitgliedstaaten getätigten Ausgaben, die sich seit 1996 erheblich erhöht haben, ist die Kommission nicht immer umfassend informiert, insbesondere wenn die Bewertungen unter die Maßnahme „technische Hilfe“ der operationellen Programme fallen, die auch andere Ausga- ben beinhalten kann. Speziell für die Zwecke der Bewer- tung könnte bereits in der Anfangsphase der Programm- planung ein bestimmter Betrag vorgesehen werden, wodurch die Bewertungskosten transparenter würden. Bezugsrahmen 4. 12. Im Entwicklungsprozeß der Bewertung spielt das Programm MEANS (1995-1998), für das insgesamt 2,8 Mio ECU bereitgestellt wurden, eine besondere Rolle (9). Ziel des angewandten Verfahrens ist es, durch Bestands- aufnahme der von den Mitgliedstaaten verwendeten Methoden und durch Ermittlung stichhaltiger Beispiele einheitliche und kohärente Methoden zu entwickeln. Bei (9) Dieses Programm wird gemeinsam von der Kommission und einem externen Berater verwaltet, für dessen Beteiligung jährlich 932 000 ECU aus der Haushaltslinie B2-1 8 2 0 bereitgestellt werden. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/7 diesem im wesentlichen zu Eigeninitiative anregenden empirischen Ansatz hat die Kommission nicht die Mög- lichkeit, die konkreten Modalitäten für die Durchführung der Bewertungsmethoden oder die Auswahl der Indikato- ren, insbesondere der Indikatoren zur Messung der sozio- ökonomischen Auswirkungen im Bereich der Regional- entwicklung, festzulegen. Angesichts der Komplexität der mit der Bewertung verbundenen methodischen Aspekte gibt es keine einheitliche Methodik, die sich in jeder spezifischen Situation anwenden ließe. Die Kommission sollte jedoch in der Lage sein, einen methodischen Rah- men vorzugeben, der bei der Durchführung von an spezi- fische Situationen angepaßten Bewertungen eine angemes- sene Orientierungshilfe bildet. 4. 13. Mit Hilfe der Ergebnisse des Programms MEANS insbesondere durch Einführung eines wurde bisher gemeinsamen Sprachgebrauchs der Grundstock für eine neue Bewertungsmethode gelegt; außerdem ermöglichten sie die partnerschaftliche Vorbereitung der Zwischenbe- wertung. Die Tabellen 3 und 4 zeigen den allgemein anerkannten Bewertungsansatz. Das Programm MEANS hat jedoch auf die Fragen zu den praktischen oder operationellen Aspekten der Bewertung noch keine gründlichen Antworten geliefert. So bleiben zwei grundle- gende Fragen immer noch unbeantwortet: Welches System von Indikatoren ist für ein globales Urteil über ein Strukturprogramm der Gemeinschaft am angemessensten? Welcher Bewertungsansatz ist am besten geeignet, die sozioökonomischen Auswirkungen eines bestimmten Strukturprogramms im Rahmen der regionalen Entwick- lung zu messen? Die Kommission ist noch nicht in der Lage, genaue Anweisungen zu erteilen, welche konkreten Techniken in einer bestimmten Bewertungssituation anzu- wenden sind. Dieser Mangel beeinträchtigt insbesondere die Durchführung der Zwischenbewertungen der Inter- ventionsformen des Programmplanungszeitraums 1994- 1999. Statistische Datenbanken und Angaben zu den verfolg- ten Zielen 4. 14. Bei den Bewertungen, seien es nun Vorausbeurtei- lungen, Zwischenbewertungen oder Ex-post-Bewertun- gen, ergibt sich oft die Schwierigkeit, daß die Ziele — selbst die einzelner Maßnahmen — zu allgemein formu- liert sind. 4. 15. Aufgrund des Entwicklungsstands der vorhande- nen statistischen Datenbanken werden Begleitung und Bewertung der von den Strukturfonds mitfinanzierten Programme und Maßnahmen gebremst. Es sind insbeson- dere folgende Schwachstellen festzustellen: Mangel an auf die jeweiligen Gebiete beschränkten statistischen Anga- ben, Fehlen statistischer Angaben zu bestimmten Aspekten und fehlende Übereinstimmung zwischen dem statistisch abgedeckten Zeitraum und dem für Begleit- und Bewertungszwecke erforderlichen Zeitraum. Indikatoren 4. 16. Zuverlässige und angemessene Indikatorsysteme sind für das Programmplanungsverfahren unerläßlich. Für die Zwecke der Bewertung müssen die Strukturpro- gramme Angaben über den finanziellen und materiellen Durchführungsstand sowie über die Ergebnisse oder die Leistungsfähigkeit der Aktionen beinhalten. Diese Indika- toren müssen den mittelbewirtschaftenden Stellen Aus- kunft über die unmittelbaren oder nachhaltigen Auswir- kungen der durchgeführten Aktionen geben und außer- dem die Messung der gegenüber den Gesamtzielen der Programme, z. B. regionales Wachstum oder Verringe- rung der Arbeitslosigkeit, erzielten Fortschritte ermögli- chen. 4. 17. Die Zuverlässigkeit der finanziellen Indikatoren steht in engem Zusammenhang mit der Zuverlässigkeit der bei der Kommission eingereichten Ausgabenbescheini- gungen, die die entsprechende Gemeinschaftszahlung aus- lösen. Die materiellen Indikatoren werden oft als Zusatz- informationen angegeben und sind nur begrenzt zuverläs- sig. In den vorhandenen Datenbanken läßt sich die mate- rielle Entwicklung der Maßnahmen nicht immer erfassen, und die mittelbewirtschaftenden Stellen werden von den Endbegünstigten nicht immer regelmäßig über den mate- riellen Durchführungsstand informiert. In der Zwischen- bewertung des OP Lissabon und Vale do Tejo in Portugal sind materielle Indikatoren angegeben, die streng propor- tional den Ausgaben entsprechen, ohne daß irgendwelche Abweichungen aufgrund von Durchführungsverzögerun- gen oder anderen Problemen erwähnt werden. Die Mit- gliedstaaten müßten ihre Begleitverfahren und die den Indikatoren zugrunde liegenden Datenbanken verbessern. 4. 18. Die Messung der Ergebnisse und Auswirkungen auf der Ebene der Unterprogramme und Maßnahmen bzw. der Auswirkungen auf Programmebene wird dadurch erschwert, daß weder die Kausalzusammenhänge zwischen den verschiedenen Zielebenen und zwischen den Zielen und den Maßnahmen bzw. Vorhaben noch die horizontalen Ergänzungs- und Synergieeffekte zwischen den Maßnahmen und zwischen den Zielen klar ermittelt sind. Daher ist es schwierig, die spezifische Auswirkung einer Maßnahme auf die Regionalentwicklung oder die Auswirkung einer Investition auf die Nachfrage — und erst recht das Angebot — konkret zu bestimmen. In diesem Zusammenhang ist die Ermittlung von Indikato- ren, die bei der Bewertung der Ergebnisse und der Aus- wirkungen als angemessene Hilfsmittel dienen können, im Hinblick auf die GFK 1994-1999 noch nicht abgeschlos- sen (siehe Ziffer 6. 23). 4. 19. Die Vorausbeurteilung der GFK ist eine wesentli- che Grundlage für die späteren Bewertungen. Dabei müs- sen alle Ergebnis- und Wirkungsindikatoren bestimmt und quantifiziert werden, um die voraussichtlichen Aus- wirkungen des Programms beurteilen zu können und den Vergleich mit den tatsächlichen Auswirkungen zu ermög- lichen. In diesem Zusammenhang war die zielbezogene Verwaltung nicht immer einheitlich und zufriedenstellend, C 347/8 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 was sich auf die für die Bewertung erforderlichen Indika- toren auswirkte. So enthält das italienische GFK 1994- 1999 nur wenige Indikatoren, eine Tatsache, die spätere Bewertungen erschweren könnte. Das von der Kommis- sion ohne größere Änderungen genehmigte portugiesische GFK 1994-1999 sieht dagegen zu viele Indikatoren (in der Größenordnung von 300) vor, was seine Bewertung ebenfalls komplizieren dürfte. Diese bei der Festlegung der Indikatoren zwischen den GFK zu verzeichnenden Unterschiede verdeutlichen die mangelnde Kohärenz bei der Programmplanung. Die zahlreichen allgemeinen und schlecht quantifizierbaren Ziele geben manchmal bei der Zwischenbewertung Anlaß dazu, das von der Kommis- sion bei der Vorausbeurteilung genehmigte Indikatorsy- stem zu überprüfen, da die Indikatoren nicht genau genug festgelegt waren und sich nicht gut anwenden ließen. 4. 20. Für die Strukturinterventionen und die sozioöko- nomischen Verhältnisse, auf die sie einwirken, gibt es viele unterschiedliche Indikatoren, die oft an dezentraler Stelle festgelegt werden. Die Kommission hat keine Ver- zeichnisse der Indikatoren erstellt, die sie im Bereich der Regionalentwicklung oder im Rahmen der verschiedenen Arten von Aktionen für unerläßlich und repräsentativ hält, obwohl einigen nationalen oder regionalen Stellen durchaus Teilverzeichnisse übermittelt wurden, die auch bereits Gegenstand von Gesprächen waren. 4. 21. Die Ergebnis- und Wirkungsindikatoren sollten im Rahmen der Begleitung stärker quantifiziert werden, wobei auf die Zuverlässigkeit der Zahlenangaben zu achten ist. Diese Zuverlässigkeit ist nicht immer gegeben, so daß in einigen Fällen geschaffene Arbeitsplätze doppelt gezählt werden oder sich die Brutto- nicht von den Nettobeschäftigungseffekten unterscheiden lassen. Dies wurde beim Vergleich des Zwischenbewertungsberichts des OP Brandenburg mit den Sozialversicherungsstatisti- ken festgestellt. Berücksichtigung der Bewertung 4. 22. Der Beitrag der Bewertung zur wirksamen Ver- wendung der Gemeinschaftsmittel hängt zu einem großen Teil von ihrer inhaltlichen Qualität ab sowie davon, wann die Ergebnisse eingehen und wann die Änderung der Strategie beschlossen wird. Eine Reihe von Zwischen- bewertungen der GFK, PPD und OP des Programmpla- nungszeitraums 1994-1999 wurde jedoch erst recht spät abgeschlossen, so daß sich eventuelle Anpassungen verzö- gern. 4. 23. Bei der Programmplanung für Ziel 2 wird es durch die aufeinanderfolgenden Programmplanungzeiträume, die kürzer sind als bei Ziel 1, sehr schwierig, zum Zeitpunkt der Programmplanungsentscheidungen über die Ergebnisse der Bewertungen zu verfügen, anhand deren Lehren aus der Vergangenheit gezogen und spätere Inter- ventionen angepaßt werden können. Der Programmpla- nungs- und der Bewertungszyklus für Ziel 2 sind phasen- verschoben. So erhielt die Kommission die endgültige Fassung des zusammenfassenden Ex-post-Bewertungsbe- richts für Ziel 2 für den Programmplanungszeitraum 1989-1993 im Sommer 1997. Zu diesem Zeitpunkt war die Vorausbeurteilung für die Programmplanung 1997- 1999 im Gange und die Ex-post-Bewertung für den Zeitraum 1994-1996 noch nicht eingeleitet. 4. 24. Die in den Bewertungsberichten angeführten Ergebnisse der Strukturprogramme ändern oft nichts an der Höhe der für diese oder die folgenden Programme bereitgestellten Haushaltsmittel. Die Bewertungen wurden bei der Entscheidungsfindung im ersten Programmpla- nungszeitraum nur sehr selten berücksichtigt, und Ände- rungen der Programmplanung waren überwiegend durch den Grad der Mittelausschöpfung begründet. So wurden auch die nützlichen Empfehlungen, die der Hauptberater bei der Ex-post-Bewertung der unter Ziel 1 fallenden GFK 1989-1993 aussprach, nicht beachtet (siehe Ziffer 5. 7). 4. 25. Die in Zwischenbewertungen oder Durchführungs- berichten aufgeführten mehr qualitativen Aspekte Lei- stungsfähigkeit oder Wirksamkeit der Programme hatten keinen ausreichenden Einfluß auf die operationelle Ver- waltung der Strukturfonds und auf die Übertragung grö- ßerer Verantwortung auf die an der Entwicklung der Programme beteiligten Partner. 4. 26. Die Ergebnisse der Zwischenbewertung der PPD, GFK und OP des Ziels 2 (1994-1996) zeigen ebenso wie die Ergebnisse der Begleitung ein Mißverhältnis zwischen der geplanten Finanzierung und der Durchführung der Programme. Dadurch wird die Inanspruchnahme der Mittel zum Hauptanliegen, was darauf hinauslaufen kann, daß die Rolle der Bewertung bei der Analyse des betrachteten Gebiets — insbesondere hinsichtlich des logischen Zusammenhangs zwischen den Zielen, den zugewiesenen Mitteln und der Auswirkung der Struktur- interventionen — unterschätzt wird. 4. 27. Die Schlußfolgerungen und Empfehlungen der Bewertungen verstehen sich für die mittelbewirtschaften- den Stellen der Interventionsformen oft von selbst, kön- nen jedoch für andere Partner von Nutzen sein. Dies gilt sowohl für die Ex-post-Bewertungen (siehe Ziffer 5. 8) als auch für die partnerschaftlich vorgenommenen Zwischen- bewertungen. Objektivität der Bewertungen 4. 28. Das Fehlen eines genauen Bezugsrahmens beein- trächtigt in den spezifischen Bewertungssituationen die Anwendung angemessener und objektiver Techniken, die eine leichte Kontrollierbarkeit der Ergebnisse und die Unabhängigkeit des Bewerters gewährleisten. Es kommt vor, daß die empfohlene Methode nicht objektiv begrün- 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/9 det ist, daß der Bewerter seinen Ansatz zu bereitwillig den angetroffenen Schwierigkeiten anpaßt oder daß er die Wahl der Indikatoren von den verfügbaren Informationen abhängig macht. 4. 29. Auch die Unabhängigkeit von den mittelbewirt- schaftenden Stellen scheint, insbesondere hinsichtlich der Informationsbeschaffung (siehe Ziffer 6. 11), nicht immer gewährleistet zu sein. In den Bewertungsberichten wird die Informationsquelle, auf die sich die Feststellungen gründen, jedoch nicht immer angegeben. Diese Schwach- stelle kann die Zuverlässigkeit und Stichhaltigkeit der in den Bewertungsberichten vorgelegten Angaben zweifel- haft erscheinen lassen. 4. 30. Die Objektivität müßte durch ein Kontrollsystem gewährleistet werden, das die Qualität der Indikatoren (Durchführungs-, Ergebnis- und Wirkungsindikatoren), die Zuverlässigkeit der Basisinformationen und den Grad der Anwendung der Methoden überwacht. Die Kommis- sion analysiert die im Rahmen der Bewertung vorgelegten Angaben und Ergebnisse, überprüft jedoch nicht an Ort und Stelle, ob die in den Mitgliedstaaten eingerichteten Bewertungssysteme ordnungsgemäß funktionieren. Von der Kommission vergebene Bewertungsaufträge 4. 31. Bei der Prüfung der Vergabeverfahren für von der Kommission in Auftrag gegebene Bewertungen wurde eine Reihe von Schwachstellen festgestellt: unzulängliche Auswahlverfahren, zu vage gehaltene Lastenhefte, Verzö- gerungen und dürftige Qualität der Berichte. 4. 32. Die Beurteilungs- oder Analyseelemente, auf deren Grundlage die Kommission den Berater auswählt, sind in den Protokollen der Sitzungen zu Ausschreibungsverfah- ren nicht immer genau angeführt. Bei seiner Prüfung konnte der Hof keine Gewähr erlangen, daß die besten Sachverständigen des jeweils angemessensten Fachgebiets ausgewählt wurden. 4. 33. Für die Ex-post-Bewertungen der Ziel-1-GFK 1989-1993 und des Ziels 2 fiel die Wahl entweder auf einen Hauptberater, der durch andere nationale Berater unterstützt wurde, oder auf Beraterkoordinatoren, die die Aufträge zur Erstellung der Studien in der Folge an andere Berater weitergaben. In dieser Beraterkette behält die Kommission nicht unbedingt die Kontrolle über die Durchführungsmodalitäten der Bewertung, was jedoch zur Gewährleistung der Kohärenz, Einheitlichkeit und Qualität der Ergebnisse erforderlich ist. 4. 34. Das Lastenheft enthält manchmal keine genaue Beschreibung der durchzuführenden Aufgaben und der zu erzielenden Ergebnisse. Die Vertragsbestimmungen sind sehr allgemein gehalten. Die Durchführungsmodalitäten der Bewertung werden häufig bis zu einer späteren Ver- einbarung mit der Kommission, in der der methodische Rahmen festgelegt werden soll, offengelassen. 4. 35. Bei der Vorlage der Berichte sind gegenüber dem vorgesehenen Zeitplan oft Verzögerungen festzustellen. So mußte der Bewertungsbericht zum GFK 1989-1993 für Ziel 1 den Vertragsbestimmungen zufolge zum 28. Februar 1995 vorgelegt werden, wurde jedoch erst im November 1995 fertiggestellt. Für den Fall einer Nicht- einhaltung der vertraglich festgelegten Fristen hatte die Kommission keinerlei Sanktion vorgesehen. Dagegen lei- stete sie am 11. Juli 1995 gemäß Artikel 4 des Vertrags die Abschlußzahlung in Höhe von 40 %. 4. 36. Da genaue und eindeutige Vertragsbedingungen über den zu verfolgenden methodischen Ansatz und die erwarteten Ergebnisse fehlen, können die Kommissions- stellen unterschiedlich auf die Berichte reagieren. So wer- den einige Berichte angenommen, obwohl sie lediglich einfache Beschreibungen oder vage Analysen des Nutzens der durchgeführten Maßnahmen enthalten, auf allgemei- nen Behauptungen befragter Personen beruhen oder aber am Ende zu allgemeine Empfehlungen aussprechen. Im Fall der Ex-post-Bewertung des GFK 1989-1993 für Irland empfiehlt eine Dienststelle, den mit dem Berater abgeschlossenen Vertrag wegen der schlechten Qualität des Berichts aufzulösen, während der Bericht von einer anderen Dienststelle genehmigt wurde. Bei der Ex-post- Bewertung des GFK 1989-1993 für Portugal sind sich die zuständigen Dienststellen darin einig, daß in dem Bericht statt einer Bewertung lediglich die bereits von dem Mit- gliedstaat vorgelegten Elemente der materiellen Durchfüh- rung wiederholt werden. Ebenso wird unterstrichen, daß der Ex-post-Bewertungsbericht zum GFK 1989-1993 für Spanien zu deskriptiv ist und nicht genügend Analysen enthält. Die Ex-post-Bewertung des GFK 1989-1993 für Nordirland wird als unvollständig betrachtet. Beim Ex- post-Bewertungsbericht zum GFK 1989-1993 für Italien werden Gliederung und Aufbau bemängelt. Der Bewer- tungsbericht zum GFK 1989-1993 für Griechenland ent- hält zwar Schlußfolgerungen zu den einzelnen Kapiteln, doch fehlt eine allgemeine Schlußfolgerung. 5. EX-POST-BEWERTUNGEN DER UNTER DIE ZIELE 1 UND 2 FALLENDEN GFK (1989-1993) Einleitung 5. 1. Die Bewerter stoßen oft auf folgende Schwierigkei- ten: a) Die ursprüngliche Programmplanung ging vor allem bei den Ziel-1-Regionen oft in aller Eile, ohne Vor- ausbeurteilung der Programme und insbesondere der entsprechenden wirtschaftlichen Grundlagen vonstat- ten. b) Es fehlen quantifizierte Ziele und Ergebnisindikato- ren. c) Die statistischen Angaben über die sozioökonomische Lage vor bzw. nach der Strukturfonds-Intervention im Rahmen von Ziel 2, insbesondere die Angaben über Wirtschaftsstruktur, Investitionen und Bruttoregional- C 347/10 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 produkt, sind lückenhaft. Die statistischen Instru- mente decken nicht immer den ausgewählten Analyse- bereich ab (Gemeinde, Bezirk, Arbeitsmarktregion). d) Einige Aktionen werden nicht beendet. e) Die Entwicklung der sozioökonomischen Lage läßt sich zum Teil auch auf exogene Faktoren zurückfüh- ren. f) Wenn die Bewilligung der Hilfen sich nicht ausrei- chend am regionalen oder lokalen Bedarf ausrichtet, sind die Vorhaben und die damit verfolgten Ziele heterogen. g) Die spezifischen Auswirkungen der Maßnahmen und des Programms sind aufgrund der Fülle von Aktionen, die in einer Region oder einem Gebiet stattfinden, schwer zu ermitteln. h) Indirekte Auswirkungen des Programms (insbesondere auf die Beschäftigung) lassen sich schwer messen, da bei der Einleitung der Programme kein entsprechendes Meßinstrument eingerichtet wurde und seit ihrer Beendigung keine vertiefte Untersuchung zu diesem Thema stattgefunden hat. Ex-post-Bewertung der Ziel-1-GFK (1989-1993) 5. 2. Die Ex-post-Bewertung der Z1-GFK wurde von einem zentralen Berater koordiniert und setzt sich zusam- men aus Ex-post-Bewertungen der betreffenden GFK, die von Januar 1994 bis Juni 1995 von nationalen Beratern durchgeführt wurden. Der für die Koordinierung zustän- dige Berater entwickelte den methodischen Ansatz, der sowohl makroökonomische Analysemethoden als auch Methoden zur Analyse von Maßnahmen und Vorhaben umfaßt. Dieser Ansatz zielt darauf ab, die interne Logik und Strategie der GFK, OP und Maßnahmen zu analysie- ren, eine erste Bilanz der materiellen Ergebnisse und der Auswirkungen zu erstellen und schließlich die Durchfüh- rungsverfahren zu untersuchen. Er ist in Anhang I zusam- mengefaßt. 5. 3. Obwohl die vorgeschlagene Methodik insgesamt kohärent ist, weist sie doch eine Reihe von Schwachstel- len auf. So ist vorgesehen, daß sich die Analyse der internen Logik und Strategie der GFK, OP und Maßnah- men auf eine einheitliche Struktur von Zielen stützt, die mit einer Standardtätigkeitsbezeichnung verbunden ist. Dieser Ansatz dürfte zwar den Vergleich zwischen den Mitgliedstaaten ermöglichen, führt jedoch nicht unbe- dingt zur Aufstellung einer Rangordnung der Ziele auf der Grundlage der von den Mitgliedstaaten gesetzten Prioritäten und der Kriterien Rangfolge, Komplementari- tät, Austauschbarkeit und Synergieeffekte. Daher lassen sich bei diesem Ansatz nicht alle Unstimmigkeiten in der jedem GFK und OP eigenen Strategie aufdecken. Im übrigen ermöglichen die im Methodenpapier aufgeführten materiellen Indikatoren und Wirkungsindikatoren oft keine Beantwortung der einschlägigen Fragen zu den vorgesehenen und nicht vorgesehenen Auswirkungen. 5. 4. Der Hof konnte im übrigen folgende Schwachstellen aufdecken: a) Zur Feststellung der Entwicklung der sozioökonomi- schen Umgebung der GFK und OP wurde nicht immer die Ausgangslage, die durch die Gemeinschafts- intervention verändert werden sollte (1988-1989), mit der Lage nach Beendigung der Intervention (1993- 1994) verglichen. Manchmal sind die Angaben, insbe- sondere die Angaben zu den regionalen Unterschie- den, veraltet. b) Die in den methodischen Vorgaben vorgesehene Rangordnung der Ziele wurde oft nicht ausreichend analysiert. Entweder war diese Rangordnung gar nicht vorgegeben oder sie beschränkte sich lediglich auf die für eine spezifische Prüfung ausgewählten OP und Maßnahmen, oder aber die Strukturierungskrite- rien wurden nicht systematisch angewandt. So wurde mit der Rangordnung für Ziele und Instrumente letzt- endlich doch nicht erreicht, daß sich Probleme hin- sichtlich der Kohärenz und der Schlüssigkeit von Prioritäten und ihrer jeweiligen Gewichtung besser ermitteln lassen. c) Die Gründe für die Anpassungen der GFK und OP wurden manchmal nicht vertieft analysiert. d) Die finanzielle Abwicklung und die Durchführungs- verfahren sowie der materielle Durchführungsstand werden in den Bewertungsberichten im allgemeinen ausreichend behandelt. In einigen Fällen wurden aber die Auswirkungen der Programme oder Maßnahmen nicht untersucht (ausgenommen die geschaffenen Arbeitsplätze) oder nicht quantitativ dargestellt. Quantifizierte Auswirkungen werden — wenn über- haupt — über makroökonomische Modelle ermittelt und beziehen sich auf die Erhöhung des BIP, die Schaffung von Arbeitsplätzen und die Wettbewerbsfä- higkeit. Dies zeigt die Unzulänglichkeit der im Rah- men der Begleitsysteme von den mittelbewirtschaften- den Stellen vorgelegten Angaben. e) Bottom-up-Analysen im allgemeinen keine Schlußfolgerungen zu den Auswirkungen auf Pro- grammebene zu. ließen f) Der sich aus der Gemeinschaftsaktion ergebende zusätzliche Nutzen wird manchmal nur qualitativ dar- gestellt (z. B. Berücksichtigung des mit dem Programm verfolgten Ansatzes, Durchführung eines integrierten Ansatzes oder Auswirkung auf das Organisationsver- fahren). Im übrigen wurde er nicht immer systema- tisch untersucht. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/11 g) Die erwarteten langfristigen Auswirkungen wurden nicht oder nur in qualitativer Hinsicht behandelt. 5. 5. Zum Z1-GFK für Spanien wurde sowohl von der Kommission als auch von den nationalen Behörden (mit Kofinanzierung durch die Gemeinschaft) jeweils eine Ex- post-Bewertung in Auftrag gegeben. Die beiden Studien wurden unabhängig voneinander getrennt erstellt, obwohl sie gleichzeitig durchgeführt wurden und dieselben Ziele verfolgten. 5. 6. Im Hinblick auf Ergebnisse und Auswirkungen heben die Ex-post-Bewertungen das aufgrund der Z1- GFK materiell Erreichte, die in einigen nationalen Bewer- tungen aufgeführten makroökonomischen Auswirkungen und die Fortschritte im Bereich der Planung hervor, obwohl der programmbezogene Ansatz hier auf einige Hindernisse stieß (10). Außerdem unterstreichen sie den Beitrag der GFK in den Bereichen innovative Organisa- tionsstrukturen, Mittelbewirtschaftung, Begleitung, Infor- mationssysteme, Koordinierung und Partnerschaft, ob- wohl in jedem dieser Bereiche noch erhebliche Fort- schritte erzielt werden müssen. Strukturinterventionen 5. 7. Die 1995 vom Hauptberater erstellte Zusammenfas- sung enthielt einige nützliche Empfehlungen, die von der Kommission nicht in vollem Umfang befolgt werden konnten. Eine dieser Empfehlungen lautete, bei der Aus- arbeitung der Programme besser klarzustellen, welche gemeinschaftlichen endogene Wachstumsfaktoren fördern und welche auf eine Wieder- herstellung des regionalen Gleichgewichts oder die Wohl- fahrtsmaximierung abzielen. Eine andere Empfehlung lau- tete, zwischen dem Vorrang der Infrastrukturinvestitionen und dem spezifischen regionalen Entwicklungsbedarf oder zwischen dem Kampf gegen die Arbeitslosigkeit und der nötigen Steigerung von Produktivität und Wettbewerbsfä- higkeit ein Gleichgewicht herzustellen. Schließlich wurde empfohlen, die Beschäftigung besser in der Regionalpoli- tik zu berücksichtigen. (10) Der programmbezogene Ansatz wurde durch folgende Fakto- ren beeinträchtigt: i) kurze Planungsfristen, die insbesondere keine Vorausbe- urteilung ermöglichten; ii) Fehlen konkreter Ziele sowie quantifizierter Durchfüh- rungs-, Ergebnis- und Wirkungsindikatoren; iii) administrative Zwänge, die insbesondere dann auftraten, wenn die Unterprogramme eines Programms von ver- schiedenen Stellen verwaltet wurden oder wenn sich sektorielle und regionale Konzepte überschnitten; iv) Schwachstellen in den Gemeinschaftsvorschriften, die insbesondere dazu führten, daß Vorhaben, die für die Z1-OP abgelehnt wurden, im Rahmen von Gemein- schaftsinitiativen genehmigt wurden; v) projektbezogener Ansatz des Kohäsionsfonds, der einer einheitlichen Anwendung des programmbezogenen An- satzes ebenfalls nicht förderlich ist. 5. 8. Bei der von den nationalen Bewertern durchgeführ- ten Ex-post-Bewertung des Ziel-1-GFK 1989-1993 ging es nicht so sehr um eine echte Bewertung der Auswirkun- gen der Strukturfonds als vielmehr um die Verbesserung der Begleit- und Verwaltungssysteme der Mitgliedstaa- ten. Ex-post-Bewertungen zu Ziel 2 (1989-1993) 5. 9. Die Ex-post-Bewertungen der Z2-Programme für den Zeitraum 1989-1993 wurden in den 60 Förderregio- nen von einem externen Bewerter koordiniert. Zu jeder Region wurde eine allgemeine Analyse vorgenommen, und zu 22 Regionen wurden vertiefte Studien erstellt. Hauptziel der Bewertungen war es, die Auswirkungen der Strukturinterventionen auf die in diesen Regionen statt- findende industrielle Umstellung zu analysieren und für die folgende Programmplanung Lehren daraus zu ziehen. Anhang II enthält eine Zusammenfassung des Bewer- tungskonzepts. 5. 10. Obwohl ein gemeinsamer Rahmen vorgesehen wurde, sind die gewählten Ansätze sehr heterogen. Dies gilt insbesondere für die Prioritäten und die Genauigkeit der Analyse, die mal deskriptiv, mal kritisch ist, sowie die verwendeten Methoden und Techniken. 5. 11. Die Analyse der Strategien und der Angemessen- heit der GFK und OP sowie der Änderungen, die sie gegenüber dem sozioökonomischen Umfeld erfahren haben, führte selten zu einer am regionalen Entwicklungs- oder Umstellungskonzept orientierten Umstrukturierung der Ziele, Unterprogramme und Maßnahmen auf der Grundlage der Kriterien Rangordnung, Komplementarität und Austauschbarkeit. Viele Strategieanalysen, die von der Struktur der GFK und der OP ausgehen, decken nur Teilaspekte ab und betrachten die Strategie nicht sehr kritisch. Eine gut durchdachte Umstrukturierung sollte es aber ermöglichen, systematischer aufzudecken, wo die Strategie hinsichtlich der Kohärenz, der Gewichtung der Prioritäten, der Synergieeffekte, der Komplementarität und der Auswirkungen auf das jeweilige sozioökonomi- sche Umfeld Schwachstellen aufweist. 5. 12. Was die Auswirkungen der Strukturfonds-Inter- ventionen angeht, sind die Bewerter auf der Grundlage einer Stichprobe von Vorhaben und der Untersuchung ihrer Ergebnisse, ihrer verstärkenden Wirkung und ihrer Zusätzlichkeit nicht in der Lage, die Beobachtungen auf der Maßnahmenebene und im Hinblick auf die sozioöko- nomischen Auswirkungen des Programms zu aggregie- ren. 5. 13. Wenige Bewertungen stützten sich zur Ermittlung der Auswirkungen auf eine echte Kombination des Top- down- und des Bottom-up-Konzepts. Eine solche Kombi- nation wurde insbesondere zur Bewertung der Z2-Inter- C 347/12 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 ventionen zugunsten der Toskana angewandt. In diesem Fall ermöglichte das Top-down-Konzept auf der Grund- lage eines biregionalen ökonometrischen Modells Tos- kana/restliches Italien die Schätzung der globalen Auswir- kungen einer steigenden Nachfrage auf die Produktion in den einzelnen Sektoren, die Verbrauchsniveaus und die Wertschöpfung sowohl in der Toskana als auch im restlichen Italien. Anhand des Modells läßt sich außerdem abschätzen, welche Faktoren die Wirkung bei den einzel- nen Interventionsarten (Infrastruktur, Dienstleistungen für Betriebe, Beihilfen für private Investitionen) vermeh- ren und welche Beschäftigungseffekte sich ergeben (11). Zur Schätzung der direkten Auswirkungen auf die Beschäftigung wurden für die verschiedenen Interven- tionsarten Standardkoeffizienten angewandt. Bei diesem Top-down-Konzept wurden also die kurzfristigen direk- ten nachfragebezogenen Effekte betrachtet. Mit Hilfe des Bottom-up-Konzepts, das auf einer Stichprobe von Vor- haben und Maßnahmen beruht, lassen sich besser die langfristigen, stärker strukturierenden und indirekten Auswirkungen aufzeigen, die sich insbesondere auf das Angebot und die externen Einsparungen beziehen, mit denen sich die Produktionskosten verringern lassen. Obwohl sich diese Auswirkungen nicht so leicht isolieren und quantifizieren lassen und dieses Konzept es nicht ermöglicht, die Auswirkungen auf der Ebene der Maß- nahmen und des Programms zu aggregieren (obwohl dies das Ziel der vertieften Bewertung war), bilden die quali- tativen Überlegungen zur Wirksamkeit der Maßnahmen und zum Ausmaß der Zusätzlichkeit der Gemeinschafts- interventionen eine nützliche Ergänzung zum Top-down- Konzept. Die Kombination der beiden Konzepte kann für die Analyse von echtem zusätzlichen Nutzen sein, insbe- sondere, wenn sie sich auf Modelltechniken oder formale Ansätze stützt. 5. 14. Wirkungsbewertungen, die sich auf systematische Untersuchungen stützen (z. B. mehrere Untersuchungen zur Zusätzlichkeit der Maßnahmen oder Anwendung einer spezifischen Methode zur Schätzung der durch die Maßnahmen geschaffenen Nettoarbeitsplätze, bei der eine Versuchsgruppe mit einer Kontrollgruppe verglichen wird), sind ebenfalls rar. Solche Untersuchungen sind jedoch für die Bewertung der Auswirkungen von echtem zusätzlichen Nutzen. Die Wirksamkeit der Maßnahmen und Programme wäre besser bewertet worden, wenn die Bewerter zu einigen Ergebnisindikatoren statistische Untersuchungen durchgeführt hätten, wie dies im übrigen von ihnen manchmal gewünscht worden war. So findet man nicht immer Angaben über die Zahl von Unterneh- men, die in den neuen, mit Unterstützung der Struktur- fonds angelegten Industriegebieten angesiedelt wurden, oder über den Technologietransfer von Forschungsinstitu- ten zu Unternehmen. Die im allgemeinen in den Bewer- tungskonzepten vorgesehenen Gespräche mit mittelbe- wirtschaftenden Stellen von Maßnahmen und Vorhaben führen nur selten zu genauen Angaben über den Durch- führungsstand, die Ergebnisse und die Auswirkungen der Operationen. 5. 15. Bei den Ergebnissen zu den geschaffenen Arbeits- plätzen ist nicht sicher, ob es sich um dauerhafte Arbeits- inwieweit die Schaffung dieser plätze handelt und Arbeitsplätze spezifisch auf die Strukturaktionen zurück- geführt werden kann. Im übrigen enthalten die Bewer- tungsberichte manchmal widersprüchliche Angaben. 5. 16. Im Hinblick auf die Auswirkungen der Z2- Programme läßt sich aufgrund der Ex-post-Bewertungen insbesondere folgendes festhalten: a) Durch die Z2-OP konnte die sozioökonomische Lage zwar nicht oft verbessert werden, doch trugen sie — insbesondere durch Erhaltung von Arbeitsplätzen (12) und Schaffung der Grundlagen für die Umstellung — zumindest dazu bei, eine weitere Verschlechterung dieser Lage zu verhindern. Die meisten Regionen bemühen sich nämlich um Diversifizierung ihrer Wirt- schaft und ihrer Wirtschaftsstruktur und möglicher- weise auch darum, sich von ihrem Image als reines Industriegebiet zu befreien. b) Trotz des integrierten Ansatzes auf der Grundlage des Programmkonzepts handelt es sich bei den OP manch- mal um eine geänderte Fassung bereits angewandter nationaler oder regionaler Strategien. Damit bilden sie nicht immer ein Programmplanungsinstrument. c) Die gleichzeitige Durchführung von Z2-OP und Gemeinschaftsinitiativen führte zu Verwirrung und zur Überschneidung von Beihilfen. d) Die Strukturfonds-Interventionen wirkten sich positiv auf Programmplanung, Durchführungsmodalitäten, Partnerschaft, Synergieeffekte, Koordinierung und Be- wertung aus. Es wird jedoch oft betont, daß die mittelbewirtschaftenden Stellen und Aktionen des EFRE und des ESF nicht genügend zusammenwirken und zwischen ihnen kein ausreichender Austausch stattfindet. e) Was das Zusätzlichkeitsprinzip angeht, ermöglichen die Strukturfonds den Vorstoß in neue Bereiche, die Verwirklichung von Vorhaben, die ohne Gemein- schaftsunterstützung nicht durchgeführt worden wä- ren, die Beschleunigung der Durchführung oder die Verwirklichung ehrgeizigerer Vorhaben. Auch kann den ursprünglichen Vorhaben eine strukturelle Aus- richtung gegeben werden. Die Zusätzlichkeit kann bei den verschiedenen Maßnahmenarten (Infrastrukturbei- hilfen, Dienstleistungen für Unternehmen, Beihilfen für private Investitionen) recht unterschiedlich ausfallen. (11) Dabei handelt es sich jedoch nicht um die Schaffung von Arbeitsplätzen, da dem ökonometrischen Modell die Hypo- these der Vollbeschäftigung zugrunde liegt und die Unterneh- men bei schwacher Konjunktur Produktionsüberkapazitäten haben. (12) Im achten Jahresbericht über die Strukturfonds wird ein beträchtlicher Leverage-Effekt festgestellt, der sich auf Bruttoergebnisse wie die Schaffung von Arbeitsplätzen oder die Gründung von Unternehmen bezieht. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/13 f) Die Strukturfonds wirken nicht oft als Hebel für den Einsatz privater Mittel; zumindest wird dieser Aspekt in den Bewertungen nicht behandelt. empfehlen und die Anpassung der Programmplanung zu bewirken. g) In den Bewertungen wird hervorgehoben, daß der Zeitaufwand für vorbereitende Studien und Verhand- lungen, Verwaltungsverfahren zur Annahme und Durchführung einiger Vorhaben sowie die Einbindung neuer nationaler Politikkonzepte oft unterschätzt wird. 5. 17. Im Hinblick auf die Verwaltung geht aus den Bewertungen insbesondere hervor, daß sich einige Verfah- ren zur Begleitung der Programme als unzulänglich erwie- sen und die während des Programmplanungszeitraums vorgenommenen internen Anpassungen im wesentlichen die Maximierung der Mittelausschöpfung und nicht etwa eine Revision der Regionalentwicklungsschwerpunkte betrafen. 6. ZWISCHENBEWERTUNGEN (1994-1999) Entwicklung und Einbindung der Zwischenbewertungs- grundsätze 6. 1. Die Zwischenbewertung, mit der die Begleitung verstärkt werden soll, ist in dem in allen GFK, PPD und sonstigen Interventionsformen enthaltenen Kapitel über die Durchführungsbestimmungen vorgesehen. Wie dort unterstrichen wird, gehört zu den Zwischenbewertungen eine kritische Analyse der bei der Begleitung erfaßten Angaben, die Erläuterung etwaiger Abweichungen gegen- über den verfolgten Zielen und die Abschätzung der von der Intervention erwarteten Ergebnisse. Die Zwischenbe- wertungen enthalten außerdem eine Stellungnahme über die Tauglichkeit der laufenden Intervention und die Schlüssigkeit der festgesetzten Ziele. 6. 2. Während des Haushaltsjahres 1995 hob die Kom- mission in Mitteilungen an die Mitgliedstaaten hervor, die Zwischenbewertungen sollten den Begleitausschüssen angemessene Hinweise darauf geben, ob die Programme ordnungsgemäß ablaufen, etwaige Vorschläge für Umstel- lungen der Programme enthalten und ein unabhängiges objektives Bild vom Durchführungsstand vermitteln. In diesen Mitteilungen schlug die Kommission außerdem vor, sich in einer ersten Phase auf die Durchführungsbe- dingungen der Interventionsformen und insbesondere auf die Indikatoren, die Verwaltungsfähigkeiten der verant- wortlichen Stellen und die Verfahren zur Auswahl der Vorhaben zu konzentrieren. In einer zweiten Phase sollten im Zwischenbewertungsbericht die Schlüssigkeit der Stra- tegie und die Begründetheit der mit den durchgeführten Interventionen verfolgten Ziele, die Wirksamkeit des Pro- gramms (Vergleich der durchgeführten Maßnahmen und der ersten Ergebnisse mit den Zielen), die Effizienz des Programms, die ordnungsgemäße Anwendung der Ge- meinschaftspolitiken (Umwelt, öffentliche Aufträge usw. ) und die Ergebnisse in den Bereichen Beschäftigung und KMU behandelt werden, um notwendige Änderungen zu 6. 3. Im übrigen schlug die Kommission vor, eine globale Bewertung durchzuführen und in einer späteren Phase thematische Bewertungen zu einem bestimmten Bereich oder einem bestimmten geographischen Gebiet vorzuneh- men. 6. 4. Einige Mitgliedstaaten, insbesondere Spanien (13), Frankreich (14), Irland (15) und die Niederlande (16), gaben ebenfalls einen festen Rahmen für die Zwischenbewer- tung vor. In all diesen Rahmenbestimmungen ist vorgese- hen, daß sich die Zwischenbewertung auf folgende Aspekte beziehen sollte: a) Entwicklung des sozioökonomischen Umfelds; b) Analyse der Strategie und der internen und externen Kohärenz; c) Durchführungsbedingungen — unter Einbeziehung der Programmplanung und der Auswahlkriterien, der Verwaltungsorganisation, des Begleitverfahrens und der Finanzierungswege für die Vorhaben; d) Durchführung und erzielte Ergebnisse unter Berück- sichtigung der vorgesehenen Ergebnisse; e) erste Auswirkungen sowie Einschätzung der noch zu erwartenden Auswirkungen; f) Kosten — zur Feststellung der Effizienz, d. h. des Verhältnisses zwischen eingesetzten Mitteln und Ergebnissen. Abschließend sollte die Zwischenbewertung gegebenen- falls zu Vorschlägen für eine Änderung der vorgesehenen Prioritäten oder Aktionen führen. 6. 5. Der Grundsatz der Partnerschaft wurde 1988 einge- führt und soll dazu beitragen, die Wirksamkeit der Struk- turfonds zu gewährleisten. Er kommt aber im dezentrali- sierten Verwaltungssystem erst seit 1995 mit der Zwi- schenbewertung sämtlicher GFK 1994-1999 voll zum Tragen. Anläßlich dieser Zwischenbewertung wurden fol- gende Aufgaben der Begleitausschüsse festgelegt: Festset- zung der Bewertungsziele und der für die Gewährleistung eines insgesamt kohärenten Verfahrens zu erreichenden Qualitätsnormen, Anpassung des Lastenhefts an die jeweiligen regionalen Besonderheiten (unter Berücksichti- gung der Bewertungsziele) und Auswahl der Bewerter anhand von Verzeichnissen der in die engere Wahl kom- menden Bewerber, die nach öffentlicher Ausschreibung von den für die Bewertung verantwortlichen Personen (Mitglied des Begleitausschusses und Berichterstatter der (13) „Evaluación intermedia de programas operativos regionales del objetivo no. 2 (fase 1994-1996). Orientaciones sobre contenidos comunes a recoger en los pliegos de condiciones te´cnicas“, 23. Mai 1996. (14) DATAR, Calendrier re´glementaire et administratif. (15) „General criteria to underpin Terms of Reference for Mid- Term Evaluation of Operational Programmes/Community Initiatives“. (16) „Evaluatiekader voor de programma’s van de Europese Structuurfondsen, Terp Advies-CBEA Pieter van Run“, Dezember 1997. C 347/14 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Gemeinschaft) erstellt wurden. Dadurch, daß die Kausal- analyse der Strukturinterventionen partnerschaftlich erfolgte, trug die Zwischenbewertung zu einer echten Verstärkung der Partnerschaft bei. Die Tabellen 5 und 6 geben einen Überblick über die operationelle Durchfüh- rung der Zwischenbewertungen sowie über den wichtigen Beitrag, den die Mitgliedstaaten im Rahmen der Partner- schaft bei der Ermittlung der Strukturfondsauswirkungen leisteten. 6. 6. Das Konzept der partnerschaftlich durchgeführten Zwischenbewertung hatte auch erheblichen Einfluß auf die institutionellen Strukturen und die nationalen und regionalen Traditionen in den zuständigen Verwaltungen. So konnte sich die Mehrjahresprogrammplanung, bei der die Bewertung zwecks Erstellung einer kritischen Bilanz der Strukturinterventionen und Vorbereitung der notwen- digen Anpassungen unerläßlich ist, besser durchsetzen. Die Partnerschaft im Bereich Bewertung ist im Rahmen von Z1 besonders gut entwickelt. 6. 7. Gegenwärtig besteht das Ziel der Zwischenbewer- tungsarbeiten darin, sämtlichen Partnern, vom Entwickler des Programms über die mittelbewirtschaftende Stelle bis hin zu den politisch Verantwortlichen, globale Antworten zu liefern. Sie führen zur Erstellung sehr umfangreicher Berichte, die Angaben aus dem Programm selbst, aus der Vorausbeurteilung, den jährlichen Durchführungsberich- ten, den Zwischen- oder den Ex-post-Bewertungen ent- halten. Bei den Prüfungen wiesen einige Gesprächspartner jedoch darauf hin, daß nur ein Teil der Ergebnisse oder Empfehlungen bei der Entscheidungsfindung, der Verwal- tung der Vorhaben, der Änderung der Programmplanung oder der Vorbereitung der folgenden Generation von Interventionen von echtem Nutzen ist. Durchführungsverfahren 6. 8. 320 der durchgeführten 389 Zwischenbewertungen betreffen die Ziele 1, 2, 5b und 6 (17). In mehreren Mitgliedstaaten hat sich die Durchführung dieser Bewer- tungen erheblich verzögert. 6. 9. Ursprünglich sollte das Zwischenbewertungsverfah- ren in zwei getrennten Etappen durchgeführt werden. In der ersten Etappe sollten die Bewertbarkeit der einzelnen Faktoren und die damit zusammenhängenden Probleme ermittelt werden. Die zweite Etappe war die eigentliche Bewertung, die zur Erstellung eines Berichts führte. In der Praxis wurde dieses Schema nur selten angewandt. 6. 10. Im allgemeinen bestand die Kommission darauf, daß die Zwischenbewertungen von externen Sachverstän- digen durchgeführt wurden, um einerseits die auf einem (17) 36 dieser 320 Zwischenbewertungen wurden an Ort und Stelle und/oder bei der Kommission geprüft. besonderen Know-how beruhende Glaubwürdigkeit und andererseits die Unvoreingenommenheit der Schlußfolge- rungen über die Korrektheit der Strategie, die Stimmigkeit der sozioökonomischen Analysen und die objektive Quantifizierung der erwarteten Auswirkungen zu gewähr- leisten. Der Bewertungsbedarf im Bereich der Struktur- fonds hat in wenigen Jahren ein Netz externer Berater entstehen lassen, die der Kommission und den Mitglied- staaten bekannt sind. Dadurch entstand in diesem Bereich größeres Fachwissen, das sich jedoch auf einen bestimm- ten Markt beschränkt. 6. 11. Bei den Prüfungen des Hofes an Ort und Stelle wurde festgestellt, daß die externen Berater in der Praxis nicht völlig unabhängig sind. Da die Bewerter nur über wenig Zeit verfügen und faktisch davon abhängig sind, daß ihnen die mittelbewirtschaftenden Stellen der Pro- gramme die nötigen Angaben zur Verfügung stellen, ist keine klare Trennung der Tätigkeiten gegeben. Die im Hinblick auf die Leistungsfähigkeit vorgelegten Ergeb- nisse beschränken sich zu oft auf eine Wiederholung und Aktualisierung der Angaben aus dem Begleitsystem, die als externer Beitrag ausgegeben werden. 6. 12. Im übrigen wurde das übliche Verfahren einer öffentlichen Ausschreibung im Amtsblatt für die Auswahl eines Bewertungsberaters nicht immer angewandt. In den Niederlanden wurde eine beschränkte Zahl Berater, die auf einer Liste potentieller Bewerter standen, zur Abgabe eines Angebots aufgefordert. Die Auswahl wurde anschließend anhand dieser Angebote vorgenommen. 6. 13. Obwohl die Kommission regelmäßig an den Sit- zungen der Begleitausschüsse teilnimmt und dort die Möglichkeit hat, ihre Kriterien für die Auswahl von Beratern durchzusetzen, ist ihre Beteiligung an diesem Verfahren unterschiedlich. So ist die Kommission in Bel- gien, Griechenland und Portugal schon in den Fachgrup- pen oder im nationalen Ad-hoc-Ausschuß, von denen die Wahl des Beraters vorbereitet und die Durchführung der Bewertung begleitet wird, aktiv an der Auswahl des Bewerters beteiligt. In Frankreich dagegen wird die Kom- mission erst nach der Auswahl der beiden als am besten beurteilten Angebote offiziell informiert und erhält gleich- zeitig vom Präfekten der Region, der als Auftraggeber fungiert, den endgültigen Vorschlag, zu dem sie etwaige Bemerkungen abgeben soll. In den Niederlanden ist die Kommission an den Arbeiten des nationalen Ad-hoc- Ausschusses, der die Vorausbeurteilungen, die Zwischen- bewertungen und die Ex-post-Bewertungen für die unter die Ziele 1 und 2 fallenden Regionen steuert, und an den Arbeiten der Begleitausschüsse beteiligt, reagierte jedoch erst spät auf den Entwurf des Zwischenbewertungsbe- richts zum Z1-PPD Flevoland. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/15 Priorität der einzelnen Bewertungsziele tischer behandelt werden, insbesondere die Synergieef- fekte zwischen den EFRE- und den ESF-Tätigkeiten. 6. 14. Bei der Durchführung der Zwischenbewertungen wird den Bewertungszielen unterschiedliche Priorität gegeben. Nur die Prüfung des materiellen und finanziellen Durchführungsstands der Interventionen wird bei allen Zwischenbewertungen für besonders wichtig gehalten. Die Festsetzung der Prioritäten entspricht oft einem ech- ten regionalen Bedarf, wie zum Beispiel im Fall Korsikas, wo der Schwerpunkt insbesondere auf der Behandlung von Problemen der Verwaltung, Begleitung und Verbin- dung von Bewertung und Begleitung liegt. Die Verfolgung einiger Bewertungsziele wird im übrigen durch technische Probleme beeinträchtigt, zum Beispiel Probleme bei der Messung der Wirkungsindikatoren. 6. 15. Die Zwischenbewertungen legen oft nicht genü- gend Wert auf die kritische Beurteilung der eingeschlage- nen Regionalentwicklungsstrategie, auf die Lebensfähig- keit der von den Strukturfonds finanzierten Vorhaben, auf die Kriterien für die Auswahl der Vorhaben und auf die Auswirkungen im Vergleich zu den spezifischen und allgemeinen Programmzielen. 6. 16. Die ergänzende und verstärkende Wirkung der Gemeinschaftsinterventionen, deren Analyse ein Ziel der Ex-post-Bewertungen der Z1- und Z2-GFK des Pro- grammplanungszeitraums 1989-1993 war, wird im Rah- men der Zwischenbewertungen nur in Ausnahmefällen behandelt. 6. 17. Im allgemeinen ist in den Bewertungsverträgen vorgesehen, daß die Entwicklung des sozioökonomischen Umfelds, auf das die Gemeinschaftsintervention einwirkt, begleitet und aktualisiert wird. Dieser Aspekt wird in einigen Fällen systematisch (zum Beispiel für die Region Wallonien mit sehr detaillierten Übersichten), in anderen dagegen nur unzulänglich behandelt, was sich unmittelbar auf die Qualität und Aktualisierung der im allgemeinen bei der Zwischenbewertung durchgeführten Analysen von Stärken und Schwächen auswirkt. 6. 18. Berücksichtigung und Beibehaltung der internen und externen Kohärenz aller Bestandteile der einzelnen Programme (Ziele des Programms, der Unterprogramme und der Maßnahmen, ergänzende Wirkung und Synergien zwischen den Zielen und zwischen den Maßnahmen) werden nur selten systematisch untersucht. So entfallen beim OP Brandenburg im Zeitraum 1994-1996 138 % bzw. 242 % der ursprünglichen Mittelansätze auf die finanziellen Verpflichtungen zugunsten der Schwerpunkte 1. 1 (produktive Investitionen) und 1. 2 (Infrastrukturmaß- nahmen), ohne daß der Bewerter dies im Hinblick auf die Regionalentwicklungsstrategie begründete. Die Synergie- effekte werden manchmal analysiert, doch sind diese Analysen oft unvollständig. Dieser Aspekt sollte systema- 6. 19. Wenn ein ausdrückliches Ziel der Bewertung darin besteht, die Programmprioritäten und die Mittelzuwei- sung umzustellen, führen die Bewertungsarbeiten eben- falls nicht immer zu einer globalen und kohärenten Darstellung der vorgeschlagenen Änderungen und zu einer Erläuterung der Gründe. Auch die Auswirkungen der vorgeschlagenen Erweiterungen oder Kürzungen von Maßnahmen werden nicht immer präzisiert. 6. 20. Bei vielen der geprüften Bewertungen konnte der Bewerter nicht alle vertraglich vorgesehenen Ziele erfül- len, insbesondere im Hinblick auf die Bewertung der Auswirkungen. Die Zeitvorgaben und die verfügbaren Mittel standen ebenfalls nicht immer in angemessenem Verhältnis zu den Zielen. Ansätze, Methoden und Techniken 6. 21. Da die Bewertungsziele und -ansätze in den Ver- trägen oft sehr allgemein formuliert sind, bleiben die Ansätze, Methoden und Techniken oft den Bewertern überlassen, die sie manchmal während der Durchführung den angetroffenen Schwierigkeiten anpassen. So kommt es vor, daß die Bewerter die einzigen Angaben, die ihnen vorliegen, zu Indikatoren machen. 6. 22. Die entwickelten Techniken und Methoden waren nicht immer auf die Bewertungsziele abgestimmt. Im übrigen wurde noch kein wirklicher Konsens über die angemessene methodische Vorgehensweise zur Bewertung der Regionalentwicklung erzielt. Die Kommission begnügt sich damit, allgemein formulierte Hinweise auf „die besten Verfahren“ zu verteilen, ohne ihre Durchführung wirklich konkret zu koordinieren und zu vereinheitlichen. Diese Ungenauigkeit, die auf der unterschiedlichen Pro- grammplanungs-, Durchführungs- und Bewertungspraxis der Mitgliedstaaten beruht, führt zu Bewertungsberichten von sehr unterschiedlicher Qualität und erschwert die Vergleichbarkeit der Ergebnisse auf europäischer Ebene. 6. 23. So erweisen sich die zur Messung der Auswirkun- gen angewandten Techniken als lückenhaft, was insbe- sondere mit der Besonderheit und Komplexität der zu bewertenden Auswirkungen zusammenhängt: a) Es wurde nicht immer nach Kräften versucht, noch angemessenere Indikatoren zu finden, so daß sich die vorgesehenen Indikatoren manchmal lediglich dazu eigneten, den materiellen und finanziellen Durchfüh- rungsstand festzustellen. b) Die Zusammensetzung der Wirkungsindikatoren wurde nicht immer erläutert. c) Die Bewertung der sozioökonomischen Auswirkungen oder der Regionalentwicklung wird allem Anschein nach durch die wachsende Zahl der Aktionen, Unter- programme und Maßnahmen (Ziel 1) beeinträchtigt, C 347/16 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 während zahlreiche Programme zur Förderung der Umstellung und/oder der erneuten Belebung des Wirt- schaftsgefüges (OP, Gemeinschaftsinitiativen, natio- nale Programme) zusammen eingesetzt werden kön- nen. Im übrigen beziehen sich die gemeinschaftlichen und die einzelstaatlichen Aktionen manchmal auf unterschiedliche Bereiche und werden zu unterschied- lichen Zeitpunkten eingeleitet. Schließlich sind die Ziele oft nicht quantifiziert und zu allgemein formu- liert (18). In diesem Zusammenhang ist das Verhältnis zwischen den ermittelten sozioökonomischen Proble- men und den Zielen der durchgeführten Maßnahmen, Unterprogramme und Vorhaben sowie das Verhältnis zwischen diesen Zielen nicht immer einleuchtend, zumal die den verschiedenen Ebenen eines Programms zugewiesenen materiellen Indikatoren und Wirkungs- indikatoren den Erfordernissen der Bewertung des Programms nicht vollständig entsprechen. Ebenso erweist es sich als schwierig, die Ergebnisse jedes einzelnen Programms zu ermitteln und sie von den Resultaten anderer privaten, regionalen oder nationa- len Aktionen zu trennen. d) Die Anwendung von Modellen zur Abschätzung der zu erwartenden Auswirkungen auf der Grundlage der Halbzeitergebnisse und der noch erwarteten Ergeb- nisse ist weiterhin selten. Die Zwischenbewertung einiger nationaler GFK stützte sich auf ein Input- Output-Modell (Portugal) oder auf ein makroökono- metrisches Modell (Irland, Spanien), während der Verwendung regionaler Modelle nur eine Randbedeu- tung zukommt. Das im Rahmen der Zwischenbewer- tung verwendete Entwicklungsmodell für die Provinz Hainaut (Belgien) ist daher erwähnenswert. Die modellmäßige Erfassung der Auswirkungen der Maß- nahmen ist ebenfalls nicht sehr weit verbreitet, wobei der Bereich Verkehrsinfrastruktur eine Ausnahme bil- det. Erwähnt werden sollte, daß im Rahmen der Vorausbeurteilung und der Zwischenbewertung des Vorhabens Expo 1998 (Portugal) das Input-Output- Modell angewandt wurde, doch sind die Vorhersagen mit Vorsicht zu betrachten. e) Die veranschlagten Beschäftigungseffekte bleiben ebenfalls unsicher. Die Anwendung von Modellen und anderen Analyse- und Erhebungstechniken gibt nicht präzise genug Aufschluß darüber, wie viele Nettoar- beitsplätze geschaffen wurden (unter Berücksichtigung insbesondere der neuen Arbeitsplätze, die außerhalb der jeweiligen Aktion geschaffen worden wären, und der Substitutionseffekte) und wie dauerhaft die Arbeitsplätze sind. Außerdem erhält man dabei im allgemeinen keine Angaben darüber, wie viele geschaf- fene Arbeitsplätze nicht der Durchführung des Pro- gramms zuzuschreiben sind. (18) Beispielsweise heißt es: Belebung des ländlichen Raums, Ver- stärkung des regionalen Wirtschaftsgefüges, Strukturänderun- gen im Zusammenhang mit der Regionalentwicklung. 6. 24. In einigen Bewertungsverträgen ist im Rahmen des Bottom-up-Konzepts die Durchführung von Erhebungen vorgesehen, die bei den an der lokalen Wirtschaftsent- wicklung beteiligten Partnern und den Endbegünstigten, einschließlich der in den Genuß von Gemeinschaftsbeihil- fen kommenden Unternehmen, stattfinden sollen, um den Beitrag des Gemeinschaftsprogramms quantitativ oder qualitativ zu beurteilen. Die Ergebnisse der Erhebungen sind manchmal angesichts der Zahl der antwortenden Unternehmen und Partner nicht repräsentativ; außerdem ist ihre Zuverlässigkeit nicht gewährleistet, da nicht immer Kontrollen stattfinden. Im Hinblick auf die Ergebnis- und Wirkungsindi- 6. 25. katoren ist folgendes festzustellen: a) Es dauert oft lange, bis Angaben und Statistiken verfügbar sind. b) Die vorhandenen Angaben beziehen sich auf geogra- phische Gebiete, die nicht den Zielgebieten entspre- chen. c) Die Angaben zu den Unternehmen werden nicht auf der Ebene der Betriebsstätten erfaßt. Dies führt zu einer Verfälschung der lokalen Statistiken, wenn sich in dem Gebiet eine einzige Betriebsstätte befindet, das Unternehmen aber im gesamten Staatsgebiet noch über mehrere weitere Betriebsstätten verfügt. d) Viele Statistikinstitute können die Gesamtangaben nicht detaillierter aufgliedern, um gezielt ein Gebiet, eine Region oder einen Problembereich zu betrach- ten. 6. 26. Wenn der Bewerter, sei es nun zur Behebung eines Mangels oder als Ersatz für die vorgesehenen Indikato- ren, Indikatoren vorlegt, die sich besser zur Wirkungsana- lyse eignen, erläutert er diese nicht und läßt hinsichtlich ihrer Anwendbarkeit Fragen offen. Außerdem weist er nicht immer auf die zu ihrer konkreten Anwendung noch erforderlichen Untersuchungen hin und legt auch keinen Kostenvoranschlag vor. Es ist ebenfalls hervorzuheben, daß die Indikatoren zu den Programmzielen ohne Anga- ben über entsprechende Zeitreihen nicht ohne weiteres quantifiziert werden können. Durchführung der Ziel-2-Programme (1994-1996) 6. 27. Die Ergebnisse der Zwischenbewertung und Begleitung der PPD, GFK und OP des Zeitraums 1994- 1996 zeigen ein Mißverhältnis zwischen den geplanten Finanzierungen und der tatsächlichen Programmdurch- führung. Trotz äußerst zahlreicher Anpassungen der Pro- gramme am Ende des Programmplanungszeitraums 1994- 1996, die auf eine Ausschöpfung der finanziellen Beteili- gungen abzielten, wurden durchschnittlich rund 12 % der Mittel des Programmplanungszeitraums 1994-1996 auf 1997-1999 übertragen. So ergibt sich die Gefahr, daß die Inanspruchnahme der Mittel zum Hauptanliegen wird 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/17 und die Rolle der Bewertung möglicherweise unterschätzt wird, insbesondere im Hinblick auf die Kohärenz zwi- schen den Zielen, den bereitgestellten Mitteln und den Auswirkungen der Strukturinterventionen. 7. AUSWIRKUNGEN DER STRUKTURFONDS UND BE- WERTUNGSMODELLE Auswirkungen auf der Ebene der GFK und Programme Ergebnisse der Modelle im Hinblick auf die Auswirkun- gen der Strukturfonds 7. 1. Die für die makroökonomische Bewertung im Bereich der Strukturfonds verwendeten Modelle (siehe Anhang III) führen aufgrund ihrer jeweiligen Eigenheiten zur einer differenzierten Beurteilung folgender Auswir- kungen der Strukturfonds: a) Verwirklichung der Strukturfonds-Ziele im Hinblick auf das BIP-Wachstum, die tatsächliche Konvergenz des Pro-Kopf-BIP, Beschäftigung und Arbeitslosig- keit; b) Einhaltung der Bedingungen für den Strukturfonds- Einsatz (z. B. Zusätzlichkeit der Mittel und Dauerhaf- tigkeit der Entwicklung, insbesondere im Hinblick auf die Eindämmung der Staatsverschuldung und die Kontrolle der Zahlungsbilanz, die Einkommensvertei- lung und den Umweltschutz); c) Angebots- und Nachfrageeffekte; d) Wirksamkeit der Strukturfonds-Instrumente (z. B. öffentliche Investitionen, Investitionen in Humanres- sourcen und Beihilfen an private Unternehmen). BIP-Wachstum 7. 2. Wie aus Tabelle 7 hervorgeht, zeigen die zur Bewer- tung der Strukturfonds-Auswirkungen verwendeten wich- tigsten Modelle (HERMIN, OGM und DIO) für die Kohäsionsländer ein Wachstum des BIP und folglich eine Konvergenzentwicklung. Nach diesen Modellen beläuft sich das auf die Strukturmaßnahmen im Rahmen der GFK zurückzuführende kumulative Wirtschaftswachstum der Kohäsionsländer, ausgedrückt als reales Wachstum des BIP, in den Jahren 1994-1999 auf 5,5 % für Portu- gal, 5,9 % für Griechenland, 2,6 % für Spanien und 3,3 % für Irland. Diese Ergebnisse beruhen auf der Annahme, daß das Zusätzlichkeitsprinzip voll und ganz eingehalten wird; sie können sich folglich im Falle einer Nichteinhaltung ändern (siehe Ziffern 8. 11-8. 13). Im übrigen sind die Ergebnisse der verschiedenen makroöko- nomischen Modelle kohärent genug, um die Auswirkun- gen der GFK 1994-1999 auf das reale Wachstum des jährlichen BIP als plausibel anzusehen. Dennoch überwie- gen kurzfristig weiterhin die Nachfrageeffekte, da sich Auswirkungen auf das Angebot erst viel später ergeben. In dem für die Region Hainaut verwendeten Regionalmo- dell HELM werden die Auswirkungen des PPD auf das jährliche Wachstum der Gesamtwertschöpfung im Zeit- raum 1994-2002 mit 1,7 bis 2,5 % bewertet. Dagegen scheinen die Wachstumseffekte der Strukturfonds im Falle des Mezzogiorno in Italien sehr beschränkt zu sein, bzw. fast bei null zu liegen. Das QUEST-Modell der Kommission enthält Hypothesen für Unternehmen und Verbraucher und gibt Schätzwerte für die Wachstums- und Beschäftigungseffekte an, die niedriger liegen als bei den früheren Modellen. Die in diesem Modell gezeigten Verbesserungen beim Wachstumspotential und bei der Verringerung der Arbeitslosigkeit werden erst längerfristig sichtbar. 7. 3. Die durchschnittliche Beschleunigung des auf die im Rahmen der GFK durchgeführten Strukturmaßnahmen zurückzuführenden jährlichen Wachstums geht aus Tabelle 8 hervor: Die Multiplikatoreffekte eines durch die GFK herbeigeführten einprozentigen BIP-Wachstums füh- ren im Zeitraum 1994-1999 zu einem zusätzlichen jährli- chen Wachstum von 0,2 bis 0,3 % für die Nachfrageseite und von höchstens 0,2 % für die Angebotsseite. Wirt- schaftlich gesehen tragen die vom Modell HERMIN aufgezeigten, überwiegend die Nachfrageseite betreffen- den Effekte, die bei Einstellung der Gemeinschaftsbeihil- fen wegfallen würden, nur dann zur Verwirklichung der Ziele des Artikels 130a des Vertrages bei, wenn sie mit dauerhaften, die Produktionskapazitäten der betreffenden Regionen verstärkenden Angebotseffekten einhergehen. Da sich die Angebotseffekte wesentlich später entwickeln als die Nachfrageffekte, werden die entsprechenden Mul- tiplikatoreffekte möglicherweise unterschätzt. Am Pro-Kopf-BIP gemessene tatsächliche Konvergenz 7. 4. Die im Rahmen der Strukturfonds verwendeten Modelle verdeutlichen, daß ein Konvergenzprozeß nicht immer gewährleistet ist und einige GFK-Programme bestenfalls den Abbau von Unterschieden, aber kaum eine Konvergenzentwicklung bewirken. (HERMIN Irland prognostizieren Bradley 7. 5. Für 1994) und Honohan (HERMIN 1997) die möglichen Auswirkungen der im Rahmen der GFK 1989-1993 und 1994-1999 gezahlten Beihilfen auf das Pro-Kopf-BIP. Nach Einschätzung von Bradley wird sich der Beitrag der GFK 1994-1999 im Angleichungsprozeß als geringfügig erweisen, während die GFK nach Ansicht von Honohan in diesem Prozeß eine erhebliche Rolle spielen. Der Vor- hersage von Beutel (1997) zufolge wird Irland auch ohne das GFK 1994-1999, durch das sich die jährliche Wachs- tumsrate lediglich um 0,6 % erhöhe, zum restlichen Europa aufschließen. Ebenso würden sich die jährlichen Wachstumsraten Spaniens, Portugals und Griechenlands im Zeitraum 1994-1999 infolge der Strukturfonds um C 347/18 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 0,4 %, 1,1 % und 1 % erhöhen. Dies wirkte sich in jedem Fall positiv auf die am Pro-Kopf-BIP gemessene reale Konvergenzentwicklung aus. 7. 6. Die anhand des Modells OGM vorgenommenen Vorhersagesimulationen zur Annäherung des realen Pro- Kopf-BIP an den Unionsdurchschnitt führen zu Schätzun- gen, nach denen der Nettobeitrag der GFK zur Konver- genz in den Kohäsionsländern gering bleibt, obwohl die 1995 prognostizierten Trends für Irland zu pessimistisch ausfallen (siehe Tabelle 9). des Zeitraums 1994-1999 ergibt. Die HERMIN-Studie für Griechenland gelangt ebenfalls zu der Schlußfolge- rung, daß die Infrastrukturinvestitionen („hard infrastruc- ture“) im Rahmen der GFK stärker zum BIP-Wachstum beitragen als Investitionen in Humanressourcen. Die Anwendung des Modells OGM (Pereira 1991) zur Bewer- tung der Auswirkungen des Austauschs von Beihilfen für private Investitionen oder für Investitionen in Humanres- sourcen durch zusätzliche Beihilfen für Infrastrukturinve- stitionen zeigt eine Verbesserung des durch die Struktur- fonds bewirkten BIP-Wachstums und des Konvergenzpro- zesses. 7. 7. Im Hinblick auf die Region Hainaut berücksichtigt das Modell HELM bei der Zwischenbewertung die Aspekte der realen Konvergenz. Die voraussichtliche jähr- liche Wachstumsrate der Region liegt dem Modell zufolge dank der Strukturfonds rund 1,4 bis 1,6 % über dem europäischen Durchschnitt, wodurch der Abstand zu anderen Regionen tatsächlich verringert werden könnte. 7. 8. Diese Schätzungen verdeutlichen, daß sich die Strukturfonds-Beteiligungen angesichts der unterschiedli- chen regionalen oder sektoriellen Produktionsstrukturen der unter Ziel 1 fallenden Mitgliedstaaten unterschiedlich auswirken. Sie bestätigen auch die Notwendigkeit einer besseren Programmplanung der Strukturfonds, damit die konvergenzorientierten Strukturfonds-Interventionen eine Verbesserung der Produktionskapazität der Wirtschaft ermöglichen. Beschäftigung und Arbeitslosigkeit 7. 9. In Tabelle 10 sind die Bewertungsergebnisse zu den Auswirkungen der Strukturfonds auf Beschäftigung und Arbeitslosigkeit zusammengefaßt. Alle Studien gelangen zu dem Ergebnis, daß die GFK zur Schaffung von Netto- arbeitsplätzen führen. Diese neuen Arbeitsplätze entste- hen häufig im Sektor nichthandelbare Dienstleistungen, während sich die Produktivitätseffekte der GFK haupt- sächlich auf den industriellen Sektor konzentrieren. Schließlich geht aus einigen Studien hervor, daß indu- strielle Arbeitsplätze aufgrund einer erhöhten Arbeitspro- duktivität abgebaut werden. Verpflichtung zur Zusätzlichkeit und Kofinanzierung 7. 11. Anhand der Modelle läßt sich außerdem die Bedeutung der Zusätzlichkeit und der öffentlichen Kofi- nanzierung bewerten. So gelangt Honohan (HERMIN, 1997) zu der Einschätzung, daß die Auswirkungen des GFK auf die Wachstumsrate der irischen Wirtschaft ohne die Verpflichtung zur öffentlichen Kofinanzierung um 1 % niedriger gewesen wären und auch die Beschäftigung weniger stark angewachsen wäre. Dagegen würden sich Honohan zufolge der Anteil der Staatsverschuldung am BIP und der Zahlungsbilanzüberschuß stärker verringern, wenn keine öffentliche Kofinanzierung vorgeschrieben wäre. In Portugal führt die Kofinanzierungsverpflichtung nach der HERMIN-Bewertung zu einem zusätzlichen BIP- Wachstum von insgesamt 1,3 %, bewirkt jedoch gleich- zeitig eine weniger positive Entwicklung bei der Staatsver- schuldung. 7. 12. In der HELM-Bewertung für die Region Hainaut wird der Zusätzlichkeit große Bedeutung beigemessen. Das durchschnittliche Wertschöpfungswachstum im Zeit- raum 1994-1999 beläuft sich nach dieser Bewertung in den drei Szenarien — Regionalpolitik mit PPD, Fortset- zung der Regionalpolitik ohne Gemeinschaftsbeihilfe, Regionalpolitik abzüglich des PPD — auf 2,5 %, 1,7 % bzw. 0,1 %; außerdem wird davon ausgegangen, daß die Wachstumsrate der Beschäftigung von 0,8 % auf 0,2 % sinken würde. Die Lage der Industrie würde sich ebenfalls erheblich verschlechtern. Die HELM-Bewertung führte durch Zugrundelegung verschiedener Zuschußsätze auch zu der Feststellung, daß der Investitionsbeihilfesatz nicht dem Investitionsanreiz entspricht und daß zahlreiche Investitionen auch bei niedrigeren Beihilfeniveaus durch- geführt worden wären. Wirksamkeit der GFK-Instrumente Dauerhafte Entwicklung für Spanien, 7. 10. Aus den HERMIN-Bewertungen Irland und Portugal geht hervor, daß die Beihilfen für öffentliche Investitionen, insbesondere im Infrastruktur- bereich, zu mehr Wachstum führen als die Beihilfen für Investitionen in Humanressourcen (ausgenommen Spa- nien) und für private Investitionen. Dies wird anhand von Tabelle 11 deutlich, in der für die einzelnen Bereiche das BIP-Wachstum aufgeführt ist, das sich durch eine einpro- zentige Erhöhung des GFK-Anteils am kumulierten BIP 7. 13. Aus Tabelle 10 geht hervor, daß die Auswirkungen der Strukturfonds auf die Handelsbilanz, die Leistungsbi- lanz oder die Staatsverschuldung nicht immer bewertet werden. Die verschiedenen Studien gelangen im übrigen zu unterschiedlichen Schlußfolgerungen. So bewirkt der auf die GFK zurückzuführende Wirtschaftsaufschwung in einigen Fällen durch die Steuereinnahmen eine Verbesse- rung der öffentlichen Finanzen, während die GFK nach anderen Modellen Haushaltsdefizite verursachen. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/19 Rolle der makroökonomischen Bewertung im Struktur- fonds-Entscheidungsprozeß 7. 14. Angesichts der kurzfristigen Auswirkungen der Strukturfonds auf die Nachfrage neigen die Zwischenbe- wertungen dazu, die Schwierigkeiten der Behörden mit der Ausschöpfung der Gemeinschaftsmittel zu überschät- zen und die längerfristigen Auswirkungen auf das Ange- bot zu unterschätzen. Daher können die Umstellungen oder Umprogrammierungen der OP und GFK in die falsche Richtung gehen. Es besteht nämlich die Gefahr, daß Maßnahmen oder Vorhaben, bei denen die Gemein- schaftsmittel nicht schnell genug in Anspruch genommen werden, insbesondere in komplexen Durchführungsberei- chen wie im innovativen Bereich oder bei neuen Techno- logien, zugunsten von wesentlich weniger produktiven, bereits bestehenden Strukturen gestrichen werden, ohne daß den makroökonomischen Aspekten einer nachhalti- gen Entwicklung immer Rechnung getragen wird. 7. 15. In diesem Zusammenhang sind ergänzende makro- ökonomische Bewertungen zu den Aspekten Nachhaltig- keit, Wachstum und Konvergenz vor jeder Entscheidung über die ursprüngliche Programmplanung oder ihre Umstellung unerläßlich. In zahlreichen Fällen, z. B. in Spanien, Griechenland oder den neuen deutschen Län- dern, fanden jedoch im Rahmen der Zwischenbewertung bereits ohne gründliche makroökonomische Analyse Änderungen der Programmplanung statt. Für die Z1- Regionen in Deutschland wurde bei der Zwischenbewer- tung keine makroökonomische Wirkungsanalyse vorge- nommen. Auswirkungen auf der Ebene der Unterprogramme, Maßnahmen und Vorhaben 7. 16. Obwohl die Unterprogramme und Maßnahmen die treibende Kraft der Strukturfonds-Planung sind, fin- den auf dieser Ebene sehr wenige Bewertungen statt. Diese Schwierigkeiten bei der Wirkungsmessung lassen sich u. a. auf die Streuung, die fehlende Festlegung und Kohärenz vieler Unterprogramme und Maßnahmen sowie auf die unzulängliche Quantifizierung ihrer spezifischen Ziele zurückführen. 7. 17. Dieser Mangel erschwert die Ermittlung und Mes- sung der Synergie- und Ergänzungseffekte zwischen den Maßnahmen oder zwischen verschiedenen Programmen. Im übrigen ist der Zusammenhang zwischen den allge- meinen Zielen des Programms und den spezifischen Zie- len der Unterprogramme oder Maßnahmen sehr oft unklar. So wurde in den Zwischenbewertungsberichten auf zahlreiche Kohärenzprobleme in den Programmen des Z1-GFK 1994-1999 hingewiesen. schriebenen makroökonomischen Modelle läßt sich die Wirksamkeit der wichtigsten GFK-Instrumente — öffent- liche Investitionen, private Investitionen und Investitionen in Humanressourcen — nur hinsichtlich ihres jeweiligen Beitrags zum BIP-Wachstum bewerten. Da sich die Infra- strukturausgaben ergänzend für das Privatkapital auswir- ken, ergeben sich in diesem Bereich offenbar auch höhere Erträge; die Infrastrukturmaßnahmen beschleunigen an- scheinend die Konvergenzentwicklung stärker als andere Investitionsformen (siehe Tabelle 11). 7. 19. Die Wahl der Maßnahmen oder Unterprogramme des Programms und ihre Finanzierung ist jedoch im Hinblick auf das bei der Regionalentwicklung erzielte nachhaltige endogene Wachstum nicht ohne Bedeutung. Die von der Kommission oder den Mitgliedstaaten part- nerschaftlich auf der Ebene der Unterprogramme oder Maßnahmen durchgeführten Bewertungsarbeiten bilden im übrigen noch keine ausreichende Grundlage für die Untersuchung der sich aus einer spezifischen Maßnahme für andere Gebiete oder Sektoren ergebenden Folgen oder für den Vergleich mit anderen Maßnahmen ähnlicher Zielsetzung. Außerdem muß bei der Wirkungsanalyse der Maßnahmen oder Unterprogramme auch die ursprüngli- che Abwägung zwischen Wachstum und Gleichbehand- lung der Regionen, durch die eine Vorentscheidung getroffen wurde, berücksichtigt werden, um die erwarte- ten und die erzielten Effizienzgewinne zu gewichten. 7. 20. Auf der Ebene der Vorhaben wird grundsätzlich zur Genehmigung der Finanzierung eines Vorhabens eine Analyse der Kosten und Vorteile durchgeführt. Diese Analyse ist in Artikel 5 der Verordnung (EWG) Nr. 2083/93 (EFRE) für Großvorhaben mit Gesamtkosten von über 25 Mio ECU bei Infrastrukturvorhaben und über 15 Mio ECU bei produktiven Investitionen vorge- schrieben. Diese Vorausbeurteilungen der Großvorhaben finden bei der Bearbeitung der Anträge auf Gemein- schaftsbeteiligung statt und sind ausschlaggebend für die Festlegung des Finanzrahmens. Diesbezügliche Ex-post- Bewertungen sind in den Strukturfondsverordnungen jedoch nicht vorgesehen. Die Kommission kann daher nicht verlangen, daß zur Überprüfung, ob die eingesetzten tatsächlich die erwarteten Gemeinschaftsmittel auch sozialen und wirtschaftlichen Vorteile nach sich gezogen haben, Ex-post-Bewertungen durchgeführt werden. Durch diese Schwachstelle im Bewertungsverfahren für Großvor- haben wird das gesamte Bewertungskonzept in diesem Bereich unwirksam, denn eine Vorausbeurteilung ist nur dann sinnvoll, wenn später tatsächlich eine Ex-post- Bewertung stattfindet. Außerdem ließen sich mit diesen mikroökonomischen und sektorbezogenen Studien auch die potentiellen Auswirkungen der Strukturfonds auf die Produktivität beurteilen, was sie zu einem leistungsfähi- gen Instrument für die kurz- und mittelfristige Analyse dieser Auswirkungen machen könnte. 7. 18. Im übrigen eignen sich nur wenige Techniken zur Messung der Wirkung eines Unterprogramms oder einer spezifischen Maßnahme. Anhand der vorstehend be- 7. 21. Synergien und Ergänzungswirkungen müssen bei der Bewertung der Vorhaben ebenfalls berücksichtigt werden. Sie werden noch nicht ausreichend bzw. nur C 347/20 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 oberflächlich bewertet. Um die voraussichtlichen Auswir- kungen nicht zu verringern, müssen die Synergie- und Ergänzungseffekte der Vorhaben unbedingt abgestimmt werden. 8. 4. Das gleiche gilt für die statistischen Datenbanken, deren Mängel die Aussagekraft der Indikatoren fraglich erscheinen lassen und das Begleit- und Bewertungsverfah- ren erheblich beeinflussen. 7. 22. Bei der Zwischenbewertung werden oft Probleme der Programmverwaltung behandelt, während die Krite- rien, auf deren Grundlage die Vorhaben ausgewählt wur- den (z. B. Nachhaltigkeit des Vorhabens oder Beitrag des Vorhabens zur Regionalentwicklung), vernachlässigt wer- den. Das Programmverwaltungssystem muß jedoch gewährleisten, daß die Projektauswahlkriterien zu opti- malen Programmergebnissen führen. Insbesondere sind Vorhaben zu vermeiden, die im Bereich der Entwicklung von sehr geringem zusätzlichen Nutzen sind, selbst wenn sie den Vorteil haben, daß die Mittel sehr rasch verwen- det werden können. Das Auswahlverfahren für die Vor- haben muß zur Gewährleistung seiner Kontrolle und Bewertbarkeit transparenter gestaltet werden. 8. SCHLUSSFOLGERUNG 8. 5. Die Vielzahl der derzeit angewandten mehr oder weniger angemessenen Indikatoren wirkt sich nachteilig auf die Qualität der Bewertung aus und verhindert ihren praktischen Einsatz. Unter Berücksichtigung der sich durch die Regionalisierung der Angaben ergebenden Besonderheiten und der materiellen Möglichkeiten der Datenerfassung sollte eine sorgfältige Auswahl einer klei- nen Zahl von Wirkungsindikatoren getroffen werden, die zur Begründung oder Umstellung eines strukturpoliti- schen Konzepts unerläßlich sind. Die Zuverlässigkeit die- ser Indikatoren müßte kontrolliert werden. Die Vergleich- barkeit der Indikatoren und ihre Aggregation auf euro- päischer Ebene sind verbesserungsbedürftig. 8. 6. Damit die Bewertungen im Entscheidungsprozeß und bei der operationellen Verwaltung der Strukturfonds in vollem Umfang berücksichtigt werden können, ist zu gewährleisten, daß sie transparent und objektiv sind, bedarfsgerechte Ziele verfolgen und zu einem angemesse- nen Zeitpunkt fertiggestellt werden. 8. 1. Die Bewertung der Strukturinterventionen der Gemeinschaft ist eine sich aus den Beschlüssen des Rates ergebende rechtliche Verpflichtung und findet zur Zeit im Rahmen der Partnerschaft weitreichende Anwendung. Sie ist zu einer Entscheidungshilfe für die Konzeption und Verwaltung der Interventionen geworden und trägt zu einer besseren Kenntnis von Auswirkungen und Nutzen der Interventionen bei. Für den Zeitraum 1994-1999 wurden im Laufe des Jahres 1997 von den Begleitaus- schüssen (19) mehr als 250 Halbzeitbewertungen fertigge- stellt. 8. 7. Zur Gewährleistung objektiver Bewertungsergeb- nisse muß die Unabhängigkeit der Bewerter gegenüber den mittelbewirtschaftenden Stellen und den zuständigen Behörden gewahrt bleiben. 8. 8. Die Verwendung eines gemeinsamen Bezugsrahmens würde die Verständlichkeit und Vergleichbarkeit der Bewertungsberichte und den Erfahrungsaustausch erleich- tern. 8. 2. Mit der Revision der Strukturfondsreform erreicht die Bewertung ein Reifestadium, das schon jetzt durch bessere methodische Vorgaben konsolidiert werden sollte. Nachdem die Ergebnisse des MEANS-Programms nicht zufriedenstellend ausfielen, bedarf es noch erheblicher Anstrengungen, um Bewertungsmethoden festzulegen, die sich am besten zur Messung der sozioökonomischen Auswirkungen regionaler Entwicklungsprogramme eig- nen. 8. 3. Besondere Anstrengungen auf allen Ebenen sollten auch den Indikatoren gelten — unter den Gesichtspunk- ten Schlüssigkeit, Art der Informationserfassung und ent- stehende Kosten. Auch die qualitativen Aspekte sollten förmlich festgelegt werden. Ohne erneute Fortschritte in diesen Bereichen droht das Bewertungsverfahren zu stag- nieren. (19) In den Begleitausschüssen sind die betroffenen nationalen Stellen und die Kommisson vertreten. 8. 9. Für jede Bewertung sollten besser umsetzbare Ziele festgelegt werden. Der Auftrag und das Lastenheft, die im allgemeinen von der Kommission genehmigt werden, soll- ten klare Angaben darüber enthalten, welche Methoden jeweils am besten für regionale, sektorielle oder nationale Aspekte oder für spezifische kurz- oder langfristige Effekte geeignet sind. Die Stärken und Schwächen aller anderen Methoden sollten mit den Methoden der Kom- mission verglichen werden. Ebenso sollte der Bezugsrah- men für jede Bewertung eine von der Kommission vorge- schlagene Mindestliste von Indikatoren zur Messung der Leistungsfähigkeit der Programmziele enthalten, um eine für Analysezwecke unerläßliche Kohärenz zu gewährlei- sten. Natürlich können zur Vervollständigung und Verfei- nerung dieser Analyse auch andere Indikatoren der sozio- ökonomischen und strukturellen Lage verwendet wer- den. 8. 10. Angesichts der vielen unterschiedlichen Bewer- tungskonzepte sollte die Kommission den Bewertern in der Ausschreibungsphase eine wesentlich bessere Erläute- rung ihres jeweiligen Ansatzes abverlangen, insbesondere 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/21 im Hinblick auf die Art der zu messenden Auswirkungen und auf die Dauer dieser Auswirkungen. Dadurch wäre sie in der Lage, zu beurteilen, inwieweit die eingesetzten Methoden alle Aspekte einbeziehen. Außerdem sollte die Bewertung eine detaillierte Analyse der Zusammenhänge zwischen Programmzielen und Schwerpunkten und Durchführungsmaßnahmen enthalten und unbedingt eine Rangfolge für Ziele, Ergebnisse und Durchführung der Programme, Schwerpunkte und Maßnahmen vorgeben. 8. 15. In makroökonomischen Modellen wird eine grundlegende Unterscheidung zwischen den kurzfristige- ren Nachfrageeffekten und den strukturellen Anpassun- gen des Angebots getroffen. Bei der Planung der Struktur- fonds-Interventionen sollte stärkeres Gewicht auf eine Verbesserung der Produktionskapazität der Wirtschaft gelegt werden, um die Dauerhaftigkeit der Auswirkungen zu gewährleisten und eine zu große Abhängigkeit von der Nachfrage — durch die sich die Gemeinschaftshilfe lang- fristig als unerläßlich erweisen würde — zu vermeiden. 8. 11. In diesem Zusammenhang sollten die Bewertungen und insbesondere die Zwischenbewertungen eine besser auf die Empfänger abgestimmte Gliederung enthalten, durch die ihre Wirksamkeit erhöht und den spezifischen Erwartungen besser entsprochen werden könnte. Ebenso sollte eine bessere Kostenkontrolle angestrebt werden, denn der Kommission sind die Kosten der im Rahmen der Partnerschaft durchgeführten Bewertungen nicht immer bekannt. 8. 12. Die Kommission sollte auch angeben, auf welchen Aspekten der Regionalpolitik das Hauptaugenmerk der Bewertung liegen sollte: Zusätzlichkeit, Konvergenz, Part- nerschaft, Konzentration, Beschäftigung, endogene Wirt- schaftsentwicklung und soziale Wohlfahrt. Das Pro-Kopf- BIP darf nicht der einzige Maßstab zur Bewertung der Wirksamkeit der Strukturinterventionen sein. 8. 13. Die Einschätzung der Effekte und Auswirkungen und der verstärkenden Wirkung der Gemeinschaftsaktion sollte sich auf nationale und regionale Entwicklungsmo- delle und auf maßnahmenbezogene Wirkungsmodelle stützen. 8. 16. Da sich die Angebotseffekte erst längerfristig ein- stellen, werden bei der Zwischenbewertung im allgemei- nen eher die Nachfrageeffekte betrachtet. Die Kommis- sion sollte sich bemühen, Instrumente zu entwickeln, mit denen sich die Auswirkungen auf die Wirtschaftsstruktur begleiten und bewerten lassen. 8. 17. Die makroökonomischen Modelle lassen auch erkennen, daß sich eine auf Wirtschaftswachstum ausge- richtete Politik nicht immer mit einer dauerhaften Ent- wicklung vereinbaren läßt. Das Verhältnis zwischen den Wachstums- und den Dauerhaftseffekten sollte noch genauer analysiert und bei der Planung der Struktur- fonds-Interventionen systematisch berücksichtigt werden. 8. 18. Die Auswirkungen der Verpflichtung zur Zusätz- lichkeit und zur öffentlichen Kofinanzierung sind nicht leicht abzugrenzen und werden nicht immer untersucht. Dieser Aspekt müßte systematischer und gründlicher ana- lysiert werden. 8. 14. Die makroökonomischen Ergebnisse der Struktur- maßnahmen sollten unter Berücksichtigung der Unzuläng- lichkeiten der angewandten Modelle, der Nebenwirkun- gen der Maßnahmen und ihrer Gesamtauswirkungen auf die soziale Wohlfahrt verfeinert werden. 8. 19. Die Bewertung als solche soll nicht an die Stelle des politischen Entscheidungsprozesses treten, bei dem weitergehende Erwägungen einbezogen werden; als Hilfs- mittel für eine wirtschaftliche und wirksame Verwaltung der Strukturinterventionen der Gemeinschaft, bei der den sozioökonomischen Ergebnissen Rechnung getragen wird, ist sie jedoch unerläßlich. Dieser Bericht wurde vom Rechnungshof in seiner Sitzung vom 23. September 1998 in Luxemburg angenommen. Für den Rechnungshof Bernhard FRIEDMANN Präsident Kosten der direkt von der Kommission (GD XVI) finanzierten Bewertung des ersten GFK Tabelle 1 Mitgliedstaaten Ziel 1 1989-1993 Ziel 2 Gemeinschaftsinitiativen Thematische Bewertungen Sonstige Insgesamt ex ante ex post ex ante ex post ex ante ex post (ECU) Belgien Dänemark Deutschland Griechenland Spanien Frankreich Irland Italien Luxemburg Niederlande Portugal Vereinigtes Königreich EG 35 000 31 000 42 000 35 000 35 000 35 000 53 000 150 172 207 372 97 662 109 572 150 552 193 022 72 572 17 500 35 000 17 500 70 000 35 000 35 000 17 500 35 000 122 500 69 040 25 520 138 570 117 090 253 185 96 580 15 880 47 925 131 500 14 815 65 963 10 514 143 480 526 347 739 274 197 228 201 915 395 955 15 128 46 816 452 706 223 428 98 400 35 395 25 000 593 350 260 977 104 371 464 064 390 156 25 000 625 169 626 694 77 500 151 845 30 000 151 845 151 845 35 000 550 256 187 898 96 034 299 550 1 456 714 1 455 713 881 291 810 551 1 255 088 48 508 154 741 1 340 897 1 229 694 740 971 Insgesamt 266 000 980 924 385 000 910 105 3 117 154 3 227 676 1 070 791 9 957 650 Quelle: Europäische Kommission. C 3 4 7 2 2 / D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n 1 6. 1 1. 9 8 Kosten der direkt von der Kommission (GD XVI) finanzierten Bewertung des zweiten GFK (bis 1. April 1998) Tabelle 2 Mitgliedstaaten 1994-1999 Ziel 1 1994-1996 1997-1999 1994-1999 Ziel 2 Ziel 2 GI ex ante Zwischenbew. ex ante Zwischenbew. ex ante ex ante Thematische Bewertungen Kohäsionsstudien Entwicklung der Methoden und sonstiges Insgesamt (ECU) Belgien Dänemark Deutschland Griechenland Spanien Frankreich Irland Italien Luxemburg Niederlande Österreich Portugal Finnland Schweden Vereinigtes Königreich EG 24 000 352 527 38 940 108 303 68 995 86 841 56 000 83 809 19 000 17 671 60 000 71 774 49 150 1 030 037 4 171 941 1 382 117 481 092 1 067 557 1 514 311 37 499 11 827 1 631 604 339 214 281 295 70 885 26 530 23 312 94 784 85 102 186 122 105 287 9 143 46 431 33 000 16 750 27 000 154 591 127 300 611 348 9 278 128 450 209 078 807 462 722 690 61 741 104 924 171 201 326 614 247 636 10 600 9 600 29 200 19 000 45 600 31 169 10 600 10 600 30 000 1 559 39 702 23 286 29 725 36 091 4 326 33 185 460 4 406 245 35 247 35 845 4 314 127 986 2 576 126 19 417 33 357 62 217 55 167 48 367 56 967 52 317 49 417 14 597 46 817 38 417 52 122 90 000 4 030 438 1 045 981 75 547 1 551 316 4 358 697 1 842 384 1 700 175 1 180 200 2 539 868 96 541 269 677 233 944 1 765 268 682 578 555 931 415 217 6 877 328 Insgesamt 684 483 12 371 906 935 352 3 400 422 196 369 248 391 2 704 112 619 179 4 030 438 25 190 652 Quelle: Europäische Kommission. 1 6 1 1 9 8. D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n C 3 4 7 / 2 3 C 347/24 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Zusammenhang zwischen Kontrolle, Begleitung und Bewertung Tabelle 3 Mittel RR Realisierung RR Wirkung Input Output Ergebnis Bezugsfaktoren Übereinstimmung mit den Verwaltungsvorschriften Normen für eine ordnungsgemäße Mittelbewirtschaftung Zufriedenheit der Bürger rr Kontrolle RR rr Begleitung (der Verwaltung) RR rr Bewertung (der Auswirkungen) RR Quelle: MEANS Tabelle 4 Beurteilung des Nutzens eines Programms Auswirkungen qq QQ QQ Ergebnisse qq QQ QQ Gesellschaft Bedarf Anforderungen QQ QQ QQ Öffentliche Maßnahmen Spezifische Gesamtziele RR Mittel Ressourcen RR Interven- tionen Maßnahmen Schlüssigkeit Bewertung Quelle: MEANS Effizienz Wirksamkeit Nutzen 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/25 Tabelle 5 Zahl der Zwischenbewertungen für die einzelnen Mitgliedstaaten und Ziele Mitgliedstaaten Ziel 1 Ziel 2 Ziel 3 Ziel 4 Ziel 5a Ziel 5b Ziel 6 Insgesamt Belgien Dänemark Deutschland Griechenland Spanien Frankreich Irland Italien Luxemburg Niederlande Österreich Portugal Finnland Schweden Vereinigtes Königreich 1 8 28 27 6 11 24 1 1 25 12 Insgesamt 144 4 2 9 9 27 11 1 5 4 1 5 13 91 5 1 13 12 1 1 1 1 1 4 1 1 5 1 1 2 1 1 1 1 1 4 1 42 19 1 1 1 1 1 1 1 1 8 3 1 8 7 20 13 1 5 7 2 5 11 83 19 6 40 28 58 55 11 50 4 13 15 25 13 14 38 389 1 1 2 Auf GFK-Ebene wurden fünf Zwischenbewertungen eingeleitet (in Griechenland, Irland, Italien, Portugal und Spanien), und es wurde eine Zusammenfassung der Bewertungsarbeiten zu den Ziel-1-Aktionen in Deutschland erstellt. Quelle: Europäische Kommission. Durchführungsstand der Halbzeitbewertungen für die Ziele 1, 2 und 6 Tabelle 6 Mitgliedstaat Begleitausschüsse Ausschreibungen Ausgewählte Einrichtung Zahl der vorgelegten oder vorgesehenen Berichte Z1 Kohäsionsländer Spanien 1 GFK-Ausschuß 12 regionale Unterausschüsse 7 sektorielle EFRE-Unteraus- schüsse 1 regionaler/zentraler Ausschuß (Kantabrien) abgeschlossen 12 abgeschlossen 7 abgeschlossen 1 externe 12 externe 7 externe 1 Bericht vorgesehen für 07/97 12 Berichte vorgesehen für 05/97; 1 Bericht vorgelegt 7 Berichte vorgesehen für 05-06/97; 1 Bericht vorgelegt 1 abgeschlossen 1 externe Bericht vorgesehen für 05/97 Griechenland 1 GFK-Ausschuß Auswahl im Gange Irland Portugal 13 regionale Unterausschüsse 17 sektorielle Unterausschüsse 13 abgeschlossen 7 abgeschlossen 3 veröffentlicht 1 GFK-Ausschuß 9 sektorielle Ausschüsse 1996 eingeleitet 1 GFK-Ausschuß 7 regionale Unterausschüsse 3 multiregionale Unterausschüsse 7 sektorielle Unterausschüsse abgeschlossen abgeschlossen abgeschlossen abgeschlossen 6 Angebote einge- gangen 13 externe Auftragsvergabe läuft — — 13 Berichte vorgelegt (06/97) 1 externe 9 externe 1 externe 7 externe 3 externe 14 externe 1 Halbzeitbericht vorgelegt (03/97) 9 Halbzeitberichte vorgelegt (03/97) Bericht vorgesehen für Ende 97 7 Berichte vorgelegt (erstes Quartal 97) 3 Berichte vorgelegt (erstes Quartal 97) 12 Berichte vorgelegt (erstes Quartal 97) — 1 Bericht vorgesehen für 07/97 — 1 Bericht vorgesehen für 09/97 Z1 Sonstige Länder Deutschland 1 GFK-Ausschuß 6 regionale Unterausschüsse 3 Unterausschüsse (ESF, EAGFL, FIAF) 1997 (beschränkt) 1996 — 1 externe 6 externe — 1 Abschlußbericht vorgesehen für 08/97 6 Berichte vorgelegt (05/97) — Belgien 1 PPD-Ausschuß 03. 09. 94 1 externe Abschlußbericht vorgelegt (05/97) C 3 4 7 2 6 / D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n 1 6. 1 1. 9 8 Mitgliedstaat Begleitausschüsse Ausschreibungen Ausgewählte Einrichtung Zahl der vorgelegten oder vorgesehenen Berichte Frankreich 6 PPD-Ausschüsse 6 abgeschlossen 6 externe Korsika: Halbzeitbericht vorgelegt (12/96) Bezirke Avesnes, Douai und Valenciennes der Region Nord-Pas-de-Ca- lais: Bericht vorgesehen für 07/97 Martinique/Guadeloupe: Berichte vorgesehen für 06/97 Re´union/Frz. -Guyana: Berichte vorgesehen für Ende 97 Italien 1 GFK-Ausschuß 8 regionale Unterausschüsse 12 multiregionale Unteraus- schüsse Liste der in die en- gere Wahl kommen- den Bieter verfügbar, Auswahl für 11/97 vorgesehen eingeleitet Veröffentlichung im Gange, Auswahl vor- gesehen (Som- mer 1997) 0 Interne Bewertung: Bericht vorgesehen für 07/97 Externe Bewertung: Bericht vorgesehen für 06/98 2 von 8 externen 0 Berichte vorgesehen für Anfang 98 — Niederlande 1 PPD-Ausschuß 03/96 1 externe Bericht vorgesehen für Ende 1997 Vereinigtes König- reich 2 PPD-Ausschüsse 1:02/96 (Merseyside) 1 externe 1 Bericht vorgelegt (Anfang 97) 2:1996 (H&I) 1 externe 1 Bericht vorgesehen für Sommer 97 Nordirland 1 GFK-Ausschuß 9 sektorielle Unterausschüsse 1:06/96 Mai 96 1 externe 9 externe Bericht vorgelegt Mai 97 9 Berichte vorgelegt (erstes Halbjahr 97) Österreich 1 Ausschuß abgeschlossen 1 externe Bericht vorgesehen für Herbst 97 Z6 Finnland 1 PPD-Ausschuß abgeschlossen 1 externe Bericht vorgesehen für 10/97 Schweden 1 PPD-Ausschuß abgeschlossen 1 externe Bericht vorgelegt (06/97) Quelle: Europäische Kommission. 1 6 1 1 9 8. D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n C 3 4 7 / 2 7 C 347/28 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Auswirkungen der zweiten GFK-Programme (einschließlich der nationalen Kofinanzierung) auf das BIP-Wachstum Tabelle 7 GFK 1994-1999 als prozentualer Anteil am BIP HERMIN (1) (durchschnittliche jährliche Wachstumsraten für 1994-1999, in Prozent) Nachfrage Angebot Insgesamt OGM (2) (durchschnittliche jährliche Wachs- tumsraten für 1994- 1999, in Prozent) DIO (3) (durchschnittliche jährliche Wachs- tumsraten für 1994- 1999, in Prozent) Griechenland Spanien(4) Portugal Irland 5,9 2,6 5,5 3,3 0,9 0,6 1,6 0,5 0,9 0,3 0,2 0,2 1,8 0,8 1,8 0,7 0,6 0,2 0,4 0,1 1 0,5 1 0,6 (1) HERMIN: Ökonometrisches Modell, das auf dem Originalmodell HERMES (Harmonised Econometric Research for Modelling Economic Systems) basiert, jedoch von geringerem Umfang ist (Min), daher (HER)MIN. Siehe Kapitel 7, insbesondere die Ziffern 7. 2, 7. 5, 7. 10 und 7. 11, sowie Ziffer 5 von Anhang III. (2) Optimales Wachstumsmodell (Optimal Growth Model (OGM)) von Pereira (1991 und 1995). Siehe Kapitel 7, insbesondere die Ziffern 7. 2, 7. 6 und 7. 10, sowie Ziffer 7 von Anhang III. (3) Dynamisches Input-Output-Modell (DIO) von Beutel (1995, 1996 und 1997). Siehe Ziffer 6. 23 d) und Ziffer 9 von Anhang III. (4) In Spanien kommen nicht alle Regionen für eine Förderung im Rahmen von Ziel 1 in Betracht. Quelle: Von der Kommission kofinanzierte Bewertungen auf der Grundlage der entsprechenden makroökonomischen Modelle. Jährliche Wachstumsmultiplikatoren der GFK-Programme im Zeitraum 1994-1999 Tabelle 8 HERMIN OGM DIO Nachfrage Angebot Insgesamt Griechenland Spanien Portugal Irland 0,2 0,2 0,3 0,2 0,2 0,1 0 0,1 0,4 0,3 0,3 0,3 0,1 0,1 0,1 0 0,2 0,2 0,2 0,2 Quelle: Von der Kommission kofinanzierte Bewertungen auf der Grundlage der entsprechenden makroökonomischen Modelle. Tabelle 9 Konvergenz des realen Pro-Kopf-BIP beim OGM-Ansatz 9 0 90 8 0 80 7 0 70 60 6 0 50 5 0 40 4 0 s t t i n h c s h c r u D U E s e d % - G r e e c e Griechenland I r e l a n d Irland P o r t u g a l Portugal S p a i n Spanien 30 3 0 1993 1 9 9 3 1995 1 9 9 5 1997 1 9 9 7 1999 1 9 9 9 2003 2 0 0 3 2007 2 0 0 7 Anmerkung: Diesen auf der Grundlage bereits relativ alter Daten erstellten Vorhersagesimulationen sollten nur die Entwick- lungstrends, nicht aber die absoluten Vorhersagewerte entnommen werden. Letztere erweisen sich insbesondere für Irland als zu pessimistisch. Quelle: Bewertungen auf der Grundlage des Modells OGM (Pereira, 1995). 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/29 Auswirkungen der GFK-Programme auf die Beschäftigung und Nachhaltigkeit im Zeitraum 1989-1999 Tabelle 10 Verfasser Beschäftigung und Arbeitslosigkeit Nachhaltigkeit Öffentliche Finanzen Zahlungsbilanz Bradley et al. [HERMIN] — Gesamtbeschäftigung steigt — Öffentliche Kreditauf- Verschlechterung der Handelsbilanz — Beschäftigung im verarbeitenden Sektor sinkt, was teilweise auf Produktivitätssteigerungen zurückzuführen ist — Beschäftigung im nichthandelbaren Sektor steigt Honohan (Hrsg. ) [HERMIN] — Gesamtbeschäftigung steigt — Gesamtbeschäftigung steigt — Arbeitslosigkeit sinkt nahme steigt zu Beginn des Programms und fällt später bei einset- zenden Nachfrage- effekten — Wachstumseffekte bei unveränderter öffentli- cher Kreditaufnahme sind geringer — Siehe vorangehende Studie — Schulden-/BSP-Kennzahl sinkt beträchtlich — Siehe Studie von Brad- ley et al. — Schulden-/BSP-Kennzahl sinkt Verbesserung der Zahlungs- bilanz, solange EU-Mittel fließen Verschlechterung der Han- delsbilanz aufgrund der Nachfrageeffekte — Gesamtbeschäftigung steigt — Primärdefizit nimmt zu nicht berücksichtigt — Arbeitslosigkeit in den Städten sinkt — Gesamtbeschäftigung steigt nicht berücksichtigt nicht berücksichtigt — Beschäftigung im verarbeitenden Sektor sinkt — Beschäftigung im Bereich der Handelsdienstlei- stungen steigt Vollbeschäftigungsmodell Beschäftigung steigt und Arbeitslosigkeit sinkt Öffentliches Primärdefizit als Anteil des BIP steigt Fiskaldefizit steigt von 1989-1993 und sinkt 1994- 1995 — Beschäftigung steigt in Portugal, Griechenland nicht berücksichtigt und Spanien — In Irland führt das erste GFK zu sinkender Be- schäftigung, während das zweite GFK neue Ar- beitsplätze schafft Leistungsbilanzdefizit nimmt zu, außer 1997-1999 in Spa- nien Verschlechterung der Lei- stungsbilanz Einfuhren-Ausfuhren steigen in Portugal und Griechen- land, sinken aber in Irland Herce und Sosvilla- Rivero [HERMIN] Christodoulakis und Kalyvitis [HERMIN] Sema-Gruppe [HELM] Pereira (1995) [OGM] Lolos und Zonallas [BBM] Beutel [DIO] FIDIMS Beschäftigung steigt in Nord- und Süditalien nicht berücksichtigt nicht berücksichtigt C 347/30 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Der durch eine einprozentige Steigerung des Anteils der GFK am BIP erzielte kumulierte prozentuale Zuwachs des BIP (BSP) (1994-1999) Tabelle 11 Infrastrukturinvestitionen Investitionen in Humanressourcen Privatinvestitionen Spanien Irland Portugal 2 1,4 1,9 3,3 1,2 1,3 1,5 1,1 nicht verfügbar Quelle: HERMIN-Bewertungen. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/31 ANHANG I ZUSAMMENFASSUNG DER METHODEN FÜR DIE EX-POST-BEWERTUNG DER ZIEL-1-GFK DES ZEITRAUMS 1989-1993 1. Die Ex-post-Bewertung der Ziel-1-GFK des Zeitraums 1989-1993 hatte folgende ausdrückliche Ziele: a) Beurteilung der GFK-Strategie und der mit den GFK verfolgten Ziele und Gewinnung von Erkenntnissen für zukünftige Aktionen; Analyse der sich für die ursprünglich festgesetzten Ziele ergebenden Folgen aus einer Neufestlegung und Anpassung der Interventionen während des Durchführungszeitraums; b) Erstellung einer ersten Bilanz der materiellen Ergebnisse der wichtigsten Aktionen auf der Ebene der GFK und der OP und erste Beurteilung ihrer Auswirkungen; c) Analyse der Wirksamkeit der Durchführungsverfahren und Ermittlung der daraus für etwaige zukünftige Anpassungen zu ziehenden Lehren. 2. Der Hauptberater, dem die Koordinierung der von anderen Beratern in den jeweiligen Mitgliedstaaten durchgeführten Bewertungen oblag, erarbeitete folgende methodische Ansätze: a) Zur Erreichung des ersten Ziels, d. h. zur Bewertung der internen Logik der GFK und OP und ihrer Anpassungen seit 1989 und spezifischer zur Analyse der Gründe für diese Anpassungen, des zusätzlichen Nutzens der Gemeinschaftsfinanzierung, der internen und externen Kohärenz, der Abstimmung der Strategie auf die Probleme und der Angemessenheit der Finanzierungen, sollten folgende Arbeiten, die einem Top-down-Ansatz entsprechen, durchgeführt werden: — Erfassung von Informationen und Schlüsselangaben: Finanzdaten, vorher festgesetzte Ziele, erwarteter Output/erwartete Auswirkungen, Zielgruppen und -bereiche, wichtigste eingesetzte Instrumente, Zahl der genehmigten Vorhaben/Maßnahmen, Zahl der durchgeführten Vorha- ben; — Beschreibung der Programmumgebung und ihrer Entwicklung (Ausgangslage — derzeitige Lage); Ermittlung der externen Faktoren, die die Entwicklung des Programms und seinen Erfolg/sein Scheitern beeinflussen; Analyse der grundlegenden Probleme und Ursachen; Festlegung der Schlüsselindikatoren für die Regionalentwicklung, einschließlich der Indikatoren für eine Verän- derung der Ungleichheiten; — Ermittlung der politischen Instrumente (Darlehen, Subventionen, technische Hilfe); — Aufstellung einer Rangordnung der Ziele, Ermittlung der Rangebenen und des Verhältnisses zwischen Zielen und Instrumenten. b) Die zur Erreichung des zweiten Ziels durchzuführenden Analysen beruhten sowohl auf Top-down- als auch auf Bottom-up-Ansätzen: — Output- und Wirkungsanalyse auf der Ebene der OP, Maßnahmen und Vorhaben unter Berücksichtigung von „Nettoverlusten“ und Substitutions- und Multiplikatoreffekten; — Analyse der relativen Wirksamkeit von Maßnahmen und Maßnahmenkombinationen; Analyse der Kausalfaktoren für Erfolge/Mißerfolge; — Input-Output-Vergleich. Außerdem sollten Schlüsselindikatoren und fakultative Indikatoren festlegt werden. c) Zur Erreichung des dritten Ziels sollte die Wirksamkeit der Durchführungsverfahren auf der Ebene der GFK und OP und einer beschränkten Anzahl von Maßnahmen analysiert sowie festgestellt werden, welche Verbesserungen bei der Programmplanung, Durchführung, Begleitung und Bewertung erzielt wurden und noch zu erzielen waren; in jedem Mitgliedstaat sollten die Verfahren der Entscheidungsfindung, Planung, Finanzkontrolle, Durchführung, Begleitung und Kontrolle, die Finanzierungswege, die Partnerschaft, die Zusätzlichkeit der Mittel, die Koordi- nierung der Fonds sowie die Verfahren zur Vereinfachung, Harmonisierung, Flexibilisierung und Schaffung von mehr Transparenz untersucht werden; die Durchführung und Begleitung einer kleinen Stichprobe von Maßnahmen/Großvorhaben sollte vertieft analysiert werden. d) Es wurden Ad-hoc-Stichproben von Programmen, Maßnahmen und Vorhaben ausgewählt, um zum einen eine begrenzte Zahl materieller und Wirkungsindikatoren zu erläutern und zum anderen vertiefte Analysen durchzuführen. C 347/32 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 ANHANG II ZUSAMMENFASSUNG DES EX-POST-BEWERTUNGSKONZEPTS FÜR ZIEL 2 (1989-1993) Die Ex-post-Bewertung der im Rahmen von Ziel 2 durchgeführten Gemeinschaftsinterventionen des Programmplanungszeitraums 1989-1993, an denen im allgemeinen der EFRE und der ESF beteiligt waren, umfaßte folgende Analysen und Studien: a) allgemeine Analysen, die sich auf alle unter Ziel 2 fallenden Regionen und Gebiete bezogen. Damit sollte die sozioökonomische Lage vor Beginn der im Rahmen von Ziel 2 durchgeführten SF-Interventionen mit der sozioökonomischen Lage nach Beendigung dieser Interventionen verglichen werden. Außerdem sollten die angewandte Strategie, die Rangordnung der Ziele, Prioritäten und Maßnahmen, die Indikatoren, die geplanten und nicht geplanten Auswirkungen, die Synergien zwischen den Programmtei- len und das Zusammenwirken der verschiedenen Fonds analysiert werden. Diese Analysen sollten auf der Grundlage der Angaben in den GFK und OP, der jährlichen Durchführungsberichte oder der dem Begleitausschuß vorgelegten Berichte und, sofern verfügbar, der Vorausbeurteilungen und Ex-post- Bewertungen vorgenommen werden; b) vertiefte Studien, die sich auf 22 Regionen bezogen. Diese Studien hatten folgende Ziele: — gründliche Untersuchung der Angemessenheit der GFK, OP und Maßnahmenarten; — Analyse der Organisationsstrukturen und der Modalitäten der Programmverwaltung; — Bewertung der Auswirkungen und „Verstärkungseffekte“, die auf die GFK und OP zurückgeführt werden können; — Bewertung der Kosten und der Wirksamkeit der Maßnahmen; — Untersuchung des Beitrags der im Rahmen des Z2-Programms durchgeführten Interventionen im Regionalentwicklungsprozeß. Die vertieften Bewertungen erfolgen nach dem Bottom-up-Konzept. Ziel dabei ist es, zunächst das Verfahren zur Auswahl der Aktionen, die Art der Aktionen, die Verwaltungsverfahren, die Auswirkungen und die verstärkende Wirkung der Aktionen, die Synergien und die Zusätzlichkeit der Mittel zu prüfen und dann durch Aggregation der gewonnenen Informationen auf die Ebene der Maßnahme und schließlich des Programms zu gelangen. ANHANG III MERKMALE DER IM RAHMEN DER STRUKTURFONDSBEWERTUNG VERWENDETEN MAKROÖKONOMISCHEN MODELLE 1. Im Rahmen der makroökonomischen Bewertung im Bereich der Strukturfonds wurden hauptsächlich folgende Modelle verwendet: a) ökonometrische Modelle, z. B. HERMIN (1), HELM (2) und QUEST II (3); b) berechenbare allgemeine Gleichgewichtsmodelle, z. B. OGM (4) und BBM (5); c) Input-Output-Modelle, z. B. DIO (6) und FIDIMI (7); d) strukturelle Grenzwertanalyse. (1) HERMIN: ökonometrisches Modell, das auf dem Originalmodell HERMES („Harmonised Econometric Research for Modelling Economic Systems“) basiert, jedoch von geringerem Umfang ist (Min), daher (HER)MIN. (2) HELM: „Hainaut Economic Lead-in Model“. (3) „QUEST II: A multi-country business cycle and growth model — Economic Papers no. 123“ — Oktober 1997. GD II — Wirtschaft und Finanzen. (4) Optimales Wachstumsmodell („Optimal Growth Model (OGM“)) von Pereira (1991 und 1995). (5) Bourguignon-, Branson- und de Melo-Modell (BBM) von Lolos und Zonzilas (1992). (6) „Dynamisches Input-Output-Modell“ (DIO) von Beutel (1995, 1996 und 1997). (7) Beratungsgesellschaft FIDIMI, Bewertung der makroökonomischen Auswirkungen der Ziel-1-GFK für Italien und der Durchführungsmechanismen. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/33 Die Tabellen III. 1 und III. 2 geben eine schematische Übersicht über die Merkmale dieser Modelle in den untersuchten Fällen. Tabelle III. 3 zeigt die modellmäßige Erfassung der GFK-Merkmale. 2. 3. Im übrigen erlaubt die auf multisektorieller Basis für ein Zeitintervall von mehr als zehn Jahren durchgeführte Simulation der wirtschaftlichen Entwicklung in den unter Ziel 1 fallenden Mitgliedstaa- ten eine Einschätzung des durch die Strukturfonds verursachten Strukturwandels und eine Bewertung der Dauerhaftigkeit des Aufholprozesses, den die Gemeinschaftshilfe unterstützen und verstärken soll. Im Rahmen seiner Untersuchung ließ der Hof eine Analyse erstellen (8), mit der beurteilt werden sollte, inwieweit sich diese makroökonomischen Techniken für die Messung der Auswirkungen der Strukturin- terventionen eignen und wirksam zu den strategischen Entscheidungen im Programmplanungsprozeß beitragen können. 4. Es ist festzustellen, daß die Erkenntnisse zu den endogenen oder exogenen Faktoren, die den Erfolg der Strukturprogramme beeinflussen, sich je nach den angewandten Methoden und Konzepten unterschei- den. Mit den makroökonomischen Modellen sollen nämlich die Mechanismen des Wirtschaftssystems eines Landes oder einer Region dargestellt und die Auswirkungen eines exogenen Schocks, wie z. B. die Intervention der Strukturprogramme, abgebildet oder simuliert werden. Die reale Lage der Wirtschaft läßt sich jedoch mit einer einzigen Darstellung nicht vollständig wiedergeben. 5. Das ökonometrische Modell HERMIN berücksichtigt die Besonderheiten der einzelnen Mitgliedstaaten und aggregiert die Auswirkungen auf nationaler Ebene. Es geht von der Annahme aus, daß die Produktionskapazitäten der Volkswirtschaften nicht voll ausgelastet sind und die mit steigenden Investitionsausgaben verbundenen Multiplikator- und Akzeleratoreffekte zu einem Produktions- und Beschäftigungszuwachs führen. Das Modell liefert allem Anschein nach zufriedenstellende Ergebnisse im Hinblick auf die Nachfrageeffekte. Im Hinblick auf die Angebotseffekte bewirkt der Rückgang der Arbeitslosigkeit dem Modell zufolge unter Berücksichtigung der Phillips-Kurve einen Anstieg der Löhne bei gleichzeitiger Beschränkung der Auswirkung auf die Inflation. Im übrigen werden die Produktivi- tätseffekte ausdrücklich berücksichtigt, indem modellmäßig erfaßt wird, wie sich externe Einsparungen durch Steigerung und Verbesserung des Humankapitals und des öffentlichen und privaten materiellen Kapitals auf die Produktivität auswirken. Die Berücksichtigung dieser Aspekte ist jedoch von Land zu Land unterschiedlich. Das Modell liefert nur partielle Angaben zur Dauerhaftigkeit der Entwicklung; insbesondere werden Wechselkursänderungen, die das Zahlungsbilanzgleichgewicht gewährleisten sol- len, oder Schwankungen der Fiskaltransfers nicht berücksichtigt. 6. Das für die Zwischenbewertung des Z1-PPD 1994-1999 der Provinz Hainaut (Belgien) eingesetzte makroökonometrische Modell HELM ist eines der wenigen Modelle, die spezifisch den Regionalent- wicklungsansatz berücksichtigen: Es betrachtet die mit der langfristigen Produktivität verbundenen Auswirkungen des endogenen Wachstums, obwohl sich auf die Strukturfonds-Interventionen zurückzu- führende Produktivitätsverbesserungen weitgehend auf den industriellen Sektor beschränken und nur die Arbeitsproduktivität betreffen. Im Hinblick auf die Verwendung der Produktionskapazitäten und die sich durch die Investitionen für die Nachfrage ergebenden Multiplikator- und Akzeleratoreffekte liegen dem Modell ähnliche Annahmen zugrunde wie dem Modell HERMIN; hiervon ausgehend liefert es Angaben/Vorhersagen zu globalen und aggregierten Auswirkungen des PPD auf die Wirtschaft der Region Hainaut (z. B. insgesamt bewirkte Investitionen, Wertschöpfung oder Beschäftigung in der verarbeitenden Industrie und im Bereich der Handelsdienstleistungen) im Zeitraum 1994 bis 2002/ 2005. Es ist anzumerken, daß das Modell HELM zwar die regionalen Ausfuhren berücksichtigt, nicht jedoch die Einfuhren aus anderen Regionen, so daß die Gefahr besteht, daß die Nachfrageeffekte überbewertet werden. Die Nachfrage wird noch dadurch verstärkt, daß weder die Lohnanpassungen im Zusammenhang mit dem Rückgang der Arbeitslosigkeit noch höhere Kosten oder Kapazitätsbeschrän- kungen berücksichtigt wurden. Das Modell HELM macht außerdem wenig Angaben zur Entwicklung der Arbeitslosigkeit und zum Beschäftigungsangebot. Schließlich beruht es auf in früheren Perioden erfaßten statistischen Angaben, die nicht anhand von anderen einschlägigen Informationsreihen überprüft wurden. 7. Die berechenbaren allgemeinen Gleichgewichtsmodelle beziehen sich insbesondere auf die nationale Ebene. Sie verdeutlichen die langfristigen Angebotseffekte, die sich durch die Strukturinterventionen der Gemeinschaft ergeben. Das Modell OGM geht auf der Grundlage des Konzepts eines intertemporalen endogenen Wachstums davon aus, daß die Produktionsfaktormärkte im Gleichgewicht sind und die (8) Der Hof nahm die Dienste eines externen Bewerters in Anspruch, der sich auf makroökonomische Modelle und auf die europäische Wirtschaft spezialisiert hat. C 347/34 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Produktionskapazitäten der Volkswirtschaft voll ausgelastet sind. Änderungen bei der Nachfrage wirken sich nicht auf Produktion und Beschäftigung aus, und die Strukturfondsprogramme können das Wachstum nur durch Produktivitätssteigerungen stimulieren; diese Produktivitätseffekte sind in der Produktionsfunktion klar dargelegt. Das Modell versucht, eine optimale Lösung für das jeweilige Land zu ermitteln, indem eine intertemporale Wohlfahrtsfunktion maximiert wird. Ausgehend von der Annahme einer Lage ohne Unsicherheiten wird erwartet, daß die Wirtschaftsakteure, die genau vorhersehen können, wieviel Mittel ihnen zugewiesen werden und auf welchen Zeitraum sich die Hilfe erstreckt, optimale Verbrauchs- und Investitionsentscheidungen treffen. Schließlich sieht das optimale Wachstumsmodell langfristig ein Gleichgewicht der Zahlungsbilanz und ein Haushaltsgleichgewicht voraus. 8. Das Modell BBM sieht im Hinblick auf einige Sektoren ein Gleichgewicht der Arbeitsmärkte voraus, so daß die Nachfrageeffekte keinen Einfluß auf Produktion und Beschäftigung haben; dagegen wird im Hinblick auf andere Sektoren davon ausgegangen, daß eine höhere Nachfrage zu Wachstum führt. Das Modell bezieht ebenfalls Produktivitätseffekte im Zusammenhang mit technologischen Veränderungen ein, die zu einer Input-Reduzierung führen. 9. Mit dem Input-Output-Modell DIO soll das Verhältnis zwischen allen einer Volkswirtschaft zur Verfügung stehenden Ressourcen und dem gesamten Endverbrauch dargestellt werden. So werden die Verflechtungen zwischen den verschiedenen Wirtschaftssektoren eines Landes aufgezeigt, die durch sektorübergreifenden Verbrauch miteinander verbunden sind. Der Input-Output-Ansatz maximiert die Auswirkungen der Strukturinterventionen auf die Nachfrage und läßt die Angebotseffekte unbeachtet (Produktivitätseffekte, Lohneffekte, inflationäre Anpassungen). Die Dauerhaftigkeit der Entwicklung wird nicht behandelt. Das Modell FIDIMI ist eine Kombination aus dem allgemeinen Gleichgewichts- modell und dem Input-Output-Modell und ermöglicht eine Analyse der Auswirkungen von in Süditalien durchgeführten Gemeinschaftsinterventionen auf Norditalien. 10. Von den sonstigen Techniken zur Bewertung der Auswirkungen der regionalpolitischen Maßnahmen verwendet Eurostat insbesondere die strukturelle Grenzwertanalyse, und zwar zur Bewertung der Auswirkungen der SF in einigen unter die Ziele 1 oder 2 fallenden Fördergebieten. Ziel dieser Analyse ist es, den Grenzwert zu ermitteln, die Differenz zwischen der tatsächlichen und einer simulierten Lage, die sich durch Anwendung der geschätzten nationalen Trends ergibt. Bei den so abgegrenzten Auswirkungen werden jedoch die Ergebnisse des gerade bewerteten Programms, der anderen nationalen und europäischen politischen Aktionen und der früher in der Regionalpolitik eingeschlagenen Richtung miteinander vermischt. Außerdem enthalten die 1997 von Eurostat durchgeführten Studien Angaben zu Indikatoren, von denen die neuesten aus dem Jahre 1993 stammen. Dadurch wird der Wert der Schlußfolgerungen erheblich relativiert. 11. Das Modell QUEST II dient der Analyse der Volkswirtschaften der Mitgliedstaaten und ihrer Wechselbeziehungen zur übrigen Welt, vor allem zu den Vereinigten Staaten und Japan. Das Modell betrachtet insbesondere die Übertragung der Auswirkungen der Wirtschaftspolitik auf nationaler und internationaler Ebene. Ursprünglich sollte es Simulationszwecken und nicht so sehr Vorhersagezwecken dienen. Das Modell QUEST II integriert stärker als das vorangehende Modell die Angebotseffekte und berücksichtigt mehr die Wechselbeziehungen im Hinblick auf die Bestände. Die sich als Verhaltensän- derungen der Wirtschaftsakteure niederschlagenden Auswirkungen werden jedoch bei QUEST II nur wenig oder unzulänglich berücksichtigt. Tabelle III. 1 Grundlegende Merkmale der makroökonometrischen Modelle Verfasser Modell Mitgliedstaat oder Region Nachfrageeffekte Angebotseffekte Löhne Produktivität Nachhaltigkeit Bradley et al. (1994) HERMIN Irland und Portugal Honohan (Hrsg. ) (1997) HERMIN Irland — Standardansatz nach Key- nes: Investitionsnachfrage stimuliert Gesamtnach- frage — Um Arbeitslosigkeit ver- schobene Phillips-Kurve er- faßt Beschäftigung, Löhne und Inflation — Arbeitsmärkte sind nicht automatisch im Gleichge- wicht — Volkswirtschaft nicht voll ausgelastet — Monetärer Bereich und Wechselkurse sind nicht modellmäßig erfaßt — Einfluß der durch den Nachfragezuwachs verur- sachten Inflation ist be- grenzt — Steigende Löhne verursa- chen Zuwanderung von Arbeitskräften nach Irland — Investitionen in Human- kapital haben keinen Lohn- effekt — Auf den GFK beruhende Investitionen führen zu einer Erhöhung der sekto- ralen Gesamtfaktorproduk- tivität in Irland — In Portugal keine Produkti- vitätseffekte privater Inve- stitionen und einiger Infra- strukturausgaben — Modellmäßige Erfassung der Produktivitätseffekte ist fraglich, insbesondere hinsichtlich des Human- kapitals — Produktivitätseffekte kön- nen zu geringerer Beschäfti- gung führen Herce und Sosvilla- Rivero (1994) HERMIN Spanien Siehe Modell für Irland, je- doch keine Wanderung der Arbeitskräfte Siehe Modell für Irland Siehe Modell für Irland, jedoch folgende Unterschiede: — Humankapitalinvestitionen steigern die Arbeitsproduk- tivität und nicht die ge- samte Faktorproduktivität — Beihilfen für private Inve- stitionen verringern die Ko- sten für Kapitalnutzer Zahlungsbilanz: — Nachfrageeffekte führen zu erhöhten Einfuhren — Produktivitätseffekte ver- bessern die Ausfuhren und schaffen Anreize für aus- ländische Direktinvestitio- nen in Irland — Exogene Wechselkurse er- lauben keine volle Bewer- tung der Zahlungsbilanz Öffentliche Finanzen: — Begrenzte modellmäßige Erfassung des öffentlichen Sektors — Kreditaufnahme des öffent- lichen Sektors steigt auf- grund der GFK — Simulation mit unverän- derter Kreditaufnahme des öffentlichen Sektors Siehe Modell für Irland, je- doch keine Verbindung zwi- schen Produktivitätseffekten und ausländischen Direkt- investitionen. 1 6 1 1 9 8. D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n C 3 4 7 / 3 5 Verfasser Modell Mitgliedstaat oder Region Nachfrageeffekte Angebotseffekte Löhne Produktivität Nachhaltigkeit Christodoulakis und Kalyvitis (1995) HERMIN Griechenland — Siehe Modell für Spanien — Modellmäßige Erfassung der Wechselkurse Siehe Modelle für Irland Sema-Gruppe (1997) HELM Hainaut — Ansatz nach Keynes/Kal- Keine Lohn- und Preiseffekte dor — Investitionsnachfrage sti- muliert Gesamtnachfrage — Nachfrage nach Arbeits- kräften ist modellmäßig erfaßt — Arbeitskräfteangebot und Arbeitslosigkeit sind nicht modellmäßig erfaßt — Importe aus anderen Re- gionen sind nicht modell- mäßig erfaßt Siehe Modell für Spanien, je- doch folgende Unterschiede: — Nominale Wechselkurse passen sich an, um einen konstanten realen Wechsel- kurs aufrechtzuerhalten — Annahme, daß fiskalpoliti- sche Regelung die öffentli- che Schuldensituation sta- bilisiert Keine Beurteilung der Folgen für die öffentliche Schulden- situation oder die Zahlungs- bilanz Siehe Modell für Spanien und Irland, jedoch folgende Unter- schiede: — Humankapitalinvestitionen senken die Einheitskosten der Arbeit — Beihilfen für private Inve- stitionen haben keine Pro- duktivitätseffekte — Investitionen im Bereich „Soft infrastructure“ füh- ren zu mehr öffentlicher Beschäftigung — Programme im Rahmen der GFK steigern in erster Linie die Produktivität des Fak- tors Arbeit im verarbeiten- den Sektor — Bei der Berichterstattung über die Ergebnisse wird nicht zwischen Nachfrage- und Angebotseffekten un- terschieden C 3 4 7 3 6 / D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n 1 6. 1 1. 9 8 Grundlegende Merkmale der berechenbaren allgemeinen Gleichgewichts- und Input-Output-Modelle Tabelle III. 2 Verfasser Modell Mitgliedstaat oder Region Nachfrageeffekte Nachhaltigkeit Angebotseffekte Pereira (1991) Pereira (1995) Optimales Wachs- tumsmodell (Opti- mal Growth Mo- del, OGM) Portugal — Keine keynesianischen Nachfra- geeffekte — Alle Faktormärkte sind im Gleichgewicht — Volkswirtschaft ist voll aus- gelastet Portugal, Griechenland, Irland und Spanien Löhne Produktivität — Lohnanpassung zur Arbeitsmarkträu- mung Produktivitätseffekte, weil öffentliches, priva- tes und Humankapital in der Produktion — Intertemporale Wohl- fahrtsmaximierung ge- währleistet optimale dynamische Lösung Lolos und Zonzilas (1992) Bourguignon-, Branson- und de Melo-Modell (BBM) Griechenland — Keynesianische Nachfrageeffekte — Arbeitsmärkte in einigen Sekto- ren geräumt, in anderen nicht — Feste und freie Wechselkurse werden berücksichtigt — Lohnanpassung zur Arbeitsmarkträu- mung in einigen Sektoren — Um die Arbeitslosig- keit verschobene Phillips-Kurve in den anderen Sekto- ren Beutel (1995, 1996, 1997) Dynamisches In- put-Output-Modell (DIO) Griechenland, Portugal und Spanien Keynesianische Nachfrageeffekte Keine Lohneffekte. 1 6 1 1 9 8. D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n C 3 4 7 / 3 7 — Beschränkungen hin- sichtlich der Zahlungs- bilanz und der öffentli- chen Finanzen wird Rechnung getragen — Keine Beschränkungen hinsichtlich der öffent- lichen Kreditaufnahme — Maße der Einkom- mensungleichheiten werden berücksichtigt Keine modellmäßige Erfas- sung von Beschränkungen hinsichtlich der Zahlungs- bilanz und der öffentlichen Finanzen — Fraglich, inwieweit Investitionen in öf- fentliches und priva- tes Kapital die sek- torale Gesamtfaktor- produktivität erhö- hen — Investitionen in Hu- mankapital erhöhen den Input an ge- schulten Arbeitskräf- ten und die öffentli- che Beschäftigung Keine Produktivitätsef- fekte Tabelle III. 3 Modellmäßige Erfassung der Merkmale der GFK-Programme Verfasser GFK-Programm Sektoren Instrumente Kofinanzierung und Zusätzlichkeit Bradley et al. (1994) 1994-1999 — 4 Sektoren: handelbarer, — Öffentliche Infrastrukturinvesti- Honohan (Hrsg. ) (1997) Herce und Sosvilla-Rivero (1994) [HERMIN] Christodoulakis und Kalyvitis [HERMIN] Sema-Gruppe [HELM] tionen — Investitionen in Humankapital — Investitionen und Produktionsbei- hilfen für den privaten Sektor nichthandelbarer, öffentli- cher und landwirtschaftli- cher Sektor — Sektor handelbare Güter ist Schlüsselsektor für Nachfrageeffekte — Sektor nichthandelbare Güter und öffentlicher Sektor sind Schlüsselsekto- ren für Angebotseffekte 1994-1999 Siehe vorangehende Studien — „Hard infrastructure“ 1994-1999 — 6 Sektoren: Landwirt- schaft, verarbeitender Sek- tor, Energie, Bauwesen, Handelsdienstleistungen, Nichthandelsdienstleistun- gen — „Soft infrastructure“ — Beihilfen für produktive Investitio- nen — Aus-/Fortbildung — Investitionen in öffentliches und privates materielles Kapital — Investitionen in Humankapital — Investitionen in Forschungs- und Entwicklungskapital — Einige Studien stellen die Lage mit voller nationaler Kofinanzierung der Lage ohne bzw. mit partieller Kofinanzierung gegenüber Ausgangspunkt und Zukunftsper- spektiven — Vorhersagen für 1991-2020 außer bei Ho- nohan (1993-2010) — „Hard landing scenario“ und „soft landing scena- rio“ sind berücksichtigt — Simulationen nehmen an, daß die vorhergesehenen Kofinanzierungs- raten realisiert werden — Vorhersagen für 1991-2010 — „Hard landing scenario“ — Vorhersagen für 1994-2005 — Szenario, bei dem EU-Beihilfen und regionale Beihilfen des Zeitraums 1989-1993 später fortgesetzt wer- den — Szenario, bei dem 1994-1999 zu- sätzliche EU-Beihilfen und natio- nale Kofinanzierungen hinzugefügt werden — Szenario, bei dem 1989-1999 keine EU-Beihilfen gezahlt werden Lolos und Zonzilos [BBM] 1989-1993 9 Sektoren: Landwirtschaft, Energie und Bergbau, Nah- rungsmittelindustrie, Leicht- industrie, Industrie der Zwi- schenprodukte, Bauwesen, Handel, Transport- und Tele- kommunikationsdienstleistun- gen, sonstige Dienstleistungen (einschließlich staatl. ) — Öffentliche Investitionen in ausge- wählten Sektoren Zusätzlichkeit wird nicht erörtert, im Modell jedoch vermutlich unterstellt — Vorhersagen für 1988-1995 — Investitionen in Humankapital stei- gern die öffentliche Beschäftigung, die Zahl qualifizierter Arbeitskräfte und schaffen Transferleistungen an die Haushalte — Unterstützungen für private Unter- nehmen — „Hard landing“ C 3 4 7 3 8 / D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n 1 6. 1 1. 9 8 Verfasser GFK-Programm Sektoren Instrumente Kofinanzierung und Zusätzlichkeit Ausgangspunkt und Zukunftsper- spektiven Beutel [DIO] 1989-1999 25 Sektoren auf der Grund- lage von Input-Output-Tabel- len FIDIMI (1991) 1989-1993 16 Sektoren auf der Grund- lage von Input-Output-Tabel- len Pereira (1991) [OGM] 1989-1993 2 Sektoren: handelbare und nichthandelbare Güter Zusätzlichkeit wird im Modell unter- stellt — Vorhersagen für 1989-1994 — Sektorielle modellmäßige Erfassung von Investitionen in den Bereichen öffentliches, privates und Human- kapital — Investitionen in Fortbildung beein- flussen Löhne und Gehälter in der Wirtschaft — Sektorielle modellmäßige Erfassung — Zusätzlichkeit nimmt in der Studie — Anführung von Gesamtef- der GFK-Programme eine Schlüsselstellung ein — Verschiedene Szenarien hinsichtlich der in Süditalien mit bzw. ohne GFK-Programme investierten Mittel — Investitionen in öffentliche Infra- — Kofinanzierung wird vorausgesetzt struktur — Investitionen in Humankapital — Unterstützung für private Investi- tionen — Modell ermöglicht Beurteilung, ob Zusätzlichkeit eingehalten wird fekten ohne Aufschlüsse- lung nach Jahren — Keine Erörterung der Sze- narien „hard landing“ und „soft landing“ — Vorhersagen für 1990-2006 — Berücksichtigung der Sze- narien „hard landing“ und „soft landing“ — Vorhersagen für 1993-2007 — „Hard landing scenario“ Pereira (1995) [OGM] 1994-1999 und Vergleich mit 1989-1993 Siehe vorangehendes Modell Siehe vorangehendes Modell — Kofinanzierung wird vorausgesetzt — Simulationen vergleichen: i. keine Zusätzlichkeit ii. offizielle Definition und iii. intertemporale Definition der Zusätzlichkeit. 1 6 1 1 9 8. D E A m t s b l a t t d e r E u r o p ä i s c h e n G e m e i n s c h a f t e n C 3 4 7 / 3 9 C 347/40 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 ANTWORTEN DER KOMMISSION I. ALLGEMEINE AUSFÜHRUNGEN Die Kommission räumt ein, daß die Bewertung in vielerlei Hinsicht einen innovativen Charakter hat und daher noch keine präzisen Ergebnisse liefern und nur bedingt genutzt werden kann. Sie weist jedoch darauf hin, daß innerhalb weniger Jahre bereits beträchtliche Fortschritte erzielt worden sind. Zur Bewältigung der noch verbleibenden Schwierigkeiten hat die Kommission ihre Bemühungen um eine bessere Organisation und Methodik der Bewertungen verstärkt und steht in permanentem Dialog mit allen, die in den Mitgliedstaaten der Union Bewertungsmethoden konzi- pieren und weiterentwickeln. Drei wichtige Etappen, die den drei Programmplanungs- zeiträumen entsprechen, sind für die Entwicklung der Bewertung der Strukturfonds-Interventionen von Bedeu- tung: Der Zeitraum 1989-1993 Die Verordnungen der ersten Strukturfondsreform wur- den erst im Dezember 1988 vom Rat angenommen. Die Anfang 1989 vorgelegten einzelstaatlichen Pläne entspra- chen nur teilweise den Forderungen für das strategische Konzept, die Wahl der zu erreichenden Ziele und die Quantifizierung der erwarteten Auswirkungen. In der Folgezeit wurde im Rahmen der Ex-post-Bewer- tung versucht, diese Defizite durch Vergleich der erreich- ten Ergebnisse mit den ursprünglichen Zielen zu beheben. Daß diese umfangreiche Arbeit ihre Grenzen hat, ist den Berichten über die Interventionen in den Ziel-1- und den Ziel-2-Gebieten zu entnehmen. Dennoch stellt sie den ersten Versuch einer kohärenten Analyse der Auswirkun- gen dieser Reform auf den wirtschaftlichen und sozialen Zusammenhalt dar. Der Zeitraum 1994-1999 Auf Wunsch einiger Mitgliedstaaten und der Kommission wurden auf der Grundlage dieser ersten Erfahrungen die Rechtsvorschriften für die Begleitung und Bewertung wei- terentwickelt und drei Bewertungsphasen (Ex-ante-, Zwi- schen- und Ex-post-Phase) festgelegt. Der Nutzen der Zwischenbewertung ist unbestritten. Über eine strikte Anwendung der Verordnungen hinaus wurden die Zwi- schenbewertungen zum ersten Mal von dem jeweiligen Begleitausschuß vorbereitet und durchgeführt, wobei Bewerter und mittelbewirtschaftende Stellen zusammenar- beiteten. Die erstellten Berichte wurden dem entsprechen- den Ausschuß vorgelegt und von diesem diskutiert. Hier- durch wurden in stärkerem Maße als mit den Maßnah- men der Kommission pädagogische und operative Ziele erreicht. Über die anzuwendenden Verfahren, die Auswahl der Bewerter, die Kosten der Arbeiten und die Genauigkeit der Ergebnisse bestand mitunter Uneinigkeit, obwohl das Referat für die Koordinierung der Bewertung der Kom- missionsdienststellen und deren einzelstaatliche Ansprech- partner in der Fachgruppe Bewertung die Maßnahmen allgemein festlegten und koordinierten. Aber trotz einiger Meinungsverschiedenheiten über den Handlungsspielraum der einzelnen Mitgliedstaaten im Rahmen der Subsidiari- tät haben diese Maßnahmen nach Auffassung der Kom- mission wesentlich zur Verbreitung einer echten Bewer- tungskultur beigetragen. Den mittelbewirtschaftenden Stellen wurde somit gezeigt, daß sie über ein operatives Instrument zur besseren Verwaltung der aus einzelstaatli- chen und gemeinschaftlichen Quellen finanzierten Inter- ventionen verfügen. Für künftige Bewertungen kann dies nur von Vorteil sein, denn die Qualität der Schlußfolge- rungen hängt sowohl von der Genauigkeit der Daten der mittelbewirtschaftenden Stellen als auch vom Fachwissen der unabhängigen Bewerter ab. Der Zeitraum 2000-2006 Die neuen Verordnungsvorschläge zielen insbesondere darauf ab, die Schwachstellen der Bewertung weiter zu reduzieren. Hierbei geht es hauptsächlich darum, einen effizienteren Einsatz der Strukturfonds zu ermöglichen. So werden vor allem folgende Maßnahmen vorgeschla- gen: — eine wirkliche Einbeziehung der Ex-ante-Bewertung in die von den Mitgliedstaaten vorzulegenden Pläne sowie eine genaue Quantifizierung der zu erreichen- den Ziele; — die Berücksichtigung der Ergebnisse der im vorange- gangenen Zeitraum durchgeführten thematischen oder programmspezifischen Bewertungen; — die Herstellung eines direkten Zusammenhangs zwi- schen der Änderung der Programmplanung nach der Halbzeitüberprüfung und den Schlußfolgerungen der Zwischenbewertungen. In dem Bemühen um einen effizienteren Einsatz der Strukturfonds hat die Kommission vorgeschlagen, 10 % des Betrags dieser Fonds nach der Halbzeitüberprüfung entsprechend den erzielten Leistungen zu vergeben, wobei ein enger Zusammenhang zwischen den Leistungskrite- 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/41 rien und der Qualität der Programmplanung, der Beglei- tung sowie der Ex-ante- und Zwischenbewertungen besteht. II. BEMERKUNGEN ZU EINZELFRAGEN 2. PRÜFUNGSUMFANG Im Bereich der Methodik wird die Kommission im Hin- blick auf eine stärkere Harmonisierung der Bewertung in der Union bis zum Herbst eine Darstellung folgender im Rahmen von MEANS (1) durchgeführter Arbeiten veröf- fentlichen: — genaue Beschreibung eines Lastenhefts und der Methodik für eine Ex-ante-, Zwischen- oder Ex- post-Bewertung; — Erläuterung der verschiedenen in der Literatur beschriebenen Bewertungsmethoden und der Bedin- gungen für ihre Anwendung; — Analyse der Indikatorsysteme für die einzelnen Inter- ventionsbereiche, Harmonisierung der Konzepte und Liste der Indikatoren; — Methodik der thematischen Bewertungen und ihrer Vorbereitung; — mehrsprachiges Glossar der wichtigsten Bewertungs- begriffe; — Beschreibung der jüngsten Erfahrungen der Mitglied- staaten und der Gemeinschaft. Wie den nachstehenden Bemerkungen zu entnehmen ist, teilt die Kommission in einigen Fällen die Auffassung des Rechnungshofs. Dennoch sind stets die Schwierigkeiten und Beschränkungen zu berücksichtigen, die — auch wenn sie schrittweise überwunden werden — mit jeder Bewertung einhergehen. Auf keinen Fall darf jedoch vergessen werden, daß die Bewertung zunächst ein technisches Instrument ist, das die Entscheidungsfindung oder Verwaltung erleichtern und nicht die politischen Entscheidungsträger ersetzen soll. Sie soll in bestimmten Teilbereichen die Konsequen- zen zu treffender oder bereits getroffener Entscheidungen aufzeigen. Bei den anzuwendenden Methoden ist stets ein gewisses Maß an Flexibilität erforderlich, um den jeweili- gen Bewertungskontexten Rechnung tragen zu können. Schließlich weist die Kommission darauf hin, daß die Aufgaben der nationalen Verwaltungen und der Kommis- sion im Bereich der Strukturfondsverwaltung und insbe- sondere im Bereich der Bewertung im Zuge der 1988 eingeleiteten Strukturfondsreform genauer festgelegt wur- den. Die Mitgliedstaaten sind zunehmend aufgerufen, die Hauptverantwortung zu übernehmen und eine eigene Bewertung vorzunehmen. (1) Mehrjahresprogramm für Analysen und Vorschläge für Bewertungsmethoden. 2. 3. Der Rechnungshof hat bei seiner Prüfung Mitglied- staaten mit recht unterschiedlichen Bewertungskonzepten wie Deutschland und das Vereinigte Königreich außer acht gelassen. 3. WICHTIGSTE BEMERKUNGEN 3. 2. Nach Auffassung der Kommission fallen bei den Bewertungen, deren haushaltspolitische Aspekte ihr nicht bekannt sind, keine größeren Ausgaben an. Da die Zwi- schenbewertung ständig weiterentwickelt wird und dezen- tral erfolgt, ändert sich das entsprechende Ausgabenvolu- men fortwährend. Die für die Bewertung aufgewendeten Beträge werden nach Ländern, Zielen und Interventions- formen aufgeschlüsselt. Angaben hierzu sind auch in der Bewertungs-Jahresbilanz der Kommission veröffentlicht worden. Die Kommission wird ihre Bemühungen um eine einheitli- che Festlegung der für die Bewertung aufzuwendenden und im Rahmen der Partnerschaft zu verwaltenden Anteile der Beträge für die technische Hilfe fortsetzen. 3. 3. Nach den Verordnungen und dem Subsidiaritäts- prinzip ist die Kommission nicht befugt, genau festzule- gen, welche Bewertungsindikatoren und -methoden anzu- wenden sind. In ihrem Bemühen um eine Weiterentwicklung der einzel- staatlichen Verfahren und eine qualitative Verbesserung der Bewertung hat die Kommission: — das Programm MEANS entwickelt und acht Hefte mit methodischen Grundsätzen herausgegeben; — drei europäische Konferenzen zum Thema Bewer- tungstechniken und -verfahren veranstaltet; — Dokumente wie den Bezugsrahmen für Ex-ante- Bewertungen und einen Leitfaden für die Bewertung von Großvorhaben verteilt; — Bewertungsfachgruppen mit Beteiligung der Mitglied- staaten eingesetzt und mehrere Seminare veranstaltet. 3. 5. Es ist schwierig, die Ex-post-Bewertung und die verschiedenen Programmplanungsphasen der strukturpo- litischen Maßnahmen aufeinander abzustimmen. Eine echte Ex-post-Bewertung kann erst zwei oder drei Jahre nach Abschluß der Programmplanung vorgenommen wer- den. C 347/42 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Daher hat die Kommission die Durchführung von Zwi- schenbewertungen und thematischen Bewertungen voran- getrieben. So lieferten beispielsweise die 1992 und 1993 durchgeführten thematischen Bewertungen Informationen für die Programmplanung 1994-1999. Für die Programmplanung nach dem Jahr 2000 werden die bereits vorgenommenen Zwischenbewertungen zur Verfügung stehen. Bewertungsbilanzen, die genauer und aktueller als die Zwischenbewertungen sind, werden der- zeit für die einzelnen Ziele aufgestellt. Außerdem ist schon mit vier thematischen Bewertungen begonnen wor- den. Im übrigen hat die Kommission dieses Konzept in ihre Vorschläge zur Änderung der Verordnungen aufgenom- men. 3. 6. Es ist zwischen der Objektivität der Bewertungen sowie der Aussagekraft und Genauigkeit der Daten zu unterscheiden. Häufig steht der Aspekt der Daten bei der Bewertung im Vordergrund. In kaum einem Bericht wird nicht auf die Unzulänglichkeit der Daten hingewiesen. Insbesondere aufgrund der Bewertungsanforderungen ist jedoch eine erhebliche Verbesserung der Datensituation festzustellen. Die Kommission ist nicht zufrieden mit der Datensitua- tion. Diese Kritik betrifft jedoch nicht die Bewertung, sondern die Begleitsysteme. Die Kommission betont, daß das Problem der Zuverlässigkeit der Kontrolldaten und Indikatoren in erster Linie im Rahmen der Begleitung zu prüfen ist. Sie setzt ihre Bemühungen um eine Verbesserung dieser Situation fort und wird der Forderung des Hofs nach einer systematischeren Bewertung der Datenzuverlässig- keit nachkommen. Die im Rahmen der Überprüfung und Kontrolle durchgeführten Maßnahmen werden ebenfalls zur Verbesserung der in diesem Bereich seit einigen Jah- ren festgestellten Situation beitragen. 3. 7. Die zuständigen Dienststellen halten sich an die Auftragsvergabeverfahren der einschlägigen Richtlinien und an das vom Vergabebeirat festgelegte Verfahren. Der Auftrag kann jedoch erst nach Vertragsunterzeichnung ausgehandelt werden. Da hierzu mitunter noch einige Sachverhalte zu klären sind, kommt es zu terminlichen Verzögerungen, die jedoch von marginaler Bedeutung sind. Berichte in einem Land von großem Nutzen und in anderen unzureichend sein. 3. 8. Die Kommission teilt die Auffassung des Hofs über die Schwierigkeiten bei den ersten Bewertungen, die mit recht wenig Enthusiasmus in den Mitgliedstaaten durch- geführt wurden. Die Ex-post-Bewertungen für die Ziele 1 und 2 wurden von international renommierten Beraterfirmen und hoch- qualifizierten Sachverständigen auf der Grundlage einer gemeinsamen Methodik vorgenommen. Im zweiten Teil von Ziff. 3. 7 werden die Bewertungen trotz der angeführ- ten Einschränkungen als nützlich erachtet. Die kritischen Bemerkungen des Rechnungshofs betreffen 1993/94 durchgeführte Bewertungen; seitdem wurden auf Initia- tive der Kommission jedoch viele Maßnahmen zur Wei- terentwicklung der Bewertungsmethoden ergriffen. Die Kritik des Hofs an der Ex-post-Bewertung für Ziel 2 ist ebenfalls zum Teil zutreffend. Was die Möglichkeit einer präzisen quantitativen Messung der Auswirkungen der Maßnahmen oder ihres gemeinschaftlichen Mehrwerts anbelangt, so bedarf es jedoch einer pragmatischeren Sicht. 3. 9. Bei der Zwischenbewertung wurde der Durchfüh- rungsstand der Interventionen untersucht. Deren Auswir- kungen werden dagegen eher im Rahmen der Bilanzen und der Ex-post-Bewertungen analysiert. Diese Bewertun- gen finden jedoch nicht immer mit Hilfe — meist sehr kostspieliger — ökonometrischer Modelle statt und eig- nen sich mitunter nicht optimal zur Messung der Auswir- kungen. Die Bewertung soll die Verwaltung vereinfachen und somit lediglich den Entscheidungsprozeß erleichtern. 3. 10. Die Kommission hat festgestellt, daß die Auftei- lung der Programmplanung für Ziel 2 auf zwei Zeiträume dem Bedarf der betroffenen Gebiete nicht hinreichend entspricht und die Durchführung der Programme erschwert. Die Strukturfondsreform-Vorschläge der Kom- mission vom März 1998 sehen daher — wie im Falle der übrigen Ziele — auch für Ziel 2 nur eine Programmpla- nungsphase vor. 3. 11. — 3. 12. Um zu vermeiden, daß eine kaum noch überschaubare Zahl von Programm- oder Unterpro- grammbewertungen durchgeführt wird, ist ein selektiveres Konzept in einigen Schlüsselbereichen mitunter die geeig- netere Lösung. Im übrigen sind die Kommissionsdienststellen nicht allein für dieses Problem verantwortlich zu machen. Die Schwä- chen einiger Bewertungsberichte sind mitunter auf die unzureichende Kompetenz der Berater oder die unzuläng- liche Qualität der vorliegenden Daten zurückzuführen. Trotz gleicher Vertragsbedingungen können bestimmte Die Kommission teilt die Auffassung des Rechnungshofs, daß es zweckmäßig wäre, die Zahl der Maßnahmen und Unterprogramme und sogar die Zahl der Programme zu reduzieren. Sie hat im Rahmen der Strukturfondsreform bereits konkrete Vorschläge hierfür vorgelegt. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/43 4. ALLGEMEINE PROBLEME Einleitung 4. 1. Die Kommission hat wiederholt mit Bedauern fest- gestellt, daß einige Mitgliedstaaten ihre Ziele nicht hin- länglich quantifiziert haben. Das Fehlen einer nach Zielen aufgeschlüsselten Verwaltung der einzelstaatlichen Ausga- ben erschwert ebenfalls die Weiterentwicklung der auf Indikatoren basierenden Verwaltungssysteme. Problema- tisch sind also weniger die methodischen oder analy- tischen Mängel als vielmehr die Konzeption der Pro- gramme und der aktuelle Stand der einzelstaatlichen Statistiken. 4. 3. Die Kommission weist darauf hin, daß sie: — bereits 1994 den Mitgliedstaaten „Gemeinsame Leitlinien für die Begleitung und die Zwischen- bewertung“ übermittelte; — im Dezember 1994 der Fachgruppe Bewertung, die für die Bewertung in den Mitgliedstaaten verantwortlich ist, ein Rahmenpapier über Zweck, Inhalt und Durchführung der Zwi- schenbewertung vorlegte; nach diesem ersten Koordinierungstreffen fanden vier weitere Sit- zungen der Gruppe statt; — 1995 den Verwaltungen das MEANS-Heft „Or- ganisation der Zwischenbewertung im Rahmen der Partnerschaft“ zur Verfügung stellte, in dem drei von fünf Kapitel die Erarbeitung des Lastenhefts und der Ausschreibungen, die Aus- wahl der Bewerter und die Erfassung der Bewertungsqualität behandeln; — 1996 (vor Eingang der ersten Bewertungen) den Verwaltungen ein MEANS-Heft über die Beur- teilung der Qualität der Bewertungsberichte mit genauen Anleitungen übermittelte. 4. 5. Auch im Zeitraum 1989-1993 wurden einige Bewertungen im Rahmen der Partnerschaft durchgeführt. So waren die Mitgliedstaaten und die Begleitausschüsse aktiv an mehreren von der Kommission initiierten thema- tischen oder Ex-post-Bewertungen beteiligt. 4. 10. Der Hof stellt fest, daß für die Bewertung der Ziele 1 und 2 im ersten Programmplanungszeitraum nur relativ geringe Beträge bereitgestellt wurden. Da die meisten Mitgliedstaaten alleine keine Bewertung vorgenommen hatten, wurde zu Beginn des Zeitraums auf Initiative der Kommission eine erste Bewertung von sämt- lichen Ziel-1-GFK und von 15 Ziel-2-PPD durchgeführt. Neben den thematischen Bewertungen, die auch den Zeitraum 1989-1993 betreffen, nahm die Kommission auch eine Ex-post-Bewertung aller unter die Ziele 1 und 2 fallenden GFK und PPD des Zeitraums 1989-1993 vor. 4. 11. Auf die Kostenfrage wurde unter Ziff. 3. 2 einge- gangen. Einige wenige ausschließlich auf Initiative eines Mitgliedstaats eingeleitete und im Rahmen der techni- schen Hilfe finanzierte Bewertungen konnten vielleicht nicht in der von der Kommission erstellten Finanzbilanz der Bewertungen berücksichtigt werden. Hierbei geht es jedoch nur um vergleichsweise geringe Beträge. Bezugsrahmen 4. 12. — 4. 13. Die MEANS-Dokumente wurden mit pädagogischer Zielsetzung für Verwaltungen verfaßt, die ihr Fachwissen in der Regel ständig auf den neusten Stand bringen. Die Kommission hielt es für wichtiger, das durchschnittliche Niveau der Bewertungen und nicht das Fachwissen bereits spezialisierter Sachverständiger zu ver- bessern. Statistische Datenbanken und Angaben zu den verfolgten Zielen 4. 14. — 4. 15. Die Kommission unterstützt die Feststel- lungen des Hofs. Indikatoren 4. 16. — 4. 21. Der Hof erkennt die Bemühungen der Kommission um die Verbesserung der Indikatoren an. So wurden 1993 die entsprechenden Rechtsvorschriften wei- terentwickelt und die einzelnen Mitgliedstaaten um die Quantifizierung der Disparitäten ersucht. Bei der Ex- ante-Bewertung gehörte die Quantifizierung der Ziele zu den Prioritäten. Es wurden bereits Fortschritte erzielt, denn bei den Interventionen im Zeitraum 1994-1999 wurden die Ziele wesentlich genauer quantifiziert als bei vorangegangenen Maßnahmen. Im Rahmen der Zwi- schenbewertungen sollten vor allem die Indikatoren und ihre Effizienz verbessert werden. Wie die Kommission betont, geht es nicht nur darum, die Zahl der Indikatoren zu erhöhen oder zu verringern, sondern sicherzustellen, daß die vereinbarten und in den Programmen bereits vorgesehenen Indikatoren mit Hilfe der Begleitsysteme regelmäßig quantifiziert werden. Auch kann nicht von mangelnder Kohärenz bei der Programm- planung die Rede sein, denn die regionalen und lokalen Behörden dürfen im Rahmen der Subsidiarität ihre eige- nen Prioritäten festlegen und den Umfang der Programm- planung in ihrem Land selbst bestimmen. C 347/44 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 Es lassen sich jedoch bereits Fortschritte erkennen, die auf die Bewertungsanforderungen zurückzuführen sind. Objektivität der Bewertungen Da die Kommission der Ansicht ist, daß es nicht aus- reicht, nur Methoden festzulegen, wird sie im Rahmen der Strukturfondsreform weitergehende Initiativen ergrei- fen. Berücksichtigung der Bewertung 4. 23. Die beiden Programmplanungsphasen haben die Koordination zwischen der Bewertung und der Pro- grammplanung in der Tat nicht erleichtert, so daß die Kommission unter anderem die Beschränkung auf eine einzige Programmplanungsphase vorgeschlagen hat. Den- noch konnten durch die Ex-post-Bewertung für den Zeit- raum 1989-1993 und die von der Kommission initiierte Ex-ante-Bewertung der PPD im Hinblick auf in ihre Zuständigkeit fallende Fragen und die Prioritäten der Union wertvolle Erkenntnisse für die Programmplanung 1997-1999 gewonnen werden. In der Frage der Ex-post-Bewertung für den Zeitraum 1994-1996 ist die Kommission der Auffassung, daß bei den Bewertungen im Rahmen der Änderung der Pro- grammplanung und den thematischen Bewertungen für die KMU und die Forschung und Entwicklung der ange- führte Aspekt berücksichtigt wurde. Sie diskutiert derzeit mit den Mitgliedstaaten darüber, ob in der zweiten Hälfte des Jahres 1998 eine Bewertungsbilanz für den Zeitraum ab 1994 aufgestellt werden könnte. Diese Bilanz würde bei der künftigen Programmplanung zugrunde gelegt. 4. 24. — 4. 27. Die Kommission erstellt derzeit einen nach Ländern gegliederten Bericht über die Qualität der Bewertung und deren Nutzen für die Anpassung der Interventionen. Ein zusammenfassender Bericht wird Auf- schluß über die wesentlichen Aspekte der Halbzeitüber- prüfung geben. Nach ihren Informationen kann die Kom- mission die Feststellungen des Hofs über die sehr unter- schiedlichen Situationen und die Vielzahl der Programme nicht bestätigen. Sie wird bei der Vorlage ihres Berichts über die Halbzeit- überprüfung Bilanz ziehen. Die Aussagen des Hofs dürf- ten derzeit verfrüht sein. Sie weist auch darauf hin, daß die Bewertungen nicht nur für die mittelbewirtschaftenden Stellen von Nutzen sind, sondern auch zur besseren Information der Haushaltsbe- hörde, insbesondere des Europäischen Parlaments, und des Bürgers dienen. 4. 28. — 4. 30. In diesen Absätzen scheint der Hof der Komplexität der Partnerschaft trotz seiner positiven Äußerungen unter Ziff. 6. 5-6. 7 nicht hinlänglich Rech- nung zu tragen. Die Objektivität und Unabhängigkeit der Bewertungen hängen von mehr Faktoren ab als den Aspekten im Zusammenhang mit dem Vorhandensein eines genauen Bezugsrahmens für die Anwendung der Methoden und die Kontrolle der Angaben vor Ort. Von größerer Bedeu- tung für die Qualität der Bewertung sind beispielsweise der Grad der Professionalität, die Berufsethik und der Einfluß der Interessen der Mitgliedstaaten. Der Hof erwähnt nicht, daß das Heft MEANS Nr. 5 über die Beurteilung der Qualität der Bewertungsberichte aus- drücklich als (drei der acht) Kriterien die Zweckmäßig- keit der Methodik, die Zuverlässigkeit der Angaben und die Glaubwürdigkeit der Ergebnisse vorsieht. Die Kommission ist fortwährend bestrebt, unter Berück- sichtigung der Gegebenheiten vor Ort die Normen und das Anforderungsniveau zu verbessern. Sie wird daher auch verstärkt das Funktionieren der Bewertungssysteme an Ort und Stelle kontrollieren. Von der Kommission vergebene Bewertungsaufträge 4. 31. — 4. 32. Die Kommission wendet die vom Verga- bebeirat festgelegten Normen und Verfahren für die Auf- tragsvergabe an. So werden die Sachverständigen anhand der im Amtsblatt der Europäischen Gemeinschaften ver- öffentlichten Auswahl- und Zuschlagskriterien ausge- wählt. Die Anwendung dieser Kriterien und die Ergeb- nisse dieses Verfahrens werden in einem dem Vergabebei- rat vorgelegten Bericht erläutert. In der Frage der Genauigkeit der Verträge ist zu berück- sichtigen, daß die Kommission Sachverständige heranzieht und großes Interesse daran hat, daß die Verträge so abgefaßt sind, daß die beauftragten Sachverständigen bestmöglich von ihren Fachkenntnissen Gebrauch machen können. 4. 33. Die für das Ziel 1 angewandte Methode eignet sich nicht für das 60 Programme umfassende Ziel 2. Sie hätte angesichts der Höhe des Betrags und der Zahl der beteiligten Teams eine Aufteilung der Ausschreibung zur Folge, die gegen Geist und Buchstaben der Richtlinie über die Verfahren zur Vergabe öffentlicher Bauaufträge ver- stoßen würde. Die Kommission hielt sich in diesen Fällen an die Regeln und war bestrebt, nicht den Überblick über die Modalitä- 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/45 ten für die Durchführung der Bewertung zu verlieren. Daher wurden „Lenkungsausschüsse“ zur Begleitung der Bewertung eingesetzt und regelmäßige Zusammenkünfte mit den Bewertungsteams organisiert. Die erarbeiteten Berichte wurden anschließend zusammen mit den mittel- bewirtschaftenden Dienststellen überprüft. 4. 34. Der Inhalt des Lastenhefts hängt vom Informa- tionsbedarf und von den sonstigen Anforderungen des Auftraggebers ab. Alle Anforderungen sind vom Auftrag- geber festzulegen und werden von den Bewertungsaus- schüssen inhaltlich geprüft. Die Vertragsbedingungen wurden (mit Ausnahme der eigentlichen Auftragsbeschrei- bung) auf Initiative des Vergabebeirats standardisiert. Wie bereits erwähnt, gibt es keine allgemein akzeptierte Methodik für die Bewertung von Programmen. Um nicht die Kontrolle über den gewählten Ansatz zu verlieren, diskutiert die Kommission in diesem Zusammenhang die Methodik und deren Zweckmäßigkeit unter Berücksichti- gung auftauchender Fragen und der Anwendbarkeit der vorgeschlagenen Verfahren. Die allgemeinen methodi- schen Ansätze sind Bestandteil des Lastenhefts; über die Einzelheiten und die technischen Instrumente kann jedoch diskutiert werden. 4. 35. In diesem konkreten Fall wollte die Kommission im Einvernehmen mit den Bewertungsberatern den Bericht verbessern und berief zu diesem Zweck eine Zusammenkunft ein, um mit allen beteiligten Stellen und Beamten über den Inhalt des Berichts und die Schlußfol- gerungen zu diskutieren. Der Abschlußbericht wurde im Mai 1995 (drei Monate nach der vorgesehenen Frist) vorgelegt und nach einer offiziellen Beratung im Juni 1995 genehmigt. Die Zah- lung erfolgte im Juli 1995. Bei dem Bericht, auf den sich die Kritik des Rechnungshofs bezieht, handelt es sich lediglich um abschließende Erläuterungen des Beraters, für die keine zusätzlichen Zahlungen geleistet wurden. 4. 36. Die Kommission betont, daß bei den Vertragsbe- dingungen drei genau definierte wichtige Aspekte im Vordergrund stehen: die Zweckmäßigkeit der Strategie, die Bilanz sowie die Effizienz der durchgeführten Maß- nahmen und der Durchführungsmechanismen (Seiten 2-4 des Dokuments). Sie hat unter Ziffer 4. 12 ihren Standpunkt zur Frage der Methodik erläutert. Die verschiedenen Dienststellen wer- den in dieser Angelegenheit befragt. Die Entscheidung über die Genehmigung des Berichts liegt dann bei der federführenden Dienststelle. 5. EX-POST-BEWERTUNGEN DER UNTER DIE ZIELE 1 UND 2 FALLENDEN GFK (1989-1993) Einleitung Ex-post-Bewertung der Ziel-1-GFK (1989—1993) 5. 4. Einige diesbezügliche Bemerkungen des Hofs bedür- fen einer genaueren Betrachtung. a) Sofern die Angaben zu den regionalen Unterschieden „veraltet“ sind, betrifft diese Kritik die statistischen Ämter und nicht die Bewertungsmethodik. b) Die Bewerter haben allgemein übliche Stichprobenver- fahren angewandt und zur Gewinnung genauerer Erkenntnisse Fallstudien durchgeführt. Diese weitver- breiteten Verfahren führen zu zuverlässigen Ergebnis- sen. e) Nach Auffassung des Hofs lassen „Bottom-up-Analy- sen“ nicht immer Schlußfolgerungen zu den Auswir- kungen auf Programmebene zu. Die Auswirkungen auf die Gemeinschaftspolitik, die Verbesserung der Verwaltung, die Transparenz usw. können jedoch weder durch „Top-down-Analysen“ noch mit Hilfe ökonometrischer Modelle ermittelt werden. g) Der Hof kritisiert Aspekte, die nicht Bestandteil des Bewertungsauftrags waren. 5. 7. Die Kommission bekräftigt, daß sie den betreffen- den Bewertungen im Rahmen ihrer Verpflichtung zur Berichterstattung gegenüber der Haushaltsbehörde sowie bei den Arbeiten zur Erstellung des Berichts über den wirtschaftlichen und sozialen Zusammenhalt in vollem Umfang Rechnung getragen hat. 5. 8. Eins der drei Ziele des Bewertungsauftrags bestand in der Tat in der Erarbeitung von Vorschlägen zur Verbesserung des Begleit- und Verwaltungssystems. Im übrigen wurde die Zweckmäßigkeit der Strategie unter- sucht und eine Durchführungsbilanz aufgestellt, anhand deren die Effizienz der Interventionen analysiert werden konnte. Ex-post-Bewertungen zu Ziel 2 (1989—1993) 5. 13. Die systematische Anwendung ökonometrischer Modelle ist nicht in allen Fällen gerechtfertigt; nicht angebracht ist sie, wenn nur geringe Mittel bereitgestellt werden oder keine regionalen statistischen Reihen vorlie- gen. 5. 1. Die Kommission unterstützt die Bemerkungen des Hofs über die Schwierigkeiten bei diesen Bewertungen, die mit der Konzeption der Programme der ersten Gene- ration zusammenhängen. Die meisten politikbezogenen Bewertungen enthält der Bericht über den wirtschaftlichen und sozialen Zusam- menhalt. Die Kommission hat im Rahmen ihres neuen Vorschlags für eine Strukturfondsreform ab dem Jahr 2000 entsprechende Anpassungen empfohlen. C 347/46 DE Amtsblatt der Europäischen Gemeinschaften 16. 11. 98 5. 16. Die Kommission hat in ihren neuen Verordnungs- vorschlägen bereits eine Reihe der Empfehlungen dieser Bewertung berücksichtigt. 6. ZWISCHENBEWERTUNGEN (1994—1999) Entwicklung und Einbindung der Zwischenbewertungs- grundsätze 6. 1. — 6. 20. Die Kommission teilt die in diesem Teil des Berichts dargelegten Auffassungen des Hofs, den sie jedoch auf folgendes hinweist: — Zu Ziffer 6. 15: Nach Ansicht der Kommission sind die kritische Beurteilung der Entwicklungsstrategie, der Auswirkungen im Vergleich zu den Zielen und der Effizienz der Projekte eher Gegenstand der Ex-ante- oder der Ex-post-Bewertung. — Zu Ziffer 6. 16: Anhand der Zwischenbewertungen sollen die Interventionen angepaßt und die Verwal- tung verbessert werden. Der gemeinschaftliche Mehr- wert ist dagegen im Rahmen der Bewertungsbilanz und der Ex-post-Bewertungen zu untersuchen. Den- noch liefert die Analyse der Auswirkungen der Gemeinschaftsprioritäten im Hinblick auf die Anpas- sung der Interventionen mitunter nützliche Informa- tionen über den gemeinschaftlichen Mehrwert. — Zu Ziffer 6. 18: Die Kommission hat versucht, anhand der Zwischenbewertung die Synergieeffekte zwischen den aus den verschiedenen Fonds finanzierten Maß- nahmen weitestgehend zu ermitteln, insbesondere in Ländern mit separaten Programmplanungen wie im Falle der deutschen Ziel-1-PPD. Zu diesem Zweck haben die für die EFRE-Maßnahmen beauftragten Bewerter die im Rahmen der einzelnen Fonds durch- geführten Bewertungen zusammengefaßt. Die Kom- mission räumt ein, daß die Bewertung der vom Hof angeführten Region beträchtliche Schwächen aufweist. Sie ist jedoch nicht repräsentativ für die in diesem Land vorgenommenen Bewertungen. Zutreffend ist beispielsweise, daß bei der Zwischenbewertung die sich aus einem Antrag auf Änderung des OP Branden- burg ergebenden Anpassungen des indikativen Finan- zierungsplans nicht untersucht wurden. In der Frage der hohen Mittelausschöpfung ist festzustellen, daß die betreffenden Maßnahmen in den Begleitausschuß- sitzungen vom 12. Juni 1996 und 5. August 1996 schrittweise angepaßt wurden. Ansätze, Methoden und Techniken Nutzen und Wirkung der Maßnahmen werden durch „Bottom-up-Analysen“ ermittelt. Bei den großen GFK, bei denen die Konsequenzen der Programmplanungsände- rung für die globalen Auswirkungen erfaßt werden soll- ten, wurden in Irland, Spanien, Griechenland, Portugal und Italien auf ökonometrischen Modellen basierende Verfahren angewandt. 6. 22. Die Kommission hat die qualifiziertesten Sachver- ständigen in Europa und den Vereinigten Staaten mobili- siert, damit die bestmöglichen Ansätze bei der Bewertung der Programme zum Tragen kommen. Objektive methodische Probleme und häufig unzulängli- che Begleitsysteme beeinträchtigen die Vergleichbarkeit der Ergebnisse auf europäischer Ebene. 6. 23. Im allgemeinen zielen die Zwischenbewertungen nicht auf die Messung der Programmauswirkungen ab, da diese in der ersten Phase der Interventionen noch keine konkreten Formen annehmen. Die logische Reihenfolge lautet: Durchführung der Maßnahmen — Ergebnisse — Auswirkungen. Auf den Aspekt der Beurteilung der glo- balen Auswirkungen der großen GFK wurde unter Ziffer 6. 21 eingegangen. 7. AUSWIRKUNGEN DER STRUKTURFONDS UND BE- WERTUNGSMODELLE Auswirkungen auf der Ebene der GFK und Programme 7. 1. — 7. 15. In diesem Teil des Berichts behandelt der Hof die Ergebnisse der verschiedenen ökonometrischen und makroökonomischen Modelle, ohne deren Wirkung oder Merkmale zu erklären. Dies könnte zu einer einiger Verwirrung führen. Diese Angaben mit entsprechenden Erläuterungen sind bereits in übersichtlicher Form im Bericht über den wirtschaftlichen und sozialen Zusam- menhalt zu finden. Auswirkungen auf der Ebene der Unterprogramme, Maß- nahmen und Vorhaben 7. 16. — 7. 19. Der Rechnungshof kritisiert offenbar das Fehlen von Bewertungen auf der Ebene der Unterpro- gramme oder Maßnahmen. Zwangsläufig stützt sich jedoch die im allgemeinen nach dem „Bottom-up-Kon- zept“ durchgeführte Programmbewertung auf die Bewer- tung der Maßnahmen und Unterprogramme. 6. 21. Laut der Kritik des Rechnungshofs werden die Ziele der Zwischenbewertungen in den Verträgen zu allgemein formuliert. Die Kommission hat zwar entspre- chende Leitlinien verfaßt, die aber auf dezentraler Ebene in einigen Fällen nicht befolgt worden sind. Außerdem zielen die von der Kommission eingeleiteten horizontalen Bewertungen insbesondere auf bestimmte Kategorien von Maßnahmen bzw. Unterprogrammen wie Maßnahmen für KMU, die Forschung und Entwicklung, die Umwelt usw. 16. 11. 98 DE Amtsblatt der Europäischen Gemeinschaften C 347/47 8. SCHLUSSFOLGERUNG 8. 1. — 8. 19. Nach Auffassung der Kommission stellen die Schlußfolgerungen des Rechnungshofs eine konstruk- tive Kritik an Punkten dar, an deren Verbesserung sie seit Jahren arbeitet und denen auch künftig ihre Aufmerksam- keit gelten wird. Die Kommission räumt ein, daß der Hof Schwachstellen aufzeigen konnte. Gleichzeitig hat er jedoch auch auf die bereits erzielten Fortschritte hingewiesen. Die von der Kommission im Rahmen der Strukturfonds durchgeführ- ten und durch das Programm SEM 2000 verstärkten Maßnahmen haben zu einer noch nie dagewesenen Bewertungskultur geführt. Nur wenige Regionen haben keine Bewertungen vorgenommen und sich nicht an die- sem Prozeß beteiligt. Sowohl das Subsidiaritätsprinzip als auch die Probleme sowie die Heterogenität der geographischen und themati- schen Kontexte gehören zu den ebenfalls zu berücksichti- genden Faktoren