Przejdź do treści
Rejestry programów opartych na dowodach

Rejestry programów opartych na dowodach

Gdzie społeczność CTC znajdzie programy o potwierdzonej skuteczności: europejski rejestr Xchange, rejestry krajowe i amerykański rejestr, od którego się wywodzą.

Spis treści
  1. 01Etap, który wymaga rejestru
  2. 02Xchange: rejestr europejski
  3. 03Rejestry krajowe
  4. 04Blueprints: skąd bierze się standard
  5. 05Jeśli Twój kraj nie ma rejestru

Etap, który wymaga rejestru

Czwarty etap CTC wymaga od społeczności wyboru interwencji odpowiadających czynnikom ryzyka i czynnikom chroniącym, które uznała za priorytetowe. Wybór jest tylko tak dobry, jak lista, z której się go dokonuje. Ten etap umożliwia dopiero rejestr programów profilaktycznych, z których każdy oceniono według jawnych standardów dowodowych, i właśnie tego elementu infrastruktury brakuje większości krajów europejskich.

Xchange: rejestr europejski

Xchange to rejestr profilaktyczny Agencji Unii Europejskiej ds. Narkotyków (EUDA) z siedzibą w Lizbonie. Zawiera interwencje poddane ewaluacji w Europie, wraz z oceną dowodów, informacją o tym, gdzie zostały wdrożone, oraz danymi kontaktowymi właścicieli programów.

Xchange jest też, w bardzo bezpośrednim sensie, rejestrem, który zbudowało CTC. W latach 2013–2015 projekt CTC European Network podjął się zidentyfikowania programów profilaktycznych i wczesnej interwencji, które przetestowano w Europie w ewaluacji randomizowanej lub quasi-eksperymentalnej. Dartington Social Research Unit w Wielkiej Brytanii oceniła każdy z kandydujących programów według standardów dowodowych stosowanych przez : specyficzności interwencji, jakości ewaluacji, wpływu interwencji i gotowości systemu. Wyniki sklasyfikowano pod kątem skuteczności w kontekście europejskim i opublikowano w Xchange. Raport projektu, What works in Europe, opisuje ten proces i jest dostępny tutaj jako PDF (17 maja 2016), wraz z europejskim przewodnikiem wdrożeniowym CTC z tego samego projektu.

Dla europejskiej społeczności prowadzącej CTC Xchange jest więc naturalnym pierwszym adresem: zaprojektowano go dokładnie z myślą o takim zastosowaniu.

Rejestry krajowe

Kilka krajów prowadzi własne rejestry, zwykle o szerszym zakresie niż Xchange i z programami dostosowanymi do krajowego systemu. Tam, gdzie taki rejestr istnieje, na czwartym etapie należy sięgać po niego obok Xchange.

  • Niemcy: Grüne Liste Prävention, prowadzona przez Landespräventionsrat Niedersachsen, przypisuje programom jeden z trzech poziomów dowodów i jest rejestrem, wokół którego zbudowano niemiecki proces CTC. Tylko po niemiecku.
  • Holandia: Databank Effectieve Jeugdinterventies Holenderskiego Instytutu Młodzieży (Nederlands Jeugdinstituut), jeden z najstarszych i najbardziej gruntownych rejestrów w Europie; wyrósł z wykazu programów, którego holenderskie pilotaże CTC potrzebowały w 2000 roku. Tylko po niderlandzku.
  • Szwecja: Metodguiden Krajowej Rady Zdrowia i Opieki Społecznej (Socialstyrelsen), obejmujący metody stosowane w pomocy społecznej. Tylko po szwedzku.
  • Wielka Brytania: Foundations Guidebook, dawniej Early Intervention Foundation Guidebook, ocenia interwencje dla dzieci i rodzin w skali od „jeszcze nie poziom 2” do poziomu 4, z ocenami z plusem. Po angielsku.
  • Irlandia: What Works Ireland Evidence Hub Ministerstwa ds. Dzieci, Niepełnosprawności i Równości, który przejmuje wpisy i oceny z Foundations Guidebook, a kilka irlandzkich programów zlecił Foundations do oceny według tych samych standardów. Po angielsku.
  • Polska: System rekomendacji programów profilaktycznych i promocji zdrowia psychicznego (programyrekomendowane.pl), prowadzony przez Krajowe Centrum Przeciwdziałania Uzależnieniom wspólnie z Ośrodkiem Rozwoju Edukacji i Instytutem Psychiatrii i Neurologii, ocenia programy profilaktyczne i promocji zdrowia psychicznego na trzech poziomach rekomendacji. CTC nie zostało w Polsce jeszcze wdrożone, ale rejestr już istnieje i byłby gotowy na czwarty etap. Tylko po polsku.

Uwaga o tym, czego te rejestry nie zawierają: żaden z rejestrów europejskich ani krajowych nie wymienia samego Communities That Care, a Blueprints ocenia je jako Promising (obiecujące), jako system, a nie program. Rejestry oceniają odrębne interwencje prowadzone według podręcznika; CTC jest systemem operacyjnym, który takie interwencje wybiera i instaluje, dlatego jego własne dowody przedstawiono zamiast tego na stronie poświęconej dowodom.

Green List PreventionRyc. 1

Jak ocenia się program.

Pięć kryteriów włączenia, cztery etapy oceny i skala gwiazdek od zera do pięciu: procedura, która przypisuje program profilaktyczny do jednego z trzech poziomów skuteczności.

Pokaż schemat

Co się w ogóle kwalifikuje.

Zanim nastąpi ocena, następuje włączenie. Pięć kryteriów decyduje o tym, czy dane działanie trafia do bazy jako oceniony program profilaktyczny.

  1. Działanie możliwe do powtórzenia

    Do bazy trafia tylko to, co da się powtórzyć w innym miejscu i w innym czasie. Wymaga to jednoznacznej instrukcji postępowania, na przykład pisemnego lub opisu procedury, jednego lub kilku mierzalnych celów, ograniczonego w czasie okresu trwania dla poszczególnych uczestników oraz realizacji ponad istniejącą podstawową infrastrukturę usług.

  2. Nastawienie profilaktyczne

    Program profilaktyczny zaczyna działać, zanim zachowanie problemowe się pojawi lub utrwali. Do bazy trafiają programy działające na poziomie lub , skierowane albo do całej populacji w ramach podejścia , albo do węższej grupy o podwyższonym ryzyku w ramach podejścia . Ta sama procedura obejmuje też podejścia , reagujące na pierwsze objawy, oraz podejścia trzeciorzędowe, stosowane, gdy zachowanie już się utrwaliło; te jednak po prostu nie odpowiadają kierunkowi CTC.

  3. Ewaluacja z obszaru niemieckojęzycznego

    Dla programu dostępne jest co najmniej jedno naukowe badanie ewaluacyjne z obszaru niemieckojęzycznego. Bez takiego dowodu nie ma włączenia do .

  4. Związek z czynnikami ryzyka i czynnikami chroniącymi

    Program obniża co najmniej jeden czynnik ryzyka lub wzmacnia co najmniej jeden czynnik chroniący. Liczą się tylko te , które strategia CTC uznaje za istotne dla zachowań problemowych młodzieży: przemoc, przestępczość, nadużywanie substancji psychoaktywnych, przedwczesne kończenie nauki, ciąże nastolatek, depresję i lęk.

  5. Możliwość wdrożenia w Niemczech

    W kraju dostępne są podczas wdrożenia materiały, szkolenia i wsparcie techniczne. Programy realizowane bez żadnego dodatkowego wsparcia są z tego wymogu zwolnione.

Trzy poziomy skuteczności.

  1. Poziom 1: Effectiveness theoretically well-grounded (skuteczność teoretycznie uzasadniona)

    Koncepcja i wdrożenie spełniają każde kryterium, a co najmniej jedna ewaluacja na poziomie zera gwiazdek wykazuje w przeważającej mierze pozytywne wyniki, na przykład pomiar przed i po działaniu bez grupy porównawczej.

  2. Poziom 2: Probable Effectiveness (prawdopodobna skuteczność)

    Koncepcja i wdrożenie spełniają każde kryterium, a co najmniej jedno badanie ewaluacyjne na poziomie od jednej do trzech gwiazdek wykazuje w przeważającej mierze pozytywne wyniki, z reguły badanie kontrolowane bez . Dokument z kryteriami umieszcza przy nazwie tego poziomu krótką formę „promising” (obiecujący).

  3. Poziom 3: Proven Effectiveness (udowodniona skuteczność)

    Koncepcja i wdrożenie spełniają każde kryterium, a co najmniej jedno badanie ewaluacyjne na poziomie od czterech do pięciu gwiazdek wykazuje w przeważającej mierze pozytywne wyniki z co najmniej wystarczającą . Projekt badania obejmuje późniejszy pomiar, z reguły sześć miesięcy po zakończeniu interwencji. Dokument z kryteriami umieszcza przy nazwie tego poziomu krótką formę „effective” (skuteczny).

  1. Etap 1 · Ocena jakości koncepcyjnej i wdrożeniowej

    Czy program wyjaśnia, dlaczego powinien działać?

    Pierwsze pytanie brzmi, czy program formułuje własne założenie dotyczące tego, jak działa, i czy da się go wdrożyć w sposób przejrzysty. Wymaga się pisemnego modelu skuteczności (), wynikających z niego wskazówek do działania oraz środków potrzebnych społeczności do jego wprowadzenia, czyli materiałów, szkoleń, przejrzystych kosztów i instrumentów kontroli jakości.

    1aJakość koncepcyjnaKryteria: 8
    • Model teoretycznie dobrze zdefiniowany nazywa zakładane mechanizmy leżące u jego podstaw i opiera się na naukowo uznanych modelach teoretycznych.
    • Zastosowane metody i narzędzia są dobrze ugruntowane teoretycznie.
    • Analiza problemu, czynników podatnych na zmianę, celów, grup docelowych i metod tworzy spójną logiczną całość.
    • Program jest ukierunkowany na czynniki ryzyka i czynniki chroniące oparte na badaniach naukowych.
    • Grupy docelowe są opisane wyczerpująco i precyzyjnie.
    • Wskazówki dotyczące wdrożenia i manuały wynikają jasno z modelu.
    • Cele są zdefiniowane wprost i są mierzalne.
    • Jeśli program powstał poza Niemcami, opisano jego oryginalny kontekst i wprowadzone adaptacje.
    1bJakość wdrożeniaKryteria: 6
    • Metody i narzędzia są dobrze opracowane dydaktycznie i opisane w sposób zrozumiały.
    • Potrzebne materiały i manuały są dostępne i aktualne.
    • Istnieją niezbędne szkolenia i instruktaż.
    • Poniesione koszty są przedstawione w sposób przejrzysty.
    • Podczas wdrożenia dostępne jest wsparcie techniczne.
    • Dostępne są instrumenty kontroli jakości podczas wdrożenia.
    1cJakość ewaluacjiKryteria: 1
    • Co najmniej jedno badanie ewaluacyjne na poziomie zera gwiazdek, z wynikami w przeważającej mierze pozytywnymi.
    • Pierwsze trzy kryteria jakości koncepcyjnej nie są spełnione

      not included

    • Poszczególne kryteria pozostają niespełnione

      on the threshold

    • Każde kryterium jest spełnione

      kontynuacjado etapu 2

  2. Etap 2 · Ocena projektu ewaluacji i jego mocy dowodowej

    Jak pewnie badanie może przypisać efekt programowi?

    Każde dostępne badanie ewaluacyjne otrzymuje poziom od zera do pięciu gwiazdek. O tym decyduje to, jak dobrze jego projekt pozwala przypisać zmianę programowi: czy przydział był losowy (), czy grupę porównawczą utworzono w ramach projektu , czy obserwowano ją w czasie jako , oraz czy przeprowadzony z reguły po sześciu miesiącach pokazuje, że efekt utrzymuje się po zakończeniu programu.

    • Mniej niż zero gwiazdek, czyli tylko analiza literatury i dokumentów lub opis procesu

      on the threshold

    • Od zera do pięciu gwiazdek

      kontynuacjado etapu 3

    Skala gwiazdek projektów ewaluacyjnych
    1. 5 z 5 gwiazdek
      • Randomizowane badanie kontrolowane (RCT) z follow-upem, z reguły po sześciu miesiącach

      Najwyższy poziom. Wystarcza do poziomu 3, gdy tylko moc dowodowa jest co najmniej wystarczająca.

    2. 4 z 5 gwiazdek
      • Projekt quasi-eksperymentalny (QED) z follow-upem, z reguły po sześciu miesiącach
      • Projekt kohortowy z follow-upem, z reguły po sześciu miesiącach

      Osiąga poziom 3 również wtedy, gdy moc dowodowa jest co najmniej wystarczająca.

    3. Poziom progowy 3: Proven Effectiveness (udowodniona skuteczność)
    4. 3 z 5 gwiazdek
      • RCT bez follow-upu
      • Projekt quasi-eksperymentalny w kontekście rutynowym bez follow-upu
      • Projekt kohortowy bez follow-upu

      Słaba moc dowodowa: efekt jest mierzony, jego trwałość już nie.

    5. 2 z 5 gwiazdek
      • Kliniczne RCT lub kliniczny projekt quasi-eksperymentalny, z follow-upem lub bez, poza kontekstem rutynowym
      • Pomiar przed i po działaniu z grupą kontrolną w kontekście rutynowym

      Wstępna moc dowodowa.

    6. 1 z 5 gwiazdek
      • Badanie porównawcze lub badanie odniesione do normy
      • Badanie teorii zmiany

      Wstępna moc dowodowa.

    7. Poziom progowy 2: Probable Effectiveness (prawdopodobna skuteczność)
    8. 0 z 5 gwiazdek
      • Ocena satysfakcji uczestników
      • Pomiar przed i po działaniu bez grupy kontrolnej
      • Badanie osiągnięcia celów
      • Badanie zapewnienia jakości

      Brak mocy dowodowej w rozumieniu schematu, ale wystarcza do poziomu 1.

    9. Poziom progowy 1: Effectiveness theoretically well-grounded (skuteczność teoretycznie uzasadniona)
    10. Poniżej zera gwiazdek
      • Analiza literatury i dokumentów
      • Opis procesu

      Nie da się wypowiedzieć na temat skuteczności. Takie prace odnotowują, co się wydarzyło; bez i bez pomiaru przed i po nie można na ich podstawie wywieść żadnej zmiany.

    Moc dowodowa przy czterech i pięciu gwiazdkach
    1. słaba moc dowodowa

      Grupy interwencyjna i kontrolna liczące mniej niż 20 osób. Albo: brak badania na poziomie czterech lub pięciu gwiazdek z obszaru niemieckojęzycznego, ale dostępne jest co najmniej jedno badanie z zagranicy o co najmniej wystarczającej mocy dowodowej; wówczas o klasyfikacji decyduje .

    2. wystarczająca moc dowodowa

      Grupy interwencyjna i kontrolna liczące od 20 do 50 osób oraz co najmniej jedno badanie tego typu z obszaru niemieckojęzycznego. Albo: co najmniej dwa badania na poziomie czterech lub pięciu gwiazdek z grupami poniżej 20 osób z obszaru niemieckojęzycznego.

    3. silna moc dowodowa

      Grupy interwencyjna i kontrolna liczące ponad 50 osób. Albo: co najmniej dwa badania o wystarczającej mocy dowodowej z obszaru niemieckojęzycznego, które badały kilka wymiarów jednocześnie.

    4. bardzo silna moc dowodowa

      Warunki dla silnej mocy dowodowej, a dodatkowo co najmniej jeden zakrojony na szeroką skalę eksperyment terenowy z obszaru niemieckojęzycznego. Albo: warunki dla silnej mocy dowodowej, a dodatkowo co najmniej dwa badania z zagranicy o silnej mocy dowodowej.

    od 1 do 3 gwiazdek: wstępna moc dowodowa przy jednej lub dwóch gwiazdkach, słaba moc dowodowa przy trzech · 0 gwiazdek: brak mocy dowodowej

    Transferowalność dla programów opracowanych za granicą
    • transferowalność zapewniona

      Kilka badań o co najmniej wystarczającej mocy dowodowej z obszaru niemieckojęzycznego.

    • transferowalność prawdopodobna

      Co najmniej jedno takie badanie z obszaru niemieckojęzycznego.

      wartość progowa
    • transferowalność możliwa

      Brak badania z obszaru niemieckojęzycznego, ale wystarczające uzasadnienie na podstawie porównywalnych grup docelowych i okoliczności.

      poziom 1
    • niejasne

      Ani badania z obszaru niemieckojęzycznego, ani takiego uzasadnienia.

      on the threshold
  3. Etap 3 · Ocena wyników ewaluacji

    Czy badanie wykazuje efekt w oczekiwanym kierunku?

    Badania liczą się, gdy dokumentują swoje wyniki zgodnie z powszechnie przyjętymi standardami naukowymi. Tam, gdzie istnieje , powinna jej towarzyszyć obliczona , w miarę możliwości d Cohena. Wymaga się co najmniej jednego w istotnym wymiarze zachowania i w co najmniej jednej grupie docelowej; tam, gdzie pomiar follow-up przeprowadzono co najmniej sześć miesięcy po zakończeniu interwencji, co najmniej jeden pozytywny efekt musi się w nim utrzymać.

    • W przeważającej mierze pozytywne

      włączeniekontynuacja do etapu 4

    • Częściowo pozytywne i częściowo negatywne, lub niejednoznaczne

      on the threshold

    • Brak efektów lub efekty negatywne

      not included

    Pięć stopni wyników ewaluacji
    1. wyłącznie pozytywne

      w oczekiwanym kierunku w każdym mierzonym wymiarze.

    2. w przeważającej mierze pozytywne

      Pozytywny istotny efekt w większości mierzonych wymiarów. Od tego miejsca baza wydaje rekomendację.

      włączenie
    3. częściowo pozytywne i częściowo negatywne

      Efekty w kilku wymiarach przebiegają w niepożądanym kierunku.

      on the threshold
    4. brak efektu

      Żaden z mierzonych wymiarów nie zmienia się w sposób znaczący.

      not included
    5. w przeważającej mierze negatywne lub wyłącznie negatywne

      Mierzone wymiary przebiegają w większości lub całkowicie w niepożądanym kierunku.

      not included
  4. Etap 4 · Ocena ogólna

    Trzy oceny składają się na jeden poziom.

    Dopiero razem te trzy oceny dają klasyfikację: jakość koncepcyjna i wdrożeniowa, poziom ewaluacji wraz z jego oraz kierunek wyników. Poziomy od 1 do 3 są rekomendowane do wdrożenia. Obok nich stoją kategorie „on the threshold” (na progu) dla obrazu, który wciąż pozostaje nierozstrzygnięty, oraz „not included” (nieuwzględnione) tam, gdzie brakuje czegoś zasadniczego lub efekt się nie pojawia.

    • Zero gwiazdek, w przeważającej mierze pozytywne

      Poziom 1Effectiveness theoretically well-grounded

    • Od jednej do trzech gwiazdek, w przeważającej mierze pozytywne

      Poziom 2Probable Effectiveness

    • Od czterech do pięciu gwiazdek, co najmniej wystarczająca moc dowodowa

      Poziom 3Proven Effectiveness

    Zestawienie ogólne
    Zestawienie ogólne siatki oceny: jakość koncepcyjna i wdrożeniowa, poziom ewaluacji wraz z jego mocą dowodową oraz wyniki ewaluacji razem dają ocenę ogólną.
    KoncepcjaPoziom ewaluacjiWynikiOcena
    1a do 1c spełnione4 do 5 gwiazdek, wystarczająca moc dowodowa lub wyższaw przeważającej mierze pozytywnePoziom 3
    1a do 1c spełnione1 do 3 gwiazdek, albo 4 do 5 gwiazdek z tylko słabą mocą dowodowąw przeważającej mierze pozytywnePoziom 2
    1a do 1c spełnione0 gwiazdekw przeważającej mierze pozytywnePoziom 1
    1a do 1c spełnione częściowobrak ewaluacji lub mniej niż 0 gwiazdekczęściowo pozytywne i negatywne, lub niejednoznaczneon the threshold
    1a do 1c niespełnionewszystkie poziomybrak efektów lub efekty negatywnenot included
    • Poziom 3
      Koncepcja
      1a do 1c spełnione
      Poziom ewaluacji
      4 do 5 gwiazdek, wystarczająca moc dowodowa lub wyższa
      Wyniki
      w przeważającej mierze pozytywne
    • Poziom 2
      Koncepcja
      1a do 1c spełnione
      Poziom ewaluacji
      1 do 3 gwiazdek, albo 4 do 5 gwiazdek z tylko słabą mocą dowodową
      Wyniki
      w przeważającej mierze pozytywne
    • Poziom 1
      Koncepcja
      1a do 1c spełnione
      Poziom ewaluacji
      0 gwiazdek
      Wyniki
      w przeważającej mierze pozytywne
    • on the threshold
      Koncepcja
      1a do 1c spełnione częściowo
      Poziom ewaluacji
      brak ewaluacji lub mniej niż 0 gwiazdek
      Wyniki
      częściowo pozytywne i negatywne, lub niejednoznaczne
    • not included
      Koncepcja
      1a do 1c niespełnione
      Poziom ewaluacji
      wszystkie poziomy
      Wyniki
      brak efektów lub efekty negatywne
Źródła
  1. Groeger-Roth, F., & Hasenpusch, B. (2011). Grüne Liste Prävention: Auswahl- und Bewertungskriterien für die CTC-Programm-Datenbank (Fassung vom 1.11.2011). Landespräventionsrat Niedersachsen. gruene-liste-praevention.de/communities-that-care/Media/Grne_Liste_Bewertungskriterien.pdf W bibliotece
  2. Veerman, J. W., & van Yperen, T. A. (2007). Degrees of freedom and degrees of certainty: A developmental model for the establishment of evidence-based youth care. Evaluation and Program Planning, 30(2), 212–221. doi.org/10.1016/j.evalprogplan.2007.01.011 W bibliotece
  3. Groeger-Roth, F., Hasenpusch, B. (2011). Die „Grüne Liste Prävention“. Effektive und erfolgversprechende Präventionsprogramme im Blick. forum-kriminalpraevention.de/files/1Forum-kriminalpraevention-webseite/pdf/2011-04/fk2011_4_grueneliste_praevention.pdf W bibliotece
  4. Gorenoi, V., Bremer, K., & Brender, R. (2024). Evidenzregister „Grüne Liste Prävention“: Modifikation der Bewertungskriterien auf Basis international relevanter Kategorisierungskonzepte. German Medical Science GMS Publishing House. doi.org/10.3205/24gmds685 W bibliotece
  5. Brender, R., Bremer, K., Kula, A., Groeger-Roth, F., & Walter, U. (2024). Evidenzregister Grüne Liste Prävention – Analyse der gelisteten wirksamkeitsgeprüften Programme. Das Gesundheitswesen, 86(07), 474–482. doi.org/10.1055/a-2308-7256 W bibliotece

Dokument z kryteriami publikuje Rada ds. Zapobiegania Przestępczości Dolnej Saksonii (Landespräventionsrat Niedersachsen): Green List Prevention – Inclusion- and Rating-Criteria (PDF) (Wersja niemiecka z 1 listopada 2011, angielskie tłumaczenie z 15 stycznia 2016)

Ryc. 1Kryteria włączenia i oceny Green List Prevention (Grüne Liste Prävention) według Groeger-Roth & Hasenpusch (2011). Rycina opiera się na wersji niemieckiej z 1 listopada 2011 roku, która wciąż uwzględnia projekty kohortowe; angielskie terminy pochodzą z oficjalnego tłumaczenia z 15 stycznia 2016 roku.

Blueprints: skąd bierze się standard

Blueprints for Healthy Youth Development, prowadzony na Uniwersytecie Kolorado w Boulder, to amerykański rejestr, obok którego dorastało CTC i którego standardy dowodowe przyjął europejski przegląd. Pozostaje najbardziej wymagającym rejestrem w tej dziedzinie: programy trafiają na jego najwyższy poziom dopiero po co najmniej jednym randomizowanym badaniu wysokiej jakości i niezależnej replikacji. Wiele programów Blueprints nie ma europejskiej adaptacji ani licencjobiorcy, jest to więc raczej punkt odniesienia dla standardów niż lista zakupów, ale europejska społeczność, która chce wiedzieć, jak wyglądają najmocniejsze dostępne dowody, powinna do niego zajrzeć.

Jeśli Twój kraj nie ma rejestru

Korzystaj z Xchange oraz z rejestrów krajowych sąsiednich państw, których systemy przypominają Twój: programy holenderskie i niemieckie często adaptowano po drugiej stronie granicy. Potem udokumentuj swój wybór i jego uzasadnienie. Społeczność, która zapisuje, dlaczego wybrała to, co wybrała, już zaczęła budować rejestr, którego brakuje jej krajowi.

Kolejne kroki

Dalsza lektura

  • O CTC

    Dowody

    Dowody na skuteczność samego CTC

  • O CTC

    Pięć etapów

    Gdzie w procesie mieści się rejestr