W służbie edukacyjnej
, absolwent, *****@***ru,
Federalna Państwowa Instytucja Edukacyjna Wyższego Kształcenia Zawodowego „Rosyjski Państwowy Uniwersytet Turystyki i Usług”, Moskwa
Sukces systemu informacyjnego zależy w dużej mierze od jakości jego funkcjonowania, jednak nie zawsze da się go określić metodą rozliczeniowo-analityczną. W artykule poruszono kwestie jakości w odniesieniu do systemów informatycznych szkół średnich. Uwzględniono metodologiczne uwarunkowania oceny jakości metodą ekspercką. Opracowano technologię i model obliczania wskaźników eksperckiej oceny jakości.
Sukces systemu informacyjnego w dużej mierze zależy od jakości jego funkcjonowania, jednak nie zawsze da się to określić metodą obliczeniową i analityczną. W artykule omówiono zagadnienia jakości w odniesieniu do uniwersyteckich systemów informatycznych. Rozważono metodologiczne uwarunkowania oceny jakości metodą ekspercką. Opracowano technologię i model obliczania wskaźników oceny jakości eksperckiej.
Słowa kluczowe : Jakość systemów informatycznych, ekspertyzy, usługi edukacyjne
Słowa kluczowe : jakość systemów informatycznych, ocena ekspercka, usługa edukacyjna
Skuteczność systemów informatycznych (IS) w dużej mierze zależy od oceny jakości na wszystkich etapach ich cyklu życia. Szczególne znaczenie ma zadanie oceny jakości funkcjonowania systemów informatycznych w usługach edukacyjnych, np. w sferze uniwersyteckiej. W ocenie jakości wyróżnia się kilka kierunków, w szczególności heurystyczny, kalkulacyjno-analityczny i ekspercki. W praktyce eksperckiej oceny jakości, w szczególności w eksperckiej ocenie właściwości konsumenckich produktów, stosuje się głównie badania kompleksowe i operacyjne. Brakuje jednak metod eksperckiej oceny jakości funkcjonowania uniwersyteckich systemów informatycznych.
Badanie kompleksowe przeprowadza się w celu kompleksowego badania i oceny jakości systemów informatycznych w seriach. W tym zakresie podczas badania wdrażane jest systematyczne, kompleksowe podejście do analizy i oceny funkcjonowania SI. Podczas kompleksowego badania konieczne jest uzyskanie nie tylko pełniejszego opisu konkretnej ocenianej własności intelektualnej, ale także pewnych materiałów naukowych, metodologicznych i regulacyjnych stosowanych przy ocenie jakości własności intelektualnej o dość szerokiej klasie i celu.
Badanie operacyjne opiera się na danych uzyskanych podczas poprzednich badań kompleksowych. Technika ta pozwala znacznie skrócić objętość i czas pracy ekspertów przy zachowaniu wystarczającej głębokości i ważności ekspertyz.
Dzięki metodzie eksperckiej ocenę poziomu jakości lub wskaźnika określonej właściwości IP można określić w jednostkach bezwymiarowych. Jeżeli eksperci przedstawiają wynik oceny jakości (pomiar ekspercki) w postaci szeregu rankingowego, wówczas numeryczna definicja ocen eksperckich jest następująca.
1. Wszystkie obiekty oceny (system informatyczny, jego elementy składowe, właściwości) numerowane są dowolnie.
2. Eksperci klasyfikują obiekty według skali porządkowej.
3. Porównuje się rankingowe serie obiektów opracowane przez ekspertów.
Przykład. Niech pięciu ekspertów o siedmiu przedmiotach wiedzy Q tworzy następujący szereg uszeregowany w rosnącej skali porządku:
ekspert nr 1 –
ekspert nr 2 –
ekspert nr з –
ekspert nr 4 –
ekspert nr 5 –
Miejsce obiektu w szeregu rankingowym nazywa się jego rangą. Wartość liczbowa rangi w szeregu o rosnącej skali rzędu wzrasta od 1 do t. W naszym przykładzie t=1.
4. Ustala się sumę rang każdego z przedmiotów oceny eksperckiej. W rozważanym przykładzie są to:
https://pandia.ru/text/78/318/images/image007_78.gif" szerokość="85" wysokość="85 src="> (1) ,
gdzie n jest liczbą ekspertów; m to liczba ocenianych wskaźników;
https://pandia.ru/text/78/318/images/image009_66.gif" szerokość="334" wysokość="125 src=">.
Analizując oceny jakości uzyskane metodą ekspercką, można nie tylko wskazać, który obiekt jest lepszy, a który gorszy od innych, ale także o ile.
Jeżeli ranking obiektów według ich jakości przeprowadza się w formie tabelarycznej, wówczas porównań i obliczeń wartości liczbowych ocen eksperckich dokonuje się przy użyciu następującej metodologii.
Najpierw sporządzana jest tabela, według której każdy ekspert porównuje i ocenia rozważane obiekty. W tym przypadku każdy i-ty obiekt jest porównywany z innymi j-tymi obiektami porównania. Jeżeli podczas porównania parami i-ty obiekt zostanie uznany za lepszy od j-tego, to warunek ten oznaczymy cyfrą 1, przeciwną ocenę oznaczymy -1, a w klasie zostaną zaznaczone obiekty o jednakowej jakości tabeli numerem 0 (zero).
W tym przypadku tabela porównawcza ocen jednego eksperta, na przykład sześciu IS, jako obiektów badań, będzie miała następującą postać.
Ekspertyzy obiektów
| |||||||
Obiekt jZ tabeli tej wynika, że preferowane oceny tego eksperta IS otrzymały w następującej kolejności: nr 5, nr 3 i nr 1. W tym przypadku preferowany jest IS nr 5.
Dane dotyczące preferencji wszystkich ekspertów w grupie są sumowane i obliczane są uogólnione preferencje niektórych systemów informacyjnych w stosunku do innych, to znaczy obliczany jest ekspercki wskaźnik jakości systemu informacyjnego w postaci częstotliwości jego preferencji.
Częstotliwość preferencji oblicza się jako iloraz wszystkich preferencji dla danego obiektu podzielony przez możliwą liczbę preferencji, tj.
https://pandia.ru/text/78/318/images/image012_50.gif" szerokość="75" wysokość="51 src=">,
gdzie Działalność ewaluacyjna" href="/text/category/otcenochnaya_deyatelmznostmz/" rel="bookmark">ocena obiektów, czyli najpierw zrób to w jednej kolejności, a potem w odwrotnej kolejności. W tym przypadku oczywiście liczba ocen eksperckich branych pod uwagę podwaja się i C =m(m-1). W przeciwnym razie metodyka obliczania wskaźników jakości nie ulega zmianie.
Oceniając jakość własności intelektualnej, można wykorzystać punktację przyznaną bezpośrednio przez ekspertów lub uzyskaną w wyniku sformalizowania procesu oceny. Formalizacja ta może mieć charakter heurystyczny lub eksperymentalny.
Bezpośredniego przyznania punktacji dokonują eksperci niezależnie od siebie lub w drodze dyskusji. Liczba punktów w przyjętej skali ocen może się różnić. Do oceny wskaźników jakości można zastosować skalę pięcio-, siedmio- lub dziesięciopunktową.
Przykład skali pięciopunktowej.
Wynik Liczba punktów
Doskonała jakość 5
Dobra jakość 4
Całkiem zadowalająca jakość 3
Zadowalająca jakość 2
Zła jakość 1
Przykład skali siedmiopunktowej.
Wynik Liczba punktów
Jakość jest bardzo wysoka 7
Wysoka jakość 6
Jakość powyżej średniej 5
Jakość średnia 4
Poniżej średniej jakości 3
Niska jakość 2
Jakość jest bardzo niska 1
Uogólniony wskaźnik jakości Kbyły, określony metodą ekspercką z wykorzystaniem punktowego systemu obliczeń, stanowi średnią arytmetyczną ocen przyznanych przez wszystkich ekspertów i obliczonych przy użyciu wzoru
https://pandia.ru/text/78/318/images/image021_27.gif" szerokość="84" wysokość="53 src=">,
gdzie jest wartością wskaźnika jakości uzyskaną w każdej rundzie; m -- liczba rund badania.
Formalizacja heurystyczna ocen eksperckich polega na określeniu zależności pomiędzy wartościami wskaźników parametrycznych a ich punktacją. Na tej podstawie konstruowany jest wykres lub opracowywany jest wzór matematyczny, który pozwala wyrazić punktację wskaźników jakości w naturalnych jednostkach miary, np. Produktywność IS jako liczba dokumentów wydanych użytkownikowi w jednostce czasu.
Podczas formalizacji eksperymentalnej ustala się związek pomiędzy wartościami wyników a wartościami wskaźników ustalonymi w wyniku eksperymentu. Należy zauważyć, że ekspercka metoda wyznaczania wartości wskaźników jakości z wykorzystaniem metody eksperymentalnego formalizacji ocen eksperckich jest bardziej obiektywna niż bez takiej formalizacji.
W ocenie eksperckiej można zastosować tzw. socjologiczną metodę oceny jakości własności intelektualnej. Metoda ta, podobnie jak ekspercka, opiera się na ankietach, opiniach, ale nie ekspertów specjalnych, ale różnych użytkowników SI - studentów, nauczycieli, doktorantów, kadry zarządzającej, sektora naukowego uczelni itp. Ta metoda socjologiczna może należy uznać za modyfikację ekspertyzy. Socjologiczna metoda określania wartości wskaźników jakości produktu ma zasadniczo charakter marketingowy i jest przeprowadzana przy pomocy nie ekspertów, ale rzeczywistych lub potencjalnych konsumentów uzyskanych informacji wydanych przez IP. Opinie konsumentów zbierane są poprzez ankiety lub poprzez dystrybucję i wypełnianie specjalnych ankiet, a także poprzez organizację konferencji, wystaw, aukcji, testów pilotażowych itp.
Metodę ekspercką można również skutecznie zastosować do oceny jakości poszczególnych komponentów SI – sprzętu, oprogramowania, baz danych, narzędzi językowych itp.
Literatura
1. Isaev oceniający jakość systemów informatycznych. M.: IMSGS, 20 s.
2. Podejmowanie decyzji przez Orłowa. M.: Wydawnictwo „Mart”, 20c.
3. Ocena Litwaka i podejmowanie decyzji. M.: Patent, 19 s.
CELE LEKCJI: 1) poznanie metod ilościowej oceny jakości ekspertów przy tworzeniu grupy eksperckiej;
2) zastosowanie metod statystycznej oceny jakości ekspertów przy tworzeniu grupy eksperckiej przeznaczonej do oceny jakości określonego produktu.
1.POSTANOWIENIA OGÓLNE
Jednym z najważniejszych zagadnień, jakie należy rozstrzygnąć w procesie eksperckiej oceny jakości produktu, jest dobór ekspertów. Podobnie jak w metrologii dokładność wyniku pomiaru zależy od dokładności przyrządu, za pomocą którego dokonuje się tego pomiaru, tak obiektywność oceny eksperta i jej dokładność zależą głównie od kwalifikacji eksperta, jego zdolności do analitycznego myślenia, syntetycznego uogólniania , na jego światopogląd, erudycję, zdolności psychofizjologiczne itp.
Obecnie w praktyce do ilościowej oceny jakości ekspertów stosuje się następujące metody:
- Heurystyka, w której znaczenie ocen określa osoba; Heurystyczne metody oceny opierają się na fakcie, że wyobrażenia, jakie inni (lub on sam) mają na temat danego eksperta, dość trafnie odzwierciedlają jego prawdziwe cechy; oceny heurystyczne obejmują: samoocenę, ocenę wzajemną, ocenę ekspercką członków grupy roboczej.
- Statyczny, w którym wartość ocen uzyskiwana jest w wyniku przetworzenia ocen eksperckich na temat ocenianych produktów.
- Testy testowe, w których wartości ocen uzyskiwane są w wyniku specjalnych testów polegających na rozwiązywaniu specjalnie wybranych problemów testowych.
- Dokument, w którym wartości oceny uzyskuje się na podstawie analizy danych dokumentacyjnych o ekspertach.
- Łączone, w których wartości oceny uzyskuje się przy użyciu dowolnej kombinacji metod wymienionych powyżej.
Najbardziej uzasadnione są obecnie statystyczne metody oceny jakości ekspertów, dlatego rozważymy je bardziej szczegółowo.
Metody oceny statycznej obejmują ocenę odchylenia od średniej opinii grupy eksperckiej Kos oraz ocenę powtarzalności wyniku CVR, którą można uzyskać po przetworzeniu wyników specjalnych badań poprzedzających operację utworzenia grupy eksperckiej.
Pierwsza metoda opiera się na założeniu, że prawdziwą wartością wartości (właściwości) ustalonej przez ekspertów jest wartość średniej oceny grupy ekspertów. Im mniejsze odchylenie wartości indywidualnej oceny przyznanej przez eksperta od średniej oceny grupowej, tym wyższa jakość tego eksperta, co można uwzględnić, przypisując każdemu ekspertowi odpowiednią „wagę” lub współczynnik wagowy jako wynik.
W przypadku, gdy biegły określi wartości liczbowe ocenianych właściwości (w punktach, ułamkach jednostki lub procentach), proponuje się przyjąć odległość pomiędzy „przeciętnym” szeregiem wartości oceny a oceną wartości przypisane przez tego eksperta jako ocena biegłego. Na przykład:
w tym przypadku nr
j=1/2A Ki - Kij
gdzie Ki jest średnią wartością wartości i (właściwości);
Kij to wartość i-tej wartości (właściwości) przypisanej przez j-tego eksperta; N
Druga metoda opiera się na założeniu, że jakość eksperta, którą charakteryzuje powtarzalność przypisanych wartości ocen, można uznać za wysoką, tj. wartości oceny tego samego obiektu w kilku rundach powinny być dość zbliżone. W tym przypadku możemy mówić o stabilności jego opinii. Metody oceny jakości biegłego w oparciu o powtarzalność wyniku są podobne do metod oceny odchylenia od przeciętnej opinii.
W przypadku, gdy eksperci klasyfikują oceniane wielkości (właściwości), w celu ilościowego określenia ich jakości lub konsystencji, najczęściej w praktyce wykorzystuje się współczynnik zgodności, który oblicza się w następujący sposób:
m2 (n3 - n) - m Tj
gdzie Si jest sumą rang przypisanych przez m ekspertów i-temu czynnikowi;
S – średnia wartość sum rang;
Ilości Si i S wyznaczają zależności:
Si=Kij; S=Si/n
gdzie j jest numerem eksperta;
i to numer ocenianego czynnika.
Wartość Tj wyznacza się z wyrażenia:
Tj= (t3jl – tjl),
gdzie tjl jest liczbą identycznych rang pierwszego rodzaju w ocenach j -tego eksperta;
Lj to liczba grup czynników mających te same rangi w ocenach eksperta j.
Współczynnik zgodności waha się od zera do jednego, a jego wartość równa jedności odpowiada całkowitej zgodności opinii ekspertów. Zwykle zgodność opinii ekspertów uważa się za wystarczającą, gdy W > 0,5.
Spójność opinii ekspertów może, ale nie musi, być przypadkowa. Do ilościowego określenia stopnia tej losowości stosuje się poziom istotności współczynnika zgodności. Poziom ten wyznaczamy z tabeli na podstawie danych o liczbie stopni swobody n=1 i wartości 2 (kryterium Pearsona).
Wartość 2 określa się według wzoru:
mn (n +1) - 1 Tj
Wyznaczony w ten sposób poziom istotności współczynnika zgodności daje prawdopodobieństwo przypadkowej zbieżności opinii biegłych, tj. wiarygodność ocen. Jeżeli zgodność opinii ekspertów jest wysoka i nieprzypadkowa, wówczas tę grupę ekspertów można przyjąć za podstawę eksperckiej oceny jakości produktu. Jeżeli zgodność poglądów jest niewystarczająca (W<0,5), то анализируя оценки отдельных экспертов, выделяют эксперта (экспертов), имеющего наиболее отличающиеся оценки от общей совокупности оценок других экспертов и подсчитывают значение коэффициента конкордации опять. Эту операцию повторяют до тех пор, пока не будет достигнута приемлемая согласованность экспертных оценок. При этом рекомендуется, чтобы количество оставшихся экспертов было не менее 2/3 от первоначального состава экспертной группы. В противном случае требуется заново сформировать экспертную группу. Для решения большинства задач по экспертной оценке качества продукции, оптимальными могут считаться экспертные группы, включающие от 7 до 20 экспертов.
II Samodzielna praca.
Zadanie 1. Dla danego analogu ocenianego produktu dokonać eksperckiej oceny właściwości ergonomicznych zgodnie z opracowaną hierarchiczną strukturą właściwości tego produktu (patrz lekcja praktyczna nr 2). Określ wartości liczbowe odpowiednich wskaźników ergonomicznych, kierując się następującą skalą ocen:
Przeprowadź niezbędną obróbkę statystyczną uzyskanych danych w celu oceny jakości każdego eksperta biorącego udział w eksperymencie. Wyniki zadania zaleca się przedstawić w formie poniższej tabeli:
|
Liczba pasujących ocen |
Maksymalne odchylenie |
|||||||
Zadanie 2. Stosując ekspresową metodę eksperckiej oceny jakości, uszereguj liczbę proponowanych produktów (3...5 sztuk), podobnych do ocenianego produktu, w zależności od ich poziomu jakości, dokonaj niezbędnego przetwarzania statystycznego danych uzyskane w celu oceny jakości każdego eksperta biorącego udział w eksperymencie. Wyniki zadania zaleca się przedstawić w formie poniższej tabeli:
|
Maksymalne odchylenie |
Ilość odchyleń |
Liczba pasujących ocen |
|||||||
|
Ocena uogólniona (średni wynik) |
|||||||||
Badanie jakościowe to ocena cech jakościowych produktu przez ekspertów w celu ustalenia ich zgodności z wymogami dokumentów regulacyjnych. Badanie to przeprowadza się w celu określenia jakości towaru w przesyłce w momencie dostawy i odbioru, po długotrwałym składowaniu lub w przypadku wykrycia ukrytych wad technologicznych podczas składowania, gdy upłynęły zwyczajowe terminy zgłaszania reklamacji dostawcy. wygasły. Ponadto ekspertyza jakościowa służy do oceny próbek nowych produktów przed wprowadzeniem ich do masowej produkcji. W przypadku produktów spożywczych badanie jakościowe oparte wyłącznie na wskaźnikach organoleptycznych nazywa się degustacją.
W zależności od celu badaniem jakościowym mogą być: akceptacja, kompletność, nowe rodzaje towaru, degustacja produktów spożywczych, w ramach kontraktów.
Badanie odbioru jakości to ocena jakości towaru przez rzeczoznawców w celu potwierdzenia wiarygodności wyników badań po odbiorze. Podstawą takiego badania mogą być: nieporozumienia pomiędzy dostawcą a odbiorcą wynikające z wyników kontroli odbiorczej przeprowadzonej przez odbiorcę pod nieobecność dostawcy i braku możliwości jego stawienia się przy ponownym odbiorze; wykryto lub podejrzewano rozbieżność pomiędzy rzeczywistą jakością towaru a jakością określoną w dokumentach; naruszenie opakowania (pęknięcie, odkształcenie itp.); obecność znaczących strat jakościowych podczas transportu lub przechowywania. Przeprowadzając badanie jakości, stosują normy, przepisy i instrukcje sanitarne i weterynaryjne, zasady lub kodeksy organizacji transportowych.
Podczas przeprowadzania badania odbioru jakości eksperci muszą przestrzegać podstawowych zasad, które obejmują następujące postanowienia:
- 1. Przed przystąpieniem do egzaminu należy zapoznać się ze wszystkimi dokumentami regulacyjnymi (normy dla poszczególnych rodzajów produktów, opakowania i oznakowanie, metody badań).
- 2. Jakość towaru należy określić zgodnie z wymaganiami obowiązujących norm i umów. W razie potrzeby zaakceptowany towar można ocenić poprzez porównanie z próbkami lub wzorcami. Wybór wskaźników jakości zależy od celów i warunków egzaminu. Najczęściej eksperci ograniczają się do oceny wskaźników organoleptycznych i niektórych wskaźników fizykochemicznych, wykorzystując najprostsze przyrządy pomiarowe. Sprawdzenie mikrobiologicznych i złożonych wskaźników fizyczno-chemicznych może zostać zlecone przez rzeczoznawcę jedynie w indywidualnych przypadkach, po przeprowadzeniu odbioru jakościowego.
- 3. Do oceny jakości należy wybrać próbkę lub próbkę łączoną, której wielkość nie może być mniejsza niż ustalone normy.
- 4. Jeżeli partia produktu jest niejednorodna i obejmuje towary różnej jakości (standardowe, I lub inne, niestandardowe, wadliwe, odpadowe), biegły ma obowiązek określić procentową zawartość każdej frakcji. W przypadku wykrycia wadliwego towaru rzeczoznawca ma obowiązek wybrać próbki towaru z najbardziej charakterystycznymi wadami i ustalić przyczyny ich wystąpienia. Wskazane jest przesłanie próbek wadliwych produktów do laboratorium badawczego w celu ustalenia ich rodzaju i przyczyn. Protokół badania musi odzwierciedlać procent produktów z różnymi wadami.
- 5. Ustalając przyczyny rozbieżności jakościowych, biegły ma obowiązek wskazać w protokole stan pojemników i materiałów opakowaniowych (ich integralność, niezawodność, wystarczalność).
- 6. Ekspert nie powinien przeprowadzać badania odbiorczego, jeżeli integralność przesyłki została naruszona, przedstawiono towar bezosobowy, a także nie opakowano lub nie posiadano dokumentów przewozowych.
Ekspertyza towaru pod względem kompletności to ocena przez rzeczoznawcę obecności niezbędnych elementów zestawu i ustalenie zgodności z danymi określonymi w dokumentach technicznych. Podstawą prawną tego badania jest Kodeks cywilny Federacji Rosyjskiej (część 2, art. 478-480). Podstawą jego realizacji są cechy akceptowanego towaru, których integralność zapewnia obecność w zestawie wszystkich niezbędnych elementów. Wszystkie komponenty są podzielone na trzy grupy:
- * zapewnienie przeznaczenia funkcjonalnego produktu i jego właściwości estetycznych;
- * przeznaczony do naprawy towaru podczas pracy;
- * określenie bezpieczeństwa towaru podczas transportu, składowania i sprzedaży.
Badaniu kompletności poddawane są głównie produkty nieżywnościowe, natomiast produkty spożywcze jedynie przy sprzedaży kompletów.
Badanie jakości towaru nowego to ocena jakości towaru według szeregu wskaźników charakteryzujących stopień nowości, możliwość i wykonalność jego dopuszczenia do sprzedaży. Nowym produktem jest produkt przeznaczony do sprzedaży, różniący się od istniejących towarów o podobnym przeznaczeniu zmienionymi właściwościami konsumenckimi. Celem tej oceny jakości jest określenie praktycznych wskaźników użyteczności i jakości, które mogą kreować preferencje konsumentów.
Nie ma podstawy prawnej do badania jakości nowych towarów, ale ramy regulacyjne reprezentują normy, przepisy sanitarne i inne i pod tym względem pokrywają się z badaniem odbiorczym. Przy ocenie jakości nowych produktów stosuje się różne metody oceny: organoleptyczną, pomiarową, socjologiczną, ekspercką. Decydujące znaczenie ma ekspercka ocena jakości, a inne metody pełnią rolę pomocniczą.
Celem badania może być ocena całego zakresu wskaźników jakości lub tylko ich części, np. stopnia nowości. O wyborze wskaźników jakości decyduje konieczność spełnienia wymagań obligatoryjnych (bezpieczeństwo, funkcjonalność), a także określenie stopnia nowości, co stanowi istotę badania jakości nowych produktów. Stopień nowości charakteryzuje się ilościowymi i jakościowymi zmianami właściwości konsumenckich, które tworzą i zaspokajają nowe potrzeby. Stopień nowości można wyrazić w punktach lub procentach. JEJ. Zadesentets oferuje następujące gradacje stopnia nowości: towary o niewielkiej nowości (stopień nowości do 20%), towary nowego rodzaju (21-70%) i towary nowe jakościowo (71-100%). W zależności od gradacji nowego produktu dobiera się także metody jego badania. W przypadku towarów, których stopień nowości nie przekracza 70%, można zastosować metody porównawcze polegające na porównaniu wskaźników jakości towarów o tej samej nazwie, nowych i już znanych. W przypadku towarów nowych jakościowo metoda ta jest mało akceptowalna, dlatego stosuje się dla nich metody prognozowo-analogowe, nieanalogowe lub kombinowane, które są odmianami metody porównawczej, ale na wyższym poziomie, wykorzystując elementy prognostyczne. Metoda predykcyjno-analogowa polega na konstrukcji serii prospektywno-prognozacyjnej podstawowych próbek towarów analogicznych i wykorzystaniu jej do oceny porównawczej towarów jakościowo nowych. Metoda nieanalogowa – opiera się na analizie procesów konsumpcyjnych przez różne grupy konsumentów lub procesów projektowych. Metoda łączona polega na łączeniu ocen znanych już wcześniej i nowych właściwości konsumenckich badanych towarów. W tym przypadku eksperci szeroko wykorzystują wszystkie dostępne im informacje na temat produktów analogowych i poziomu rozwoju konstrukcji. Metoda łączona łączy w sobie metodę porównawczą do badania właściwości jakościowych i metodę predykcyjno-analogową (nieanalogową) do badania nowych właściwości.
Degustacja produktów spożywczych to ocena wskaźników jakości organoleptycznej przez ekspertów przebadanych pod kątem wrażliwości sensorycznej. Celem degustacji jest uzyskanie wiarygodnych wyników organoleptycznych. ocena jakości, ograniczająca jej subiektywizm ze względu na wysokie kompetencje zawodowe ekspertów, osiągane poprzez ich wąską specjalizację w grupach produktowych. Dobór ekspertów do grup degustacyjnych odbywa się poprzez sprawdzenie ich wrażliwości sensorycznej, dodatkowo ekspert musi posiadać doświadczenie w ocenie organoleptycznej wybranej grupy produktów.
Degustację produktów spożywczych przeprowadza się podczas badania nowych produktów, jeżeli istnieje konieczność stwierdzenia zmian jakościowych we wskaźnikach organoleptycznych, przy ustalaniu klasy handlowej i innych gradacji jakościowych. Wyniki degustacji można wyrazić w formie opisu poszczególnych wskaźników, a także w punktach. W tym drugim przypadku stosuje się standardowe skale (skale punktowe) dla win, piwa, twardych serów podpuszczkowych i masła lub należy opracować specjalną skalę do punktowania tego typu produktów.
Badanie towaru zgodnie z umową to ocena przez biegłego zgodności z wymogami jakościowymi określonymi w umowach kupna-sprzedaży, prowizji i składowania. Podstawą przeprowadzenia takiego badania są spory pomiędzy stronami umowy. Podstawą prawną przeprowadzenia takiego badania jest ustawa federalna „O ochronie praw konsumentów” (rozdziały 1 i 2, art. 1-26), zasady sprzedaży towarów, zasady handlu prowizyjnego produktami nieżywnościowymi , zatwierdzony dekretem Rządu Federacji Rosyjskiej z dnia 6 czerwca 1998 r. nr 569.
Konieczność przeprowadzenia kontroli z umów składu powstaje w przypadku wystąpienia ubytków ilościowych przekraczających ustalone normy lub obniżenia jakości towaru, a także w przypadku jego całkowitej utraty. Obniżenie jakości towaru podczas przechowywania następuje na skutek procesów mikrobiologicznych, biologicznych, fizycznych, chemicznych, fizykochemicznych i biochemicznych. Często pogorszenie jakości towarów można określić na podstawie wskaźników organoleptycznych, a ekspert samodzielnie decyduje o konieczności zbadania produktu w laboratoriach badawczych przy użyciu metod pomiarowych. Bez względu na przyczynę ich wystąpienia, straty jakościowe są odpisywane na podstawie aktów podpisanych przez ekspertów, menedżerów i osoby odpowiedzialne finansowo. Nie ma zasad odpisywania towaru ze względu na obniżoną jakość.
Badanie asortymentu to dokonana przez rzeczoznawcę ocena cech ilościowych i jakościowych produktu w celu ustalenia jego asortymentu. Tego rodzaju badanie towaru jako niezależne stosuje się jedynie wtedy, gdy pomiędzy dostawcą a kupującym, sprzedawcą a konsumentem powstają różnice zdań dotyczące asortymentu towarów należących do określonej grupy, nazwy, znaku towarowego lub przy ustalaniu zgodności asortymentu z towar w przesyłce z wcześniej złożonymi próbkami, katalogami lub umowami sprzedaży.
Badanie dokumentów to ekspertyza dotycząca cech towarowych towarów, oparta na informacjach zawartych w dokumentach towarzyszących towarowi, technologicznych i innych. Podczas badania dokumentacji braku towaru ekspert analizuje dostępne dokumenty: faktury, certyfikaty, świadectwa jakości, akty odpisów aktualizacyjnych, dokumenty techniczne dotyczące kontroli warunków temperaturowych i wilgotnościowych, raporty pracowników organizacji branżowych. Tego typu badanie przeprowadza się samodzielnie w przypadku braku towaru na skutek jego sprzedaży, kradzieży, uszkodzenia lub śmierci wskutek nieprzewidzianych okoliczności. Trudność badania dokumentów polega na tym, że w przypadku braku towaru biegły musi opierać się na przedłożonych dokumentach, które mogą zostać sfałszowane. Wyniki badania w tym przypadku zależą od kompetencji biegłego, ponieważ w wyniku badania dokumenty złożone przez organizacje handlowe mogą zostać obalone, a menedżerowie i osoby odpowiedzialne finansowo mogą zostać pociągnięci do odpowiedzialności karnej.
Badanie kompleksowe to ocena przez rzeczoznawcę wszystkich cech produktu na podstawie przeprowadzonych przez niego badań i analizy dokumentów. Może obejmować nie tylko cechy towarowe, ale także kosztowe. Tego typu badanie stosuje się w przypadkach, gdy konieczna jest kompleksowa ocena produktu, biorąc pod uwagę stanowisko sprzedawcy, konsumenta, a także aktualne warunki rynkowe. Badanie kompleksowe znajduje szerokie zastosowanie w praktyce obrotu komisowego, w operacjach eksportowo-importowych handlu zagranicznego oraz przy zawieraniu umów sprzedaży na podstawie próbek dużych ilości towaru. Badanie kompleksowe obejmuje inne „rodzaje badań (ilościowe, jakościowe, asortymentowe i dokumentacyjne), dlatego też do tego badania wykorzystywane są również wszelkie środki i metody stosowane do ich przeprowadzenia.
W głównym etapie, mającym na celu uzyskanie wyników ocen eksperckich, stosuje się dwie podgrupy metod: 1) ekspercką ocenę cech towarów oraz 2) badanie biegłych w celu poznania ich sądów i opinii.
Metody eksperckiej oceny cech wyrobów. Ponieważ jedną z przesłanek przeprowadzenia badania jest niemożność lub nieekonomiczne wykorzystanie obiektywnych metod oceny (pomiaru
tive, rejestracja, obliczenia), wyniki ocen eksperckich, odzwierciedlające osądy i opinie ekspertów, wyrażane są zwykle w formie opisów lub umownych jednostek (punktów, rang itp.). W związku z tym najczęstszym obszarem stosowania metod eksperckiej oceny towarów są takie podtypy badania towaru, jak badanie identyfikacyjne i badanie jakościowe. Badania ilościowe i dokumentacyjne można przeprowadzić metodami obiektywnymi, poprzez zastosowanie przyrządów pomiarowych lub przeliczeń, a także metodą analizy porównawczej dokumentów.
Badanie identyfikacyjne i badanie jakości przeprowadza się poprzez określenie wskaźników jakości. Określenie przez ekspertów ilościowych cech wskaźników bez stosowania metod obiektywnych opiera się na mentalnym badaniu tych wskaźników za pomocą skal porządkowych lub nazw, a w niektórych przypadkach - skal różnic i współczynników. Jednocześnie eksperci mogą oceniać pojedyncze i/lub złożone wskaźniki jakości przy użyciu zróżnicowanych i złożonych metod.
Metody eksperckiej oceny wskaźników jakości produktu- są to metody określania rzeczywistych wartości pojedynczych i złożonych wskaźników jakości.
Metody te mają na celu wyznaczenie wartości wskaźników jakości metodą obliczeniową lub heurystyczną w przypadkach, gdy zastosowanie metod pomiarowych jest niemożliwe lub nieekonomiczne ze względu na nadmierne koszty lub długi czas badań. Przykładowo przy określaniu smaku i zapachu produktów spożywczych stosuje się wyłącznie metody organoleptyczne. Metody pomiarowe nie zapewniają dokładnych i wiarygodnych szacunków, pomimo zwiększonych kosztów.
W celu zróżnicowanej i kompleksowej oceny próbek znacznie różniących się jakością zaleca się określenie wartości pojedynczego wskaźnika R metoda różnicowa.
Różnicowa metoda oceny wskaźników jakości- metoda polegająca na porównaniu rzeczywistych wartości poszczególnych wskaźników z wartościami podstawowymi tych samych wskaźników:
§ 5. Metody eksperckie
W przypadku metody różnicowej poziom jakości jest faktycznie określany, jeśli jako wartość bazową zostanie wybrana wartość wskaźnika jakości regulowana dokumentem regulacyjnym lub próbką podstawową. W takim przypadku biegły musi udzielić odpowiedzi: poziom jakości badanego wskaźnika jest wyższy, niższy lub równy próbie bazowej.
Zakres stosowania metody różnicowej wykracza daleko poza ocenę ekspercką. Znajduje szerokie zastosowanie zarówno w badaniach naukowych, jak i przy ocenie konkurencyjności towarów przez ekspertów. Rzeczywiste wartości poszczególnych wskaźników można uzyskać metodą pomiarową, a następnie obliczyć i przeanalizować przez specjalistów lub ekspertów.
Zastosowanie tej metody w ocenie eksperckiej ma jednak pewne cechy.
Ocena poszczególnych wskaźników jakości przez ekspertów rozpoczyna się od określenia dopuszczalnych przedziałów ich pomiaru (str. max: /> f MHH) s. max - najlepsza wartość wskaźnika, której przekroczenie jest niepraktyczne lub niemożliwe. Zasady wyznaczania maksymalnej dopuszczalnej wartości wskaźnika (p.max) zależą od celów oceny jakości. Konieczne jest, aby zasada ta była taka sama dla wszystkich wskaźników.
Zwiększenie wiarygodności ocen eksperckich osiąga się poprzez podzielenie skomplikowanych operacji na proste, które stanowią wieloetapową procedurę oceny akceptowalnych wartości wskaźnika. Przejście do każdego kolejnego etapu następuje po opracowaniu ustaleń uzgodnionych na etapie poprzednim.
Procedura ekspercka dotycząca określania akceptowalnych wartości wskaźników jakości składa się z następujących operacji:
Wydanie noty wyjaśniającej do ekspertów w kwestionariuszach, w których
wskaźniki jakości mają charakter numeryczny i opisano zasady doboru tolerancji
tymczasowe wartości wskaźników;
Wypełnianie ankiet przez ekspertów i wskazywanie konkretnych modeli dot
dukcje, których wartości uważają za wyjątkowo akceptowalne;
Zapoznanie każdego eksperta z przypisanymi sobie nawzajem ocenami
przez niektórych ekspertów i ich dyskusję;
Przeprowadzenie drugiej (czasem trzeciej i czwartej) rundy ankiety
nośny;
» uśrednianie wyników ocen.
W przypadku znacznej różnicy zdań przeprowadza się dodatkową turę głosowania. Wartość wskaźnika przyjmuje się za maksymalną, jeśli oddano na niego co najmniej 70% głosów. Jeżeli warunek ten nie jest spełniony, za maksymalną dopuszczalną wartość przyjmuje się średnią z 50% największych wartości p. max, dla minimalnej dopuszczalnej wartości - średnia z 50% najmniejszych wartości P g min. Uzyskane wartości są wykorzystywane przez ekspertów przy ustalaniu ocen wskaźników jakości.
Aby ustalić przez ekspertów rodzaj zależności (/) pomiędzy wartościami wskaźników Pt i ich oszacowania K, - często stosowana jest metoda punktu głównego. Konieczność jego stosowania wynika z faktu, że podzielenie procedury oceny na kilka etapów ułatwia pracę eksperta i pozwala mu oszacować pewne charakterystyczne punkty, na podstawie których można zbudować model o pożądanej wartości.
Kompleksowa metoda oceny wskaźników jakości- metoda polegająca na identyfikacji najważniejszych pojedynczych wskaźników oceny jakości, określeniu ich rzeczywistych i średnich ważonych wartości wskaźnika złożonego, z uwzględnieniem współczynników wagowych.
Obliczanie kompleksowego wskaźnika jakości (Q) przeprowadza się według wzoru
Gdzie Р\,Рг, ──iPn- rzeczywiste wartości wskaźników jakości;
Квь К„2, ..., К в„ - współczynniki wagowe tych wskaźników.
Stosowanie metody zintegrowanej wymaga rozsądnego wyboru zakresu wskaźników jakości produktu.
Rozdział 4. Metody badania towaru]
§ 5. Metody eksperckie
Wskaźniki te dzielą się na oceniające, identyfikacyjne i restrykcyjne.
Szacowane wskaźniki- wskaźniki właściwości konsumenckich, które mają możliwość zaspokojenia podstawowych potrzeb.
Wskaźniki te służą w razie potrzeby do oceny poziomu jakości i konkurencyjności towarów, a także do pozycjonowania ich w określonym segmencie rynku i przeprowadzania badania jakości towarów.
Wskaźniki identyfikacyjne- wskaźniki właściwości konsumenckich służące usystematyzowaniu towarów i przypisaniu ich do określonych grup klasyfikacyjnych.
Takie wskaźniki są częściej stosowane podczas przeprowadzania badań identyfikacyjnych.
Wskaźniki restrykcyjne- wskaźniki mające na celu ograniczenie ustalonych wymagań.
Wybór tych wskaźników zależy od celów badania towaru, a ograniczenia są ustalane za pomocą odpowiednich metod regulacyjnych. Dość często rzeczywiste wartości granicznych wskaźników jakości uzyskuje się metodami pomiarowymi, a do zadań ekspertów należy jedynie porównywanie wyników badań z ustalonymi wymaganiami. W tym przypadku nie są brane pod uwagę współczynniki wagowe zbioru badanych wskaźników.
Wskaźniki restrykcyjne są szeroko stosowane w obowiązkowej certyfikacji wskaźników bezpieczeństwa, a także w badaniach sanitarno-epidemiologicznych, weterynaryjnych, fitosanitarnych i środowiskowych. W niektórych przypadkach można je zastosować w takich rodzajach badań towarów, jak identyfikacja i jakość. Na przykład przy ustalaniu, czy napój szkolny należy do wódki, stosuje się następujące wskaźniki ograniczające: minimalną dopuszczalną zawartość alkoholu etylowego i maksymalną dopuszczalną zawartość olejów fuzlowych i alkoholu megylowego.
Dobór zakresu wskaźników jakości towarów i ich ekspercka ocena można przeprowadzić dwiema metodami: metodą ekspresową oraz metodą przechodzenia przez poziomy bez przygotowania i z przygotowaniem.
Ekspresowe metody kompleksowej oceny jakości próbek produktów opierają się na ustaleniu kompleksowego wskaźnika jakości wg
analiza wartości poszczególnych wskaźników indywidualnych i wyglądu bez wstępnej oceny i uwzględnienia współczynników wagowych.
Stosując te metody należy wziąć pod uwagę, że maksymalna liczba wskaźników podlegających ocenie, nawet dla wysoko wykwalifikowanego eksperta, to 7-9 wskaźników umiejscowionych na tym samym poziomie hierarchii i tworzących w miarę jednorodną grupę. Ponadto eksperci muszą wziąć pod uwagę znaczenie poszczególnych wskaźników za pomocą współczynników wagowych, relacji między nimi, a także wziąć pod uwagę jakość produktu jako systemu.
Metoda poruszania się po poziomach bez przygotowania to zespół operacji wykonywanych sekwencyjnie, ze stopniowym wzrostem poziomu. W tym przypadku analizę rozpoczynamy od dolnego poziomu drzewa wskaźników. Biorąc pod uwagę wartości wskaźników niższego poziomu, ekspert dokonuje oceny wskaźników wyższego poziomu. Operacje te powtarza się ze wzrastającymi poziomami, aż do osiągnięcia górnego poziomu – kompleksowej (uogólnionej) oceny jakości.
Sposób poruszania się po poziomach z przygotowaniem opiera się na wstępnym ustaleniu przez ekspertów współczynników wagowych wskaźników jakości i ich ocenie. Przy przydzielaniu kompleksowych ocen ekspert zna średnie wartości współczynników wagowych oraz szacunki poszczególnych wskaźników. Procedura określania złożonych wskaźników jest podobna do procedury metody przechodzenia przez poziomy bez przygotowania.
Metoda punktów głównych W zależności od ich liczby ma kilka odmian.
Trzy główne metody zwrotnica - metoda polegająca na podziale wartości wskaźników P na wartości maksymalne, minimalne i średnie oraz wyznaczeniu wartości szacunków K - w tych punktach. Odstęp skali pomiędzy punktami maksymalnymi i minimalnymi jest wstępnie ustawiony (skale 0-1 lub 0-10). Zadaniem eksperta jest także wyznaczenie trendu zależności w odstępie pomiędzy punktami głównymi oraz zbudowanie wykresu. Następnie z zależności graficznej można przejść do wzoru analitycznego do obliczania szacunków wskaźnika jakości K. Metoda ta pozwala na opracowanie jedynie przybliżonego modelu szacowania K.
Rozdział 4. Metody badania towarów
§ 5. Metody eksperckie
Metoda siedmiu głównych punktów - metoda oceny w siedmiopunktowej skali do określania wskaźników, których wartości ustala się eksperymentalnie lub metodą obliczeniową, a także metodą organoleptyczną.
Skala siedmiopunktowa jest jednolita, tj. przy przechodzeniu z jednej klasy jakości do drugiej punktacja zmienia się o jeden punkt. Skale tego typu są szeroko stosowane, szczególnie w ocenie organoleptycznej. Aby uzyskać dokładniejsze wyniki, należy przystąpić do określenia rodzaju zależności między ocenami a wynikami.
Aby ułatwić pracę eksperta, w nocie objaśniającej ankietę zamieszczono pięć wykresów. Ekspert wybiera krzywą (lub kombinację krzywych), która jego zdaniem najlepiej odzwierciedla charakter zależności. Następnie każdej klasie jakości przypisuje się ocenę zgodnie z charakterem zależności i wartościami wskaźników jakości . W takim przypadku wskazane jest użycie liczb z zakresu 0-10, wielokrotności 0,5, przy czym klasa „najwyższa jakość” otrzymuje ocenę 10.
Zatem wykres skonstruowany przez biegłego charakteryzuje zależność między wartościami bezwzględnymi wskaźników P i ich szacunkami K, -, a dla wskaźników ocenianych metodami organoleptycznymi, między klasami jakości a ich szacunkami.
Podsumowując, uzyskane wyniki są omawiane, przetwarzane i analizowane. W przypadku wskaźników wyznaczanych metodami pomiarowymi i obliczeniowymi pożądane jest podanie analitycznego opisu krzywych, który pozwala na obliczenie szacunku dla dowolnych wartości wskaźników.
Zastosowanie metody punktów głównych umożliwia grupowanie i klasyfikację wskaźników ze względu na rodzaj zależności.
Metody ankietowe
Metody ankietowe- metody polegające na przeprowadzeniu badania ankietowego grupy ekspertów, a następnie analizie i przetwarzaniu otrzymanych od nich informacji.
Celem tych metod jest określenie indywidualnej i grupowej oceny eksperckiej na potrzeby podejmowania ostatecznych decyzji.
Podstawą wyboru tych metod jest konieczność selekcji złożonych decyzji w sytuacjach niepewności lub współdecydowania.
sporządzenie prognozy opartej na podstawach naukowych, wymagającej udziału grupy niezależnych i kompetentnych specjalistów z wąskiej dziedziny lub wielu dziedzin wiedzy (np. wiedza o jednorodnej grupie produktów lub wszystkich produktach spożywczych lub nieżywnościowych). Najważniejszymi narzędziami metod badawczych są ich procedura i kwestionariusze.
Opracowanie procedury ankietowej przeprowadzono po sformułowaniu celów i utworzeniu grupy analityków. W tym celu opracowywane są kwestionariusze (otwarte i zamknięte) oraz ustalane są metody badania (indywidualne i grupowe, bezpośrednie i korespondencyjne). Istnieją pewne metody tworzenia kwestionariuszy, które należy wziąć pod uwagę przy ich opracowywaniu.
Opracowując kwestionariusze, grupa analityków musi uwzględnić poziom szczegółowości problemu, który determinowany jest specyfiką i celami badania. Wiarygodność wyników badań zależy od poziomu szczegółowości, a wraz ze wzrostem szczegółowości z reguły wzrasta spójność ocen eksperckich. Jednak nadmierna szczegółowość problemu może również prowadzić do zmniejszenia wiarygodności informacji otrzymywanych od ekspertów.
Uszczegółowienie problemu polega na włączeniu do kwestionariusza testów (pytań zamkniętych) z elementami gotowych odpowiedzi lub bez odpowiedzi (pytania otwarte). Elementy gotowych odpowiedzi dodatkowo ułatwiają uogólnienie i sformalizowanie odpowiedzi ekspertów, ale jednocześnie ograniczają treść informacyjną oceny do jednej lub kilku alternatywnych odpowiedzi i istnieje niebezpieczeństwo narzucania odpowiedzi ekspertowi. Ekspert, umieszczając w kwestionariuszu pytania otwarte, może udzielić odpowiedzi w dowolnej formie i z dowolną ilością informacji. W takim przypadku możliwe staje się odkrycie przy pomocy ekspertów nowych, czasami nieoczekiwanych dla analityków, aspektów problemu. Konkretne pytanie z określonym zestawem gotowych alternatywnych odpowiedzi nazywa się cechą kwestionariusza. Zestaw odpowiedzi może mieć charakter jakościowy lub ilościowy. Biorąc pod uwagę jakościowy charakter zestawu odpowiedzi, zadaniem eksperta jest wybranie spośród zaproponowanych elementów odpowiedzi, które jego zdaniem najpełniej oddają istotę problemu w tej kwestii. Gdy zbiór ma charakter ilościowy, odpowiedziom na pytania przypisywane są wartości liczbowe.
Rozdział 4. Metody badania towarów
§ 5. Metody eksperckie
 |
Przy wyborze cech, które powinny znaleźć się w kwestionariuszu, nie należy dopuszczać możliwości podwójnej interpretacji pytań. Dlatego warto sprawdzić kwestionariusz u samych analityków. Jeżeli rozkład ocen dla jakiegoś atrybutu ma znaczne odchylenie standardowe, to możemy założyć, że ten atrybut jest niejednoznaczny.
Wszystkie pytania zawarte w kwestionariuszu można podzielić na trzy grupy w zależności od ich treści:
Obiektywne dane osobowe eksperta – wiek, wykształcenie,
zawód, doświadczenie zawodowe, tytuł naukowy, wąska specjalizacja;
Cechy, które pozwalają ocenić motywy, którymi się kierujesz
ekspert kierował się oceną badanego problemu;
Podstawowe pytania dotyczące istoty badanego problemu.
W zależności od zakresu tematu metody przeprowadzania wywiadów z ekspertami
dzielą się na indywidualne i grupowe oraz w zależności od obecności lub nieobecności
omówienie wyników oceny w grupie eksperckiej, jej charakter
ra, uzasadnienie ocen, kontakty osobiste i osoby, z którymi przeprowadzono wywiady
Istnieje kilka metod zadawania pytań eksperckich (ryc. 17).
O wyborze tej lub innej metody przeprowadzenia badania eksperckiego decydują cele badania, koszty jego przeprowadzenia i oczekiwane wyniki, a kryteriami wyboru są obiektywność, świadomość i pracochłonność.
Kryterium obiektywności. Chociaż wymóg obiektywizmu ekspertów jest jednym z głównych, w praktyce na ekspertów można w pewnym stopniu wpływać. Może mieć charakter konformalny lub autorytarny i pełni rolę negatywną, gdyż opinia i ocena biegłego kształtują się pod wpływem czynników niezwiązanych z właściwościami towaru lub innego przedmiotu badania.
W związku z tym przy wyborze metod prowadzenia badań eksperckich należy preferować te, w których w mniejszym stopniu przejawiają się wpływy konformistyczne lub autorytarne. Do metod takich zalicza się np. anonimowe uzasadnianie ocen, brak kontaktu między ekspertami, głosowanie tajne. Zbiorowa ocena partnerska zwykle nie obejmuje bezstronnej i spójnej analizy zagadnień. Ocena opiera się na kompromisie pomiędzy ocenami poszczególnych ekspertów, dlatego w badaniach ekspertów rzadko stosuje się metodę kolektywnej oceny eksperckiej.
Ryż. 17. Klasyfikacja metod badań eksperckich
Rozdział 4. Metody badania towarów
§ 5. Metody eksperckie
Kryterium świadomości odnosi się do najważniejszych czynników wpływających na jakość biegłego, a także na wiarygodność dokonywanych przez niego ocen. Zwiększeniu świadomości ekspertów sprzyja ich wzajemne wzbogacanie się podczas dyskusji na temat ocen. Logiczne argumenty innych ekspertów, dostarczając dodatkowych informacji, nieznanych wcześniej innym ekspertom, pozwalają na podniesienie poziomu świadomości, dzięki czemu ekspert może dostosować swoją ocenę.
Na tej podstawie najskuteczniejsze w zakresie świadomości są metody zawierające informacje o ocenach innych ekspertów. Dochodzi także do osobistych kontaktów pomiędzy ekspertami, dyskutuje się o ocenach i ich osobistym uzasadnieniu. Dlatego przy organizacji pracy stałych grup eksperckich wskazana jest wymiana informacji, gdyż przyczynia się to do skoordynowanej pracy ekspertów. Przy tworzeniu tymczasowych grup ekspertów zaleca się wymianę informacji i wspólną dyskusję jedynie w przypadkach, gdy eksperci zostali ocenieni i wybrani ze względu na obiektywność w korygowaniu swoich ocen (brak zgodności). We wszystkich przypadkach, biorąc pod uwagę kryterium świadomości eksperckiej, nie należy zapominać o stworzeniu warunków dla ich obiektywizmu i wykluczeniu wpływów konformistycznych lub autorytarnych.
Kryterium pracochłonności zależy od ilości wykonanych operacji, ich czasu trwania i charakteru. Zatem uzasadniając ocenę w formie pisemnej, biegły poświęca więcej czasu niż podczas dyskusji ustnej. Skuteczność badania eksperckiego w dużej mierze zależy od metod i technik identyfikacji ocen eksperckich.
Metody i techniki przeprowadzania wywiadów z ekspertami. W przypadku ankiety indywidualnej pracownik techniczny przeprowadza ankietę z każdym ekspertem, a w przypadku ankiety grupowej wywiad przeprowadzana jest z całą grupą na raz. Wyniki badania indywidualnego, po uogólnieniu i odpowiednich obliczeniach, mogą posłużyć do ustalenia szacunków grupowych. Jednak ocenę grupową można uzyskać także w wyniku indywidualnej ankiety lidera i sublidera grupy eksperckiej.
Indywidualne badanie każdego eksperta w grupie wiąże się ze zwiększoną pracochłonnością, znacznym nakładem czasu oraz rozproszeniem ocen, co utrudnia wskazanie obiektywnej i rzetelnej oceny eksperckiej.
Podczas wywiadów z liderami i podliderami grupy eksperckiej, a zwłaszcza z ekspertami indywidualnymi, czas poświęcony na badanie jest krótszy, ale za to prawdopodobieństwo konformizmu wśród członków grupy i przejawu autorytarnych poglądów lidera i sublidera jest większe.
W zależności od technicznych sposobów zadawania pytań, badanie indywidualne dzieli się na następujące typy: wywiady, kwestionariusze wywiadów, kwestionariusze i badania mieszane.
Zalety i wady tych metod przedstawiono w tabeli. 5. Indywidualny sposób przesłuchania dzieli się na odmiany w zależności od zastosowanych technik technicznych.
Tabela 5Zalety i wady różnych metod przeprowadzania wywiadów z ekspertami
| Metody i odmiany | Zalety | Wady |
| informacje o ankiecie | ||
| Indywidualny | Możliwość identyfikacji | Wysoka czasochłonność |
| sposób | wszystko lub większość | menu i kryterium pracy |
| odmiany według stanu technicznego | niejasne pytania | pojemniki. W szkole podstawowej |
| techniki techniczne: | nie wystarczy wyjaśnić | nom ekspert od ankiet |
| wywiad | sformułowane; | może być niejasne |
| kwestionariusze wywiadu | użyj technicznych | sformułowane w |
| kwestionariusz mieszany | Chińskie techniki | proso, które rośnie |
| cja | koszty pracy. | |
| ankieta | Możliwa redukcja | |
| obiektywność | ||
| Metoda grupowa | Redukcja kosztów czasu | Niemożność użycia |
| menu ekspertów i pracowników | wykorzystanie technicznych | |
| czyja grupa, spadek | techniki nieba | |
| kryterium pracochłonności |
Wywiad- rodzaj przesłuchania biegłego w celu poznania jego oceny podczas swobodnej, ale prowadzonej według określonego programu rozmowy z biegłym.
Kwestionariusz wywiadu- rodzaj przesłuchania eksperta polegający na zadawaniu mu w określonej kolejności konkretnych pytań, zadawanych w formie kwestionariusza.
Rozdział 4. Metody badania towarów
§ 5. Metody eksperckie
Kwestionariusz- rodzaj przesłuchania ekspertów za pomocą pytań kwestionariuszowych, na które biegły udziela pisemnych odpowiedzi. Najczęściej badania prowadzone są drogą korespondencyjną, bez kontaktu z grupą roboczą. Aby zwiększyć świadomość eksperta, do kwestionariusza dołączona jest nota wyjaśniająca.
Ankieta mieszana- rodzaj wywiadu z ekspertem z wykorzystaniem kwestionariuszy i dodatkowych instrukcji członka grupy roboczej. Celem odprawy jest doprecyzowanie szczegółów i zadanie dodatkowych pytań (jeśli zajdzie taka potrzeba).
Największy potencjał merytoryczny pod względem informacyjnym mają metody takie jak wywiady, wywiad-kwestionariusze i kwestionariusze mieszane, a pod względem obiektywności – ankiety. Wywiady cechuje minimalna obiektywność. Jednakże, ze względu na różne cele badania, w praktyce można zastosować dowolną z tych metod. W takim przypadku preferowana jest jedna z tych odmian w następujących przypadkach:
Jeśli nie ma ograniczeń czasowych na przeprowadzenie ankiety, jest to wskazane
Przeprowadź wywiad-kwestionariusz lub ankietę mieszaną na różne sposoby;
Ze znaczną liczbą ekspertów i możliwością ich zgromadzenia
wspólnie korzystajcie z kwestionariuszy;
Jeżeli nie da się zadać jasno sformułowanych pytań,
co zostanie jednoznacznie zrozumiane przez wszystkich ekspertów, a także
jeżeli biegły ma trudności z udzieleniem odpowiedzi na zadane pytania
pytania w formie ocen numerycznych wykorzystują kwestionariusze mieszane
tułaczy.
Przeprowadzając badanie ekspertów, należy przestrzegać ogólnych i szczegółowych wymagań dotyczących warunków badania. Wymagania ogólne do warunków badania:
Korzystne środowisko psychologiczne badania, ułatwiające
promowanie interesów biegłego poprzez ustanowienie korzystnej
osobisty kontakt respondenta z ankieterem;
Eliminowanie możliwości świadomego lub nieświadomego
narzucanie ekspertowi opinii członków grupy roboczej lub innych osób
eksperci;
Zapewnienie pewności biegłego co do dokonanych ocen
nie będą wykorzystywane do celów dla niego niekorzystnych; Tutaj-
W określonych przypadkach może zostać nałożony warunek zachowania poufności informacji o opiniach biegłego;
Tworzenie i utrzymywanie optymalnego wysiłku badawczego przez
eksperci wykonują tylko te kreatywne, najbardziej złożone
transakcje wyceny i przeniesienia rozliczeń pomocniczych,
graficzne, inne operacje dla personelu technicznego obróbki
grupy;
Zrozumienie przez eksperta zadawanych mu pytań przy użyciu niezbędnych informacji
wymagana instrukcja, a w niektórych przypadkach wstępna
idź, ankieta szkoleniowa;
Zestawienie jasno sformułowanych pytań, które nie mają dwóch
znaczący charakter i niewymagający dużych dodatków
żadnych wyjaśnień;
Jeśli to możliwe, używaj powszechnych terminów
ujednolicone, a w przypadku ich braku wyjaśnienie nowego
lub dwuznacznie użyte terminy.
Szczegółowe wymagania:
A) do technik prowadzenia wywiadu
Preferowane wykorzystanie wywiadu standardowego,
Pewność siebie na początku rozmowy, sprzyjająca szczerości,
Szybkość i opłacalność podczas kodowania odpowiedzi ekspertów
członkowie grupy roboczej;
Prowokowanie ekspertów do uzasadniania swoich ocen poprzez
kwestionuje jego odpowiedź;
B) do technik zadawania pytań
zapewnienie jasnego i jednoznacznego zrozumienia przez ekspertów
charakter działalności poprzez załączenie do każdego kwestionariusza
nota wyjaśniająca określająca cele i zadania egzaminu,
metody i kolejność operacji;
Jednolitość w przygotowaniu kwestionariuszy i not wyjaśniających dot
ułatwienie pracy z nimi;
Losowy charakter zestawienia nieruchomości, które ekspert
muszą podawać szacunki liczbowe, a eksperci muszą to robić
ostrzegany o tym, w przeciwnym razie może tak być
nieświadome przeszacowanie wymienionych właściwości
Pierwszy.
Rozdział 4. Metody badania towarów
§ 5. Metody eksperckie
Połączenie operacji przygotowania i przeprowadzenia badań eksperckich oraz operacji technicznych pozwoliło stworzyć kilka metod eksperckich, które zyskały największe uznanie i dystrybucję. Należą do nich metody Delphi, PATTERN i kombinowane.
Metoda Delphi(w niektórych źródłach – Delphi) – metoda przesłuchania ekspertów, oparta na sekwencyjnie wdrażanych procedurach, których celem jest wyrobienie grupowej opinii na temat procedur o niewystarczającej informacji.
Nazwa metody pochodzi od starożytnego greckiego miasta Delfy, gdzie żyły wyrocznie przepowiadające przyszłość.
Cechami metody Delphi jest odmowa współpracy między ekspertami; anonimowość ocen; regulacja sprzężenia zwrotnego; odpowiedź grupy.
Odmowę wspólnej pracy ekspertów i anonimowość osiąga się poprzez to, że każdy ekspert wyraża swoją opinię w ankiecie, bez dyskusji grupowej. Stosowane są także inne techniczne metody zadawania pytań indywidualnych, np. odpowiedzi na pytania wprowadzane są do komputera przez ekspertów. Regulowana informacja zwrotna jest przeprowadzana w kilku rundach badania, a wyniki każdej rundy są przetwarzane metodami statystycznymi i przedstawiane ekspertom. Pozwala to ograniczyć rozrzut ocen indywidualnych i uzyskać odpowiedź grupową, która prawidłowo odzwierciedla opinię każdego eksperta.
Liczba rund (do czterech) uzależniona jest od tego, jak szybko uda się osiągnąć zbieżność ocen eksperckich w grupie.
Anonimowość ankiety pozwala na ograniczenie konformistycznego i autorytatywnego wpływu poszczególnych dominujących ekspertów, a regulowana informacja zwrotna ogranicza wpływ interesów indywidualnych i grupowych. Wprowadzenie informacji zwrotnej zwiększa także kryterium obiektywności i rzetelności ocen.
Przeprowadzenie ankiety w kilku rundach, poinformowanie ekspertów o wynikach poprzednich etapów pracy, po czym każdy ekspert musi uzasadnić swoją opinię, pozwala ograniczyć wahania w odpowiedziach indywidualnych i grupowych. Zapewnia to znaczną przewagę nad zwykłym uśrednianiem indywidualnych wyników.
W przypadku stosowania metody Delphi na procedury badawcze nakładane są następujące wymagania:
Zadawane pytania muszą zapewniać możliwość wypowiedzi
zapisanie odpowiedzi w postaci liczb;
Wystarczająca świadomość ekspertów do ustalenia
stopnie;
Dostępność uzasadnień eksperckich do każdego z zadawanych pytań.
Zaletą rozważanej metody jest wzrost
kryterium obiektywności ze względu na anonimowość odpowiedzi ekspertów, dzięki czemu opinia biegłego nie zostaje zniekształcona w wyniku sugestii lub dostosowania się do opinii innych ekspertów. Dodatkowo świadomość ekspertów wzrasta dzięki zapoznawaniu się z ocenami innych ekspertów po zakończeniu kolejnej rundy, a także uzasadnianiu własnych ocen. Identyfikacja dominujących opinii pozwala na zebranie punktów widzenia różnych ekspertów i sformułowanie opinii grupowej, a nie pojedynczej.
Wady metody ujawniające się już na początkowym etapie jej stosowania – niestabilność składu grup eksperckich, znaczne odstępy czasowe pomiędzy rundami, niejasne sformułowanie pytań, niedocenianie zróżnicowanych kompetencji ekspertów, nieracjonalność wybranej metody uśrednianie ocen eksperckich – zostały częściowo wyeliminowane poprzez opracowanie modyfikacji tej metody (metoda SIIR, Delphi – Perth, itp.). W rezultacie metoda Delphi stała się obecnie jedną z najczęściej stosowanych, zwłaszcza do celów prognostycznych, a także w badaniu szeregu problemów gospodarczych i społecznych.
Przy stosowaniu tej metody do eksperckiej oceny jakości dóbr konsumpcyjnych pojawiają się następujące wady: złożoność przeprowadzania wywiadów z ekspertami i wypełniania ankiet, pracochłonność oceny ze względu na dużą liczbę wskaźników jakości (czasami do 20 -40) oraz wypełnienie kilku ankiet (3-10), uciążliwości not wyjaśniających ze względu na brak bezpośredniego kontaktu organizatora z ekspertami.
Ze względu na te niedociągnięcia stosowanie metody Delphi w eksperckiej ocenie jakości towarów jest trudne, a w niektórych przypadkach niepraktyczne. Jest to jednak obiecujące dla uzyskania grupy
Rozdział 4. Metody badania towarów
§ 5. Metody eksperckie
Nowa ocena ekspercka i dogłębna analiza zdarzeń w sytuacjach niepewności.
Metoda WZÓR- metoda przeprowadzania wywiadów z ekspertami, polegająca na konstruowaniu struktury hierarchicznej - drzewa celów i podejmowaniu decyzji co do tych celów po otwartej dyskusji.
Nazwa metody składa się z pierwszych liter angielskich słów oznaczających „Wspomaganie planowania poprzez ilościową ocenę danych technicznych”. Metodę opracowano w latach 1962-1964. w amerykańskiej firmie Honnuel w celu oceny projektów nowych systemów uzbrojenia.
Metoda ta składa się z kilku etapów.
/ scena- ustalenie głównego problemu do rozwiązania i podzielenie go na szereg problemów pobocznych pierwszego, drugiego itd., które następnie dzielone są na węższe zadania. Podział trwa do momentu uzyskania prostych elementów, które mogą zostać ocenione przez ekspertów.
W wyniku tego podziału uzyskuje się hierarchiczną strukturę powiązanych ze sobą problemów i zadań pierwotnych, wtórnych, zwaną drzewem celów.
Etap II- określenie przy pomocy ekspertów współczynników wagi (istotności) każdego zadania w stosunku do celu głównego, przy czym eksperci podejmują decyzje po otwartej dyskusji w grupie eksperckiej.
Taka otwarta dyskusja, obok swojej zalety (interakcja ekspertów dążących do pozytywnej decyzji), ma także wadę ze względu na konformizm, czyli wypaczanie faktycznej opinii ekspertów na skutek sugestii lub dostosowywania się do opinii większości.
/// scena- wykorzystanie komputerów do przetwarzania otrzymanych danych i ich analizy.
Zaletą metody PATTERN w porównaniu z metodą Delphi jest uproszczenie procedury badania eksperckiego. Metoda ta ma jednak także szereg wad: brak uzasadnienia optymalnej liczby członków grupy eksperckiej oraz metodyki doboru kompetentnych specjalistów do grupy eksperckiej; przetwarzanie wyników ankiet bez uwzględnienia różnic w jakości poszczególnych ekspertów; brak baru-
ery służące przejawowi zgodności eksperckiej; niedostateczny rozwój i niepewność zasad konstruowania drzewa celów.
Ponieważ metody Delphi i PATTERN mają istotne braki i nie w pełni spełniają cele oceny eksperckiej, E.L. Reichmana i G.G. Azgaldov zaproponował metodę łączoną, która wykorzystywała pozytywne cechy innych metod eksperckich i eliminowała ich wady.
Metoda łączona- metoda oparta na połączeniu indywidualnych i zbiorowych ocen eksperckich.
Eksperckie metody oceny jakości wyrobów
| Nazwa parametru | Oznaczający |
| Temat artykułu: | Eksperckie metody oceny jakości wyrobów |
| Rubryka (kategoria tematyczna) | Produkcja |
Metody oceny jakości produktu
Istnieje wiele metod matematycznych i odpowiedniego oprogramowania do oceny jakości produktu. Należą do nich:
· ekspercka ocena jakości produktów, w szczególności metodą Delphi;
· ocena jakości produktu z wykorzystaniem logiki rozmytej;
· ocena jakości produktu za pomocą analizy skupień;
· probabilistyczne metody oceny jakości produktu;
Najbardziej rozpowszechniona jest ekspercka ocena jakości produktu.
Ekspercka ocena jakości produktu wiąże się z rozwiązaniem szeregu problemów, m.in.:
· utworzenie grupy eksperckiej i ocena kompetencji ekspertów;
· wybór eksperckiej metody pomiaru;
· opracowywanie ekspertyz i ustalanie stopnia zgodności ekspertyz;
· zwiększenie spójności ocen eksperckich.
Eksperckie metody pomiaru obejmują ocenę bezpośrednią, ranking, porównanie parami itp.
Opublikowano na ref.rf
.
Ocena bezpośrednia obiektów badań (szczególnych lub integralnych wskaźników jakości produktu) polega na przyznawaniu przez ekspertów punktów za pomocą skal ilorazowych (rysunek 5.1). Skala ilorazowa jest rodzajem skali przedziałowej z zerowym punktem odniesienia. W takim przypadku dopuszczalne jest zastosowanie splotu addytywnego wskaźników cząstkowych w celu uzyskania integralnego wskaźnika produkcji. Zwykle stosuje się skale 5-, 10- i 100-punktowe. Do przetwarzania wyników ocen eksperckich stosuje się metody statystyczne oraz następujące wskaźniki statystyczne:
· mediana – w celu uzyskania średniej opinii grupowej ekspertów;
· kwartyle górny i dolny – dla scharakteryzowania rozrzutu ocen eksperckich;
· Współczynnik zgodności – pozwalający scharakteryzować stopień zgodności pomiędzy opiniami ekspertów.
 |
Górny i dolny kwartyl wyznaczają granice wartości ocen, poza którymi mieści się 25% ocen eksperckich.
Współczynnik zgodności waha się od 0 do 1, gdzie 0 oznacza całkowitą niezgodę między ekspertami, a 1 oznacza całkowitą jednomyślność.
Jedną z najskuteczniejszych metod kształtowania grupowej oceny ekspertów jest metoda Delphi.
Aby zwiększyć stopień spójności opinii ekspertów, metoda ta przewiduje wieloetapową procedurę przeprowadzania wywiadów z ekspertami.
Na pierwszym etapie eksperci dokonują ocen samodzielnie. Na kolejnych etapach każdy ekspert zapoznaje się z orzeczeniami innych ekspertów, aby ewentualnie skorygować swoją ocenę. Wieloetapowa procedura przeprowadzania wywiadów z ekspertami trwa do momentu, gdy rozrzut szacunków mieści się w określonych granicach.
Cechy metody Delphi to:
· grupowy charakter egzaminu;
· wieloetapowa procedura przeprowadzania wywiadów z ekspertami;
· wyodrębnienie ekspertów przy dokonywaniu ocen na każdym etapie;
· uzasadnienie ocen eksperckich w trakcie dyskusji po każdym etapie.
Procedura badania metodą Delphi polega na przesłuchiwaniu ekspertów przy użyciu komputerów osobistych podłączonych do sieci lokalnej lub globalnej ze scentralizowanym przetwarzaniem informacji po każdej rundzie.
Oprogramowanie statystyczne może być wykorzystywane jako narzędzia programowe do przetwarzania ocen eksperckich Statystyka(wywoływacz StatSoft) I SPSS (Produkty statystyczne i rozwiązania serwisowe– produkty i rozwiązania statystyczne, programista SPSS Inc.).
Warto zauważyć, że w celu ujednolicenia szacunków ekspertów poprzez ich „wygładzenie” należy zastosować aparat logiki rozmytej omówiony w paragrafie 5.7.
Eksperckie metody oceny jakości produktu – koncepcja i rodzaje. Klasyfikacja i cechy kategorii „Eksperckie metody oceny jakości produktu” 2017, 2018.