Сдам Сам

ПОЛЕЗНОЕ


КАТЕГОРИИ







Двух независимых выборочных совокупностей.





 

Если эксперимент проводится на различных группах, то возникает вопрос: из одной генеральной совокупности или из разных взяты эти выборки? Если выборки взяты из одной генеральной совокупности, то разница их средних арифметических будет статистически незначима. Если выборки принадлежат к различным генеральным совокупностям, то разница их средних арифметических будет статистически достоверной (P 0,95).

Для установления разницы между средними арифметическими рассчитаем нормированное отклонение t:

(10)

Числителем является, взятая по абсолютной величине, разница между средними арифметическими двух групп (сокращенно обозначили d). В знаменателе – средняя квадратическая ошибка этой разницы , сокращенно sd. Вычисление средней квадратической ошибки разности средних арифметических sd отличается для численности в выборках n<30 или n 30.

Если n<30, ошибка разницы определяется по формуле:

(11)

Например, определялось содержание белка в сыворотке крови в группе здоровых людей (n1=5) и больных гепатитом (n2=6). Определим, достоверна ли разница в содержании белка у здоровых людей и больных гепатитом. Для вычислений составим таблицу:

Таблица 2

Норма Гепатит

x1i x2i x1i (x1i)2 x2i (x2i)2
6,87 7,2 0,004 0,000016 0,005 0,000025
6,51 6,92 -0,356 0,126736 -0,275 0,075625
6,9 7,52 0,034 0,001156 0,325 0,105625
7,05 7,18 0,184 0,033856 -0,015 0,000225
  7,25 0,134 0,017956 0,055 0,003025
  7,1     -0,095 0,009025

= 6,866 = 7,195 å=0,18 å=0,19

s1=0,212 s2=0,197

=0,095 =0,08

sd= =0,123, t эксп. = = 2,67

Определим tтабл для P=0,95 и числа степеней свободы в двух группах: (n1–1)+(n2–1)=9; tтабл=2,26, tэксп>tтабл (2,67>2,26). Следовательно, вероятность различия P>0,95. Полученное содержание белка в норме: 6,866 0,095 cтатистически достоверно отличается от содержания белка в крови при гепатите: 7,195 0,08.

Если численность выборок достаточно большая (n 30), то можно воспользоваться готовыми вычисленными ошибками для каждой выборки. Средняя ошибка разницы в этом случае определяется по формуле:

sd= ; (12)

Допустим, мы хотим сравнить действие двух лекарственных препаратов, снижающих артериальное давление. Группа больных, принимающих 1–й препарат, состояла из 40 человек, другая группа – из 50. Среднее систолическое артериальное давление в 1й группе составляло 150 20; во второй группе – 140 30. Определим, достоверна ли разница средних арифметических:

tэксп = =0,277

По таблице нормального интеграла вероятности (таблица 2 Приложения) находим вероятность P=0,22. Разница средних арифметических недостоверна, следовательно, сделать вывод какой лекарственный препарат эффективнее, нельзя.

При отсутствии таблиц можно исходить из правила трех сигм: если разница d превышает свою ошибку почти в 3 раза, она достоверна с вероятностью не менее 0,99. Если n>30,то tэксп=1,96 гарантирует достоверность разницы с вероятностью 0,95.

 

Сводка основных формул.

1. Средняя арифметическая выборки:

2. Дисперсия: D(x)=

3. Среднее квадратическое отклонение:

4. Стандартная ошибка (средняя квадратическая ошибка):

5. Критерий нормированного отклонения (по Стьюденту): t=

6. Доверительный интервал: tp,n×

7. Критерий tэксп для определения достоверности средней арифметической одной выборки:

8. Критерий tэксп разности средних арифметических двух выборок:

а) n 30

б) n<30

 

Контрольные вопросы.

1. Отличаются ли друг от друга по закономерностям случайной вариации выборочная и генеральная совокупности?

2. Как колеблются средние арифметические отдельных выборок вокруг средней арифметической генеральной совокупности?

3. Что такое средняя квадратическая (стандартная) ошибка? По какой формуле она определяется?

4. Какова зависимость между значением стандартной ошибки и объемом совокупности?

5. В каких пределах по отношению к средней арифметической выборочной совокупности может находится средняя арифметическая генеральной совокупности? С какой вероятностью?

6. Изменяется ли доверительный интервал для при разных величинах n?

7. В каких случаях применяется распределение Стьюдента?

8. Как определяется критерий нормированного отклонения по Стьюденту?

9. Как пользуясь таблицами Стьюдента:

а) определить t для заданного уровня вероятности, зная число опытов n;

б) определить вероятность по известным t и числу опытов n.

10. Какой критерий используется для проверки достоверности статистических показателей?

11. Как определить достоверность средней арифметической одной выборки?

12. Как определить достоверность разности средних арифметических: а) зависимых выборок; б) независимых выборок?

13. Как отличается определение достоверности разности средних арифметических для независимых выборок в случае:

а)количество вариант в выборке n 30;

б) количество вариант в выборке n<30?

 

Задания для самостоятельной работы.

 

1. Рассчитать основные статистические характеристики (, D, s, ) двух независимых выборок (таблица 1). Записать результат в виде .

2. Для данных выборок определить доверительный интервал для генеральной средней:

а) с вероятностью р=0,95;

б) с вероятностью р=0,99.

3. Рассчитать достоверность различия двух независимых выборок (таблица 1).

4. Рассчитать достоверность различия двух связанных выборок (таблица 2) разностным методом. Записать вывод.

Вариант 1.

Скорость десневой экссудатации у детей (мл/сутки)

Таблица 1

Норма 0,73 0,75 0,8 0,82 0,81 0,86 0,85 0,79 0,82 0,78
Гингивит 1,32 1,8 1,7 1,4 1,5 1,49 1,52      

 

Скорость не стимулированного слюноотделения у детей (мл/мин.)

Таблица 2

До операции 0,19 0,2 0,13 0,22 0,15 0,17
После уранопластики 0,21 0,23 0,15 0,26 0,15 0,18

Вариант 2.

Калий мочи (г/сутки)

Таблица 1

Норма 2,1 2,0 1,9 1,8 2,2 2,2 2,0 1,8 2,1
Легочная недостаточность 0,8 2,0 0,9 0,8 0,7 0,7 1,0 0,9 2,1

 

 

Норадреналин мочи (мкг/сутки) при грудной жабе.

Таблица 2

До лечения 36,9 38,2 36,1 33,5 34,8 37,0 35,1 40,0 38,5 38,3
После лечения 40,5 43,8 56,7 49,8 50,4 45,4 39,9 38,7 40,3 51,6

 

Вариант 3.

Содержание адренокортикотропного гормона (мл.ед)

Таблица 1

Норма 332,1 33,0 28,2 29,5 35,7 31,8 37,5 26,4  
Беремен-ность 40 недель     98,6     120,3     73,6     96,1     104,3     113,1     100,3     68,1     71,1

 

Микрошероховатость поверхности эмали

после воздействия кислотой (Со ОЭДФ)

Таблица 2

До воздействия 0,15 0,128 0,135 0,14 0,125 0,131
После воздействия 0,192 0,175 0,165 0,15 0,11 0,125

Вариант 4.

Свободный гепарин крови

Таблица 1

Норма 5,7 5,9 6,3 6,6 5,0 3,7 4,0 4,5 5,7 5,6
Стоматит 13,9 13,5 12,0 10,3 13,0 15,7 14,7      

 

Микрошероховатость поверхности эмали

после воздействия ортофосфорной кислотой

Таблица 2

До воздействия   0,155   0,150   0,125   0,18   0,17   0,16   0,143
После воздействия   0,808   0,803   0,584   0,19   0,87   0,15   0,745

 

Вариант 5.

Связанный холестерин крови (мг%)

Таблица 1

Норма 58,9 53,1 64,1 59,3 69,0 62,0 53,3 61,1 58,3
Себоррея 105,3 83,7 122,2 110,6 101,1 96,8 114,5 113,0  

 

Содержание трийодтиронина (мг/мл) при тиреотоксикозе

Таблица 2

До лечения   4,35   5,01   6,03   4,35   5,40   5,12   2,02   2,65   4,56   5,25
После лечения   2,25   4,40   3,15   2,35   1,35   3,40   2,31   1,72   3,75   4,21

 

Вариант 6.

Показатели гемоглобина пришлого населения Заполярья (г/л)

Таблица 1

Здоровые дети (девочки)                                    
Здоровые дети (мальчики)                                    

 

Количество плазматических недозрелых клеток

в слизистой толстой кишки (%) при дизентерии.

Таблица 2

До лечения   18,7   13,8   14,0   25,4   20,4   18,0   19,6   17,2   14,2   15,0
После лечения   14,1   5,4   5,2   6,8   4,4   3,6   5,3   5,0   13,3   4,4

 

Тема 3. Основы корреляционного анализа

 

В медицинских и биологических исследованиях можно наблюдать наличие связей между отдельными признаками, явлениями. Например, пульс может изменяться в зависимости от артериального давления, дыхания, температуры тела и т.д. Существует две категории связей или зависимостей между признаками: функциональные и корреляционные (статистические).

При функциональных зависимостях каждому значению одной переменной величины соответствует одно вполне определенное значение другой переменной (функции).

Корреляционные (статистические) связи характеризуются тем, что численному значению одной переменной соответствует много значений (распределение) другой переменной.

Функциональная связь имеет место по отношению к каждому отдельному наблюдению. Корреляционная связь проявляется лишь в среднем для всей совокупности наблюдений. В отношении отдельных наблюдений она является неполной и неточной. Например, существует связь между ростом и весом человека, однако полного соответствия между значениями этих признаков нет. В некоторых случаях более высокие люди могут иметь меньший вес и наоборот. Функциональную связь можно выразить в виде уравнения, где изменению аргумента будет соответствовать вполне определенное приращение функции. При корреляции можно наблюдать только совместное изменение наблюдаемых признаков. Например, при увеличении одного признака другой признак может тоже увеличиваться или наоборот, уменьшаться. Соответственно, корреляционная связь может быть положительной (прямой), когда оба признака меняются в одном направлении и отрицательной (обратной), когда развитие одного явления связано с ослаблением другого. Корреляционные зависимости наблюдаются между очень многими признаками организмов – морфологическими, физиологическими и т.д., поэтому их оценка имеет большое практическое значение.

Изучение корреляционных зависимостей производится табличным, графическим и аналитическим методами. При табличном изучении корреляционных связей зависимость между величинами х и у задается двумерной таблицей, называемой корреляционной решеткой.

Рассмотрим два случая:

1. Для небольшого количества измерений, не сгруппированных в классы следует выписать попарно все показатели: сначала первый показатель – обозначим его х; затем связанный с ним второй показатель у; количество пар показателей х и у обозначим N. Например:

                 
х(рост)                  
у(вес)                  

 

2. Для большого количества наблюдений. В этом случае разбиваем на классы как ряд х, так и ряд у. Определив классы, следует построить корреляционную решетку. На двух сторонах квадрата (вверху по горизонтали и слева по вертикали) наносят значения классов обоих рядов. По горизонтали классы записывают слева направо от меньших значений к большим, по вертикали сверху вниз от меньших к большим.

В макет корреляционной решетки следует занести показатели для всех обследованных одновременно по обоим признакам. Например, цифра 1 в первой клетке обозначает, что только один человек имеет артериальное давление от 60 до 70 и пульс от 30 до 40. Суммы всех опытов в горизонтальных строках пишутся справа(my), суммы всех опытов в вертикальных столбцах пишутся внизу (mx). Справа внизу в угловой клетке записывается сумма всех опытов (72). Она относится как к ряду х так и к ряду у.

 

 

Корреляционная решетка для зависимости частоты

сердечных сокращений (ЧСС) от артериального давления (АД).

х(АД) у (ЧСС) 60-70 70-80 80-90 90- 100 100-110 110-120 120-130 my
30-40                
40-50                
50-60                
60-70                
70-80                
80-90                
90-100                
mx                

 

При графическом способе на плоскость попарно наносятся точки, соответствующие (х) и (у). Эти точки занимают определенную область, называемую корреляционным полем. На рисунках 1(а–е) показано возможное распределение вариант по отдельным клеткам корреляционной решетки при корреляциях, отличающихся по знаку и величине.

Если варианты расположены в решетке равномерно в овале и разброс точек велик, то признаки х и у варьируют независимо, корреляция между ними отсутствует (рис.1а). Если корреляционное поле имеет вид эллипса со сгущением точек вокруг главной диагонали, то между признаками х и у имеется связь (рис.1б, в, г, д, е). По тому, к какой диагонали происходит сгущение точек можно судить о знаке корреляции. На рис.1б, в, д – связь положительная, на рис.1г, е – связь отрицательная. По степени сгущения точек можно судить о величине коэффициента корреляции. Если варианты расположены по диагонали, зависимость между х и у становится функциональной, то есть каждому значению х соответствует определенное значение у и наоборот.

 

 

а) б)

 

 

r=0 r=+0,5

 

в) г)

 

 

r=+0,8 r=–0,5

 

д) е)

 

r=+1 r=–1

 

 

Рис 1. Распределение вариант в корреляционных решетках при корреляции, отличающейся по знаку и величине.

 

Расположение вариант в корреляционной решетке не всегда бывает таким правильным. Нахождение одной или нескольких вариант в стороне от овала может резко изменить предполагаемое значение коэффициента корреляции. Поэтому для более точного измерения степени связи необходимо аналитическое вычисление коэффициента корреляции (r). По законам случайной вариации, если бы разброс экспериментальных данных равнялся нулю, то точки корреляционного поля сконцентрировались в условном центре с координатами, равным средним значениям:

, (1)

При реальных корреляциях между х и у мерой рассеяния могут служить дисперсии или средние квадратические отклонения sx и sy:

sх= , sy= (2)

Простейшей характеристикой Gx,y связи между случайными величинами х и у служит математическое ожидание произведения отклонений х и у от условного центра. Напомним, что математическое ожидание случайной величины х принимающей n значений с вероятностями P1, P2, P3 ,…,Pn, равно: .

Следовательно:

Gx,y = . (3)

Эта характеристика носит название ковариации или момента связи и может быть вычислена для выборки из n опытов как:

Gx,y = . (4)

Коэффициентом корреляции называется безразмерная величина r:

r = (5)

Так как отклонение тех или других вариант от их средней арифметической, выраженной в долях среднего квадратического отклонения, представляет собой нормированное отклонение:

tx = , ty = , (6)

то формулу (5) можно представить в виде: r = (7)

Выражая отклонение отдельных вариант от средних арифметических по обоим признакам одновременно, можно сопоставить вариацию по обоим признакам. Рассмотрим зависимость между ростом и весом в примере 1. Вычислим

                 
х(рост)                  
у(вес)                  

168,55, =64,33, sx=6,46, sy=3,9

Вычислим для каждой варианты tx и ty, например:

tx1 = =–1,63,

ty1 = =–1,36 и т.д. Сопоставим значения tx и ty:

                 
tx -1,63 -1,17 -0,39 0,22 0,84 1,46 -0,4 0,84 0,22
ty -1,36 -1,11 -0,85 0,17 1,45 1,2 -0,34 0,17 0,68

Чем теснее связана вариация по этим двум признакам, тем чаще совпадут значения t обоих признаков и по знаку, и по количественному значению. Причем разные единицы измерения (см) и (кг) не имеют значения. Места, занимаемые ими в вариационных рядах, будут примерно одинаковыми. Наоборот, при отсутствии корреляции совпадение величин t по обоим признакам будет чисто случайным.

При статистических оценках связи случайных величин (х) и (у) по заданным выборкам используют различные рабочие формулы, полученные путем алгебраического преобразования числителя и знаменателя формулы (7). Если не рассчитывались средние арифметические величины и средние квадратические отклонения, можно воспользоваться формулой:

(8)

Коэффициент корреляции изменяется от +1 до –1. Отрицательные значения указывают на обратную зависимость между величинами х и у (возрастание одной при убывании другой). Прямая связь между величинами существует при положительных значениях коэффициента корреляции. Корреляция будет полной при r = 1 и отсутствует при r = 0. Практически считается, что при r < 0,4 связь отсутствует, при 0,4 £ r £ 0,7 имеется слабая связь. Тесная взаимосвязь между случайными величинами или процессами х и у имеется при 0,7 £ r £ 1. Для вычисления коэффициента корреляции в нашем примере по формуле (8) составим таблицу:

xi yi xiyi
         
         
         
         
         
         
         
         
         
B=1517 C=579 D=256033 E=37371 A=97778
B2 =2301289 C2 =335241      

 

Для удобства заменим суммы в формуле буквами латинского алфавита:

, , , , тогда формула (8) примет вид:

r= = =0,912864

Вывод: Между ростом и весом имеется тесная положительная взаимосвязь. С увеличением роста увеличивается вес.

Полученный коэффициент корреляции является выборочным, поэтому он имеет свою ошибку – “ошибку” выборочности. Эта ошибка является мерой расхождения между коэффициентом корреляции выборки (r) и коэффициентом корреляции генеральной совокупности (обозначим его r). Согласно нулевой гипотезе предполагается, что в генеральной совокупности нет связи между варьирующими признаками (r=0). Тогда критерий нормированного отклонения:

tэксп= (9)

При значении tэксп, соответствующим вероятностям 0,95 или 0,99 (), можно считать нулевую гипотезу отвергнутой, т.е. признать данное значение r достоверным. Для малых выборок (n<30) ошибку коэффициента корреляции sr можно определить по формуле:

sr = , где n – число пар измерений. (10)

тогда tэксп = (11)

В нашем примере: sr= =0,154, tэксп= =5,9

По таблице Стьюдента (таблица 4 Приложения) находим для Р=0,95 (a=0,05) и числа степеней свободы df=7 (df=n–2 т.к. 2 выборки) tтабл=2,37. tэксп>tтабл, следовательно значение коэффициента корреляции достоверно.

Мы рассмотрели случай простой корреляции между двумя признаками для малого числа наблюдений. Однако вариация любого признака у человека или животных может быть связана с вариацией многих факторов. В этом случае определяют коэффициенты множественной или частной корреляции. Коэффициент корреляции указывает лишь на степень связи в вариации двух переменных величин, но не дает возможности судить о том, как количественно меняется одна величина по мере изменения другой. На этот вопрос позволяет ответить другой метод изучения связи между признаками – метод регрессии. При изучении связи между двумя признаками х и у с помощью метода регрессии можно установить, как количественно меняется один признак при изменении другого на единицу. Проведение регрессионого анализа можно разделить на три этапа:

­ выбор формы зависимости (типа уравнения);

­ вычисление коэффициентов выбранного уравнения;

­ оценка достоверности полученного уравнения.

Соответственно связи между изучаемыми признаками различают простую и множественную, линейную и нелинейную регрессию. Для того чтобы выбрать тип уравнения регрессии, необходимо проанализировать тесноту и характер связи (корреляции), графики эмпирической зависимости между переменными, биологическую сущность изучаемого явления.

При простой корреляции изучается зависимость между изменчивостью двух признаков х и у. Так как изменяются две величины, то регрессия может быть двусторонней: определение изменения у по изменению х и определение изменения х по изменению у. В медико–биологических исследованиях часто встречаются случаи, когда один признак (у) свободно варьирует, а второй является более фиксированным, т.е. такой свободной вариацией не обладает. Примером могут служить так называемые ряды динамики или временные ряды, показывающие изменение признаков во времени, регрессия таких рядов оказывается односторонней. Какую величину принимать за x или y, зависит от условий эксперимента. Например, вес щитовидной железы у человека можно определить только после операции. Однако имеется тесная связь между площадью скеннографического изображения (при введении радиоактивных изотопов) и весом этого органа. Зная уравнение регрессии, можно по площади скеннограммы определить вес щитовидной железы – важного диагностического признака.

Рассмотрим случай линейной регрессии. Уравнением регрессии у по х называется уравнение вида =f (х), устанавливающее зависимость между значениями независимой переменной х и условными средними зависимой переменной . Под условной средней понимается среднее арифметическое значение , вычисленное для конкретного значения х. Например, с весом х=60 кг может встретиться три человека с ростом: 160, 166 и 164 см. Условная средняя для х=60 будет равна (160+166+164):3=163,33. Если коэффициент корреляции достоверен и близок к единице, а график эмпирической зависимости – к прямой линии, то зависимость между х и у линейная и выражается уравнением: у = а + bx. Коэффициент b характеризует скорость изменения зависимой переменной у при изменении переменной х и равен тангенсу угла наклона прямой к оси х: b=tg (рис.2).

y

 

y=a+bx

 


j а

x

Рис.2 График линейной зависимости.

Коэффициент a – начальная ордината, определяет значение у при х = 0. Графически это отрезок, отсекаемый прямой по оси y. Одним из простых способов вычисления коэффициентов уравнения регрессии (не только линейной) является метод наименьших квадратов. Сущность его состоит в том, что наилучшим считается положение линии регрессии, при котором сумма квадратов отклонений эмпирических точек по ординатам от теоретических (расчетных) минимальна. Математически это условие записывается в виде:

(12)

где уi – экспериментальные точки; у(хi) – зависимость у(хi)=а+bхi

Для выполнения условия (12) нужно приравнять нулю частные производные:

; , (13)

что дает для определения неизвестных коэффициентов а и b систему линейных уравнений:

(14)

Решение этой системы:

(15)

Коэффициент b носит название коэффициента регрессии. Для удобства введем обозначения:

; ; ; ; ,

тогда:

, .

 

Рассмотрим основные этапы проведения регрессионного анализа на примере зависимости веса щитовидной железы (у) от площади скеннографического изображения (х).

 

 

Вес щитовидной железы (y)                    
Площадь скеннографического изображения (x)                    

 

Перепишем ряды в порядке возрастания х:

 

у 12 23 41 59 62 95 102 122 203 270

х 11 17 25 32 33 44 46 52 73 89

 

Построим эмпирическую кривую распределения, выбрав соответствующий масштаб:

 


Рис.3. Эмпирическая кривая регрессии.

Для вычисления коэффициента a и b составим таблицу:

yi xi yi xi
       
       
       
       
       
       
       
       
       
       
B=989 A=422 C=59547 D=23154
  A 2 =178084    

;

Уравнение регрессии будет иметь вид: у = -41,71 +3,332 х

Для построения теоретической линии регрессии достаточно рассчитать по этому уравнению несколько точек: при х = 0; у =-41,71

х =10; у = -8,39

х=90; у= 258,16

 


Рис.4. Теоретическая линия регрессии.

Уравнение регрессии позволяет вычислять теоретические (вероятные) значения зависимой переменной по заданным значениям независимых переменных в области их изменения. Как правило, оно применяется только внутри этой области. Например, если у больного площадь скеннографического изображения равна 30 см2, то вес щитовидной железы равен: y=-41,71+3,332×30=58,25г.

Так как уравнение регрессии определялось нами на основе выборочной совокупности, оно может в той или иной мере представлять уравнение истинной регрессии в генеральной совокупности.

Коэффициенты а и b, как и другие статистические параметры, имеют ошибки выборочности. В более простом случае для оценки качества полученного уравнения регрессии можно воспользоваться разностным методом, используемом нами для оценки средних арифметических парных выборок (Тема 2). Вычислим разности между эмпирическими значениями уi эмп и теоретическими уi теор, рассчитанные по уравнению регрессии. Найдем разности этих значений d=yiэмп–уiтеор. Рассчитаем статистические характеристики разностного ряда: dср sd. Найдем tэксп= . Если tэксп < tтабл для числа степеней свободы n–1 и р=0,95, то различие сравниваемых рядов несущественно, т.е. уравнение регрессии соответствует истинному уравнению в генеральной совокупности. Для оценки уравнения регрессии составим таблицу:

yi xi yiтеор d=yi –yiтеор d2
    -5,058 17,058 290,9754
    64,914 -5,914 34,9754
    68,246 -6,246 39,01252
    104,898 -9,898 97,9704
    111,562 -9,562 91,43184
    14,934 8,066 65,06036
    201,526 1,474 2,172676
    254,838 15,162 229,8862
    131,554 -9,554 91,27892
    41,59 -0,59 0,3481
      dср =-0,0004 943,11
D= 104,79; s= 10,24;    
       

sd = =3,24; tэксп = =0,00012

tтабл=2,26, tэксп<< tтабл, различие сравниваемых рядов несущественно.

Контрольные вопросы:

1. Что такое корреляция?

2. В чем заключается разница между корреляционной и функциональной зависимостью?

3. Какими способами можно изучать корреляционные зависимости?

4. Что такое корреляционная решетка, корреляционное поле?

5. Что характеризует ковариация?

6. Как определяется коэффициент корреляции с помощью двух нормированных отклонений?

7. Напишите формулу коэф







Что вызывает тренды на фондовых и товарных рынках Объяснение теории грузового поезда Первые 17 лет моих рыночных исследований сводились к попыткам вычис­лить, когда этот...

Система охраняемых территорий в США Изучение особо охраняемых природных территорий(ООПТ) США представляет особый интерес по многим причинам...

ЧТО ТАКОЕ УВЕРЕННОЕ ПОВЕДЕНИЕ В МЕЖЛИЧНОСТНЫХ ОТНОШЕНИЯХ? Исторически существует три основных модели различий, существующих между...

ЧТО ПРОИСХОДИТ, КОГДА МЫ ССОРИМСЯ Не понимая различий, существующих между мужчинами и женщинами, очень легко довести дело до ссоры...





Не нашли то, что искали? Воспользуйтесь поиском гугл на сайте:


©2015- 2024 zdamsam.ru Размещенные материалы защищены законодательством РФ.