Измерение тестирование эксперимент моделирование наблюдение

Методы исследования в психологии. Наблюдение, опрос, тесты, эксперимент и моделирование, как методы исследования в психологии.

Все сказанное относится и к психологии. Ее явления настолько сложны и своеобразны, настолько труднодоступны для изучения, что на протяжении всей истории этой науки ее успехи непосредственно зависели от совершенства применяемых методов исследования. Со временем в ней оказались интегрированными методы самых разных наук. Это — методы философии и социологии, математики и физики, информатики и кибернетики, физиологии и медицины, биологии и истории, ряда других наук.

История применения методов исследования в психологии

Благодаря применению методов естественных и точных наук, психология начиная со второй половины прошлого века выделилась в самостоятельную науку и стала активно развиваться. До этого момента психологические знания получали в основном путем самонаблюдения (интроспекции), умозрительных рассуждений, наблюдения за поведением других людей. Анализ и разумное обобщение подобного рода жизненных фактов сыграли свою положительную роль в истории психологии. Они послужили основой для построения первых научных теорий, объясняющих сущность психологических феноменов и человеческого поведения. Однако субъективизм этих методов, их недостаточная надежность и сложность явились причиной того, что психология долгое время оставалась философствующей, неэкспериментальной наукой, способной предполагать, но не доказывать причинно-следственные связи, существующие между психическими и другими явлениями. Вместе с тем из-за чрезмерно выраженного теоретизирования она была фактически оторвана от практики.

Намерение сделать ее настоящей, более или менее точной, практически полезной наукой, не только описывающей, но и объясняющей явления было связано с внедрением в нее лабораторного эксперимента и измерения. Попытки количественной оценки психологических явлений предпринимаются начиная со второй половины XIX в. Одной из первых таких попыток было открытие и формулировка серии законов, связывающих силу ощущений человека с выраженными в физических величинах стимулами, воздействующими на организм. К ним относятся законы Бугера—Вебера, Вебера—Фехнера, Стивенса, представляющие собой математические формулы, при помощи которых определяется связь между физическими стимулами и ощущениями человека, а также абсолютный и относительный пороги ощущений. Сюда же следует отнести и начальный этап развития дифференциально-психологических исследований (конец XIX в.), когда для выявления общих психологических свойств и способностей, отличающих людей друг от друга, стали использовать методы математической статистики. Впоследствии, уже в XX в., тенденция использования математических моделей и расчетов получила широкое распространение в самых разных отраслях психологии. Без них сейчас не обходится ни одно серьезное научное психологическое исследование.

С конца 80-х годов XIX в. в психологии стали создаваться и применяться специальные технические приборы и устройства для проведения лабораторных экспериментальных научных исследований. Пионером в этом отношении явился немецкий ученый В.Вундт, который в Лейпциге организовал работу первой психологической лаборатории. Технические приборы и устройства позволяли исследователю ставить и проводить контролируемый и управляемый научный эксперимент, дозировать воздействия физических стимулов, на которые должен реагировать человек, измерять его реакции. Сначала это были довольно простые технические устройства, в основном механические. В начале XX в. к ним присоединились электрические приборы, а в наше время в психологических лабораторных исследованиях используются многие виды современной аппаратуры, в том числе радио-, видео- и электронной, включая ЭВМ.

Основные методы психологических исследований

Наряду с математизацией и технизацией исследований в психологии до сих пор не утратили своего значения традиционные методы сбора научной информации, в том числе такие, как наблюдение, самонаблюдение и опрос. Причин сохранения их значения несколько. Первая состоит в том, что явления, изучаемые в психологии, сложны и уникальны, их не всегда можно изучить с помощью методов, заимствованных из других наук. Для исследования таких тонких явлений, которыми занимается психология, методы естественных и точных наук во многих случаях не годятся. Наблюдение и самонаблюдение позволяют уловить многое из того, что практически недоступно приборам, неописуемо с помощью точных математических формул. Самонаблюдение нередко применяется в тех случаях, когда исследователь хочет непосредственно сам, а не со слов других лиц или по показаниям бездушных приборов получить сведения об ощущениях, эмоциональных переживаниях, образах, представлениях, мыслях, сопровождающих тот или иной поведенческий акт.

Однако данные наблюдения, и особенно самонаблюдения, почти всегда требуют проверки на достоверность и надежность. Там, где это возможно, эти данные необходимо контролировать при помощи иных, более объективных методов, в частности математических расчетов. Ниже представлены методы, которые используются в современной психологии для сбора так называемых первичных данных, т.е. информации, подлежащей дальнейшему уточнению и обработке. Основные методы психологических исследований и их варианты, применяемые для сбора первичных данных:

Внешнее (наблюдение со стороны)

Наблюдение, как метод исследования в психологии

Наблюдение имеет несколько вариантов.

Внешнее наблюдение — это способ сбора данных о психологии и поведении человека путем прямого наблюдения за ним со стороны.
Внутреннее наблюдение или самонаблюдение, применяется тогда, когда психолог-исследователь ставит перед собой задачу изучить интересующее его явление в том виде, в каком оно непосредственно представлено в его сознании. Внутренне воспринимая соответствующее явление, психолог как бы наблюдает за ним (например, за своими образами, чувствами, мыслями, переживаниями) или пользуется аналогичными данными, сообщаемыми ему другими людьми, которые сами ведут интроспектирование по его заданию.
Свободное наблюдение не имеет заранее установленных рамок, программы, процедуры его проведения. Оно может менять предмет или объект наблюдения, его характер в ходе самого наблюдения в зависимости от пожелания наблюдателя.
Стандартизированное наблюдение, напротив, заранее определено и четко ограничено в плане того, что наблюдается. Оно ведется по определенной, предварительно продуманной программе и строго следует ей, независимо от того, что происходит в процессе наблюдения с объектом или самим наблюдателем.
При включенном наблюдении (оно чаще всего используется в общей, возрастной, педагогической и социальной психологии) исследователь выступает в качестве непосредственного участника того процесса, за ходом которого он ведет наблюдение. Например, психолог может решать в уме какую-либо задачу, одновременно наблюдая за собой. Другой вариант включенного наблюдения: исследуя взаимоотношения людей, экспериментатор может включиться сам в общение с наблюдаемыми людьми, не прекращая в то же время наблюдать за складывающимися между ними и этими людьми взаимоотношениями.
Стороннее наблюдение в отличие от включенного не предполагает личного участия наблюдателя в том процессе, который он изучает.

Каждый из названных видов наблюдения имеет свои особенности и применяется там, где он может дать наиболее достоверные результаты. Внешнее наблюдение, например, менее субъективно, чем самонаблюдение, и обычно применяется там, где признаки, за которыми необходимо наблюдать, легко могут быть выделены и оценены извне. Внутреннее наблюдение незаменимо и часто выступает как единственно доступный метод сбора психологических данных в тех случаях, когда отсутствуют надежные внешние признаки интересующего исследователя явления.

Свободное наблюдение целесообразно проводить в тех случаях, когда невозможно точно определить, что следует наблюдать, когда признаки изучаемого явления и его вероятный ход заранее не известны исследователю. Стандартизированное наблюдение, напротив, лучше использовать тогда, когда у исследователя имеется точный и достаточно полный перечень признаков, относимых к изучаемому феномену.

Включенное наблюдение полезно в том случае, когда психолог может дать правильную оценку явлению, лишь прочувствовав его на самом себе. Однако если под влиянием личного участия исследователя его восприятие и понимание события может быть искажено, то лучше обращаться к стороннему наблюдению, применение которого позволяет более объективно судить о наблюдаемом.

Опрос, как метод исследования в психологии

Опрос представляет собой метод, при использовании которого человек отвечает на ряд задаваемых ему вопросов. Есть несколько вариантов опроса, и каждый из них имеет свои достоинства и недостатки. Рассмотрим их.

Устный опрос применяется в тех случаях, когда желательно вести наблюдение за поведением и реакциями человека, отвечающего на вопросы. Этот вид опроса позволяет глубже, чем письменный, проникнуть в психологию человека, однако требует специальной подготовки, обучения и, как правило, больших затрат времени на проведение исследования. Ответы испытуемых, получаемые при устном опросе, существенно зависят и от личности того человека, который ведет опрос, и от индивидуальных особенностей того, кто отвечает на вопросы, и от поведения обоих лиц в ситуации опроса.
Письменный опрос позволяет охватить большее количество людей. Наиболее распространенная его форма — анкета. Но ее недостатком является то, что, применяя анкету, нельзя заранее учесть реакции отвечающего на содержание ее вопросов и, исходя из этого, изменить их.
Свободный опрос — разновидность устного или письменного опроса, при которой перечень задаваемых вопросов и возможных ответов на них заранее не ограничен определенными рамками. Опрос данного типа позволяет достаточно гибко менять тактику исследования, содержание задаваемых вопросов, получать на них нестандартные ответы. В свою очередь стандартизированный опрос, при котором вопросы и характер возможных ответов на них определены заранее и обычно ограничены достаточно узкими рамками, более экономичен во времени и в материальных затратах, чем свободный опрос.

Тесты, как метод исследования в психологии

Тесты являются специализированными методами психодиагностического обследования, применяя которые можно получить точную количественную или качественную характеристику изучаемого явления. От других методов исследования тесты отличаются тем, что предполагают четкую процедуру сбора и обработки первичных данных, а также своеобразие их последующей интерпретации. С помощью тестов можно изучать и сравнивать между собой психологию разных людей, давать дифференцированные и сопоставимые оценки. Варианты теста: тест-опросник и тест-задание.

Тест-опросник основан на системе заранее продуманных, тщательно отобранных и проверенных с точки зрения их валидности и надежности вопросов, по ответам на которые можно судить о психологических качествах испытуемых.
Тест-задание предполагает оценку психологии и поведения человека на базе того, что он делает. В тестах этого типа испытуемому предлагается серия специальных заданий, по итогам выполнения которых судят о наличии или отсутствии и степени развития у него изучаемого качества. Тест-опросник и тест-задание применимы к людям разного возраста, принадлежащим к различным культурам, имеющим разный уровень образования, разные профессии и неодинаковый жизненный опыт. Это — их положительная сторона. А недостаток состоит в том, что при использовании тестов испытуемый по желанию может сознательно повлиять на получаемые результаты, особенно если он заранее знает, как устроен тест и каким образом по его результатам будут оценивать его психологию и поведение. Кроме того, тест-опросник и тест-задание неприменимы в тех случаях, когда изучению подлежат психологические свойства и характеристики, в существовании которых испытуемый не может быть полностью уверен, не осознает или сознательно не хочет признавать их наличие у себя. Такими характеристиками являются, например, многие отрицательные личностные качества и мотивы поведения.
В этих случаях обычно применяется третий тип тестов — проективные. В основе таких тестов лежит механизм проекции, согласно которому неосознаваемые собственные качества, особенно недостатки, человек склонен приписывать другим людям. Проективные тесты предназначены для изучения психологических и поведенческих особенностей людей, вызывающих негативное отношение. Применяя тесты подобного рода, о психологии испытуемого судят на основании того, как он воспринимает и оценивает ситуации, психологию и поведение людей, какие личностные свойства, мотивы положительного или отрицательного характера он им приписывает.

Пользуясь проективным тестом, психолог с его помощью вводит испытуемого в воображаемую, сюжетно неопределенную ситуацию, подлежащую произвольной интерпретации. Такой ситуацией может стать, например, поиск определенного смысла в картинке, где изображены неизвестно какие люди, непонятно чем занятые. Нужно ответить на вопросы, кто эти люди, чем они озабочены, а чем думают и что произойдет дальше. На основании содержательной интерпретации ответов судят о собственной психологии отвечающих.

Тесты проективного типа предъявляют повышенные требования к уровню образованности и интеллектуальной зрелости испытуемых, и в этом состоит основное практическое ограничение их применимости. Кроме того, такие тесты требуют большой специальной подготовки и высокой профессиональной квалификации со стороны самого психолога.

Эксперимент, как метод исследования в психологии

Специфика эксперимента как метода психологического исследования заключается в том, что в нем целенаправленно и продуманно создается искусственная ситуация, в которой изучаемое свойство выделяется, проявляется и оценивается лучше всего. Основное достоинство эксперимента состоит в том, что он позволяет надежнее, чем все остальные методы, делать выводы о причинно-следственных связях исследуемого явления с другими феноменами, научно объяснять происхождение явления и развитие. Однако организовать и провести настоящий, отвечающий всем требованиям психологический эксперимент на практике бывает нелегко, поэтому в научных исследованиях он встречается реже, чем другие методы. Имеются две основные разновидности эксперимента: естественный и лабораторный. Друг от друга они отличаются тем, что позволяют изучать психологию и поведение людей в условиях, отдаленных или приближенных к действительности.

Естественный эксперимент организуется и проводится в обычных жизненных условиях, где экспериментатор практически не вмешивается в ход происходящих событий, фиксируя их в том виде, как они разворачиваются сами по себе.
Лабораторный эксперимент предполагает создание некоторой искусственной ситуации, в которой изучаемое свойство можно лучше всего изучить. Данные, получаемые в естественном эксперименте, лучше всего соответствуют типичному жизненному поведению индивида, реальной психологии людей, но не всегда точны из-за отсутствия у экспериментатора возможности строго контролировать влияние всевозможных факторов на изучаемое свойство. Результаты лабораторного эксперимента, напротив, выигрывают в точности, но зато уступают в степени естественности — соответствия жизни.

Моделирование, как метод исследования в психологии

Моделирование как метод применяется в том случае, когда исследование интересующего ученого явления путем простого наблюдения, опроса, теста или эксперимента затруднено или невозможно в силу сложности или труднодоступноcти. Тогда прибегают к созданию искусственной модели изучаемого феномена, повторяющей его основные параметры и предполагаемые свойства. На этой модели детально исследуют данное явление и делают выводы о его природе.

Модели могут быть техническими, логическими, математическими, кибернетическими. Математическая модель представляет собой выражение или формулу, включающую переменные и отношения между ними, воспроизводящие элементы и отношения в изучаемом явлении. Техническое моделирование предполагает создание прибора или устройства, по своему действию напоминающего то, что подлежит изучению. Кибернетическое моделирование основано на использовании в качестве элементов модели понятий из области информатики и кибернетики. Логическое моделирование основано на идеях и символике, применяемой в математической логике. Наиболее известными примерами математического моделирования в психологии являются формулы, выражающие собой законы Бугера—Вебера, Вебера—Фехнера и Стивенса. Логическое моделирование широко используется при изучении мышления человека и его сравнении с решением задач вычислительной машиной. С множеством разнообразных примеров технического моделирования мы встречаемся в научных исследованиях, посвященных изучению восприятия и памяти человека. Это — попытки построения перцептронов — машин, способных наподобие человека воспринимать и перерабатывать сенсорную информацию, запоминать и воспроизводить ее.

Иллюстрацией кибернетического моделирования является использование в психологии идей математического программирования на ЭВМ. Развитие программного обеспечения работы ЭВМ за последние несколько десятков лет открыло для психологии новые перспективы изучения интересующих ее процессов и человеческого поведения, так как оказалось, что мыслительные операции, используемые людьми, логика их рассуждений при решении задач весьма близки к операциям и логике, на основе которых разрабатываются программы для ЭВМ. Это привело к попыткам представления и описания поведения человека, его психологии по аналогии с действием электронно-вычислительных устройств. Пионерами в этом отношении в психологии выступили известные американские ученые Д.Миллер, Ю.Галантер, К.Прибрам. Отметив наличие в организме такой же сложной, иерархически построенной системы регуляции поведения, какая характеризует структуру и функционирование программ для ЭВМ, они сделали вывод о том, что подобным же образом может быть описано и поведение человека.

Другие методы исследования в психологии

Кроме перечисленных методов, предназначенных для сбора первичной информации, в психологии широко применяются различные способы и приемы обработки этих данных, их логического и математического анализа для получения вторичных результатов, т.е. фактов и выводов, вытекающих из интерпретации переработанной первичной информации. Для этой цели применяются, в частности, разнообразные методы математической статистики, без которых зачастую невозможно получить достоверную информацию об изучаемых явлениях, а также методы качественного анализа.

Источник

Методы эмпирического уровня познания: наблюдение, эксперимент, измерение, моделирование

Наблюдение – планомерное (проводится строго по плану, составленному исходя из задачи исследования), целенаправленное (для решения определенной задачи), систематическое восприятие предметов и явлений внешнего мира.

Наблюдение фиксирует и регистрирует факты, описывает объект исследования, обеспечивая эмпирическую информацию, необходимую для постановки новых проблем и выдвижения гипотез. Научное описание должно быть возможно более полным, точным и объективным. Важно, чтобы понятия, используемые при описании, всегда имели четкий и однозначный смысл. Важнейшим требованием к наблюдению является требование интерсубъективности. Это подразумевает, что наблюдение может повторить каждый наблюдатель с одинаковым результатом. Лишь при соблюдении этого требования результат наблюдения будет включен в науку.

Многие научные теории классической науки были сформулированы как эмпирическое обобщение данных наблюдения: теория Дарвина, классическая механика, теория гравитации. Наблюдение как метод познания более или менее удовлетворяло потребности наук, находящихся на описательно- эмпирической ступени развития.

В современной науке наблюдение связано с широким использованием научных приборов (микроскопы, телескопы, космическая фотография), которые, во-первых, усиливают органы чувств и расширяют возможности наблюдения, а во-вторых, снимает определенный налет субъективизма с оценки изучаемых явлений. С другой стороны, в современной науке осознается зависимость наблюдений от теоретической установки наблюдателя. Подчеркивая роль теории в процессе таких наблюдений, А.Эйнштейн в разговоре с В.Гейзенбергом заметил: можно ли наблюдать данное явление или нет – зависит от вашей теории. Именно теория должна установить, что можно наблюдать, а что нельзя.

В современной науке повышается роль так называемых косвенных наблюдений. Так, объекты и явления, изучаемые ядерной физикой, не могут прямо наблюдаться ни с помощью органов чувств, ни с помощью самых совершенных приборов. То, что ученые наблюдают в процессе эмпирических исследований в атомной физике – это не сами микрообъекты, а только результаты их воздействия на определенные объекты, являющиеся техническими средствами исследования. Косвенные наблюдения обязательно основываются на некоторых теоретических положениях, устанавливающих определенную связь между наблюдаемыми и ненаблюдаемыми явлениями.

Ограниченности метода — узость диапазона восприятия различных органов чувств; пассивность субъекта – фиксация того, что происходит в реальном процессе без вмешательства в него.

Измерение.

Измерение – эмпирический метод познания, который определяет количественное отношение измеряемой величины к другой величине, служащей единицей измерения или эталоном. Измерением называют процесс представления свойств реальных объектов в виде числовой величины. Измерение – новая ступень в развитии эмпирического познания. Переход от наблюдения к измерению требует новых приборов и инструментов, а также новых понятий и предположений. Результаты наблюдения обычно выражаются с помощью качественных и сравнительных понятий. Качественные понятия, такие как «теплый», «зеленый», «большой» — обозначают некоторые классы, и, приписывая предмету свойство, выражаемое качественным понятием, мы тем самым включаем этот предмет в определенный класс. Сравнительные понятия выражают сравнительную степень интенсивности свойства. В силу этот упорядочивают все предметы исследуемой области в последовательность. Например, с помощью понятий «тяжелее», «легче» мы можем расположить предметы в последовательность классов.

Количественные понятия численно выражают степень интенсивности некоторого свойства. Например, свойство твердости минералов. Алмазу приписано число 10, остальным тем меньшее число, чем дальше минерал отстоит от алмаза в данной последовательности. Измерение описанного вида не вполне совершенно, так как числа, приписываемые нами свойствам, выбираются достаточно произвольно. Но есть более точные количественные понятия, основанные на количественных методах измерения. Например, введение количественного понятия температуры потребовало различных предположений теоретического характера: что температура тела связана с объемом, что объем тела изменяется прямо пропорционально изменению степени нагретости тела, что базисные точки шкалы соответствуют некоторой постоянной температуре и т.д.

Основные правила измерения:

*правило эквивалентности: если физические значения измеряемых величин равны, то должны быть равны и их числовые выражения

*правило приписывания «нуля»: оно состоит в указании определенного состояния, выбираемого за начало точки отсчета; например, в шкале температуры Цельсия значение «нуль» приписывается состоянию замерзающей воды

*правило выбора «единицы»: оно состоит в выборе определенного состояния, которое тоже легко распознается и воспроизводится в качестве необходимой основы для введения единицы измерения, продолжая приведенный пример, можно указать на состояние кипящей воды -100 градусов.

*правило построения шкалы

Эксперимент – это метод познания, при котором явления изучаются в контролируемых и управляемых условиях. Субъект активно вмешается в процесс исследования, воздействуя на изучаемый объект посредством специального инструментария и приборов, целенаправленно и фиксировано изменяет объект, выявляя новые его свойства. Благодаря этому исследователю удается изолировать объект от влияния побочных и затемняющих его сущность явлений и изучать явление в чистом виде; планомерно изменять условия протекания процесса; многократно воспроизводить ход процесса в строго фиксированных и поддающихся контролю условиях.

Подготовка и проведение эксперимента требует соблюдения ряда условий:

*наличие четко сформулированной цели исследования

*наличие исходных теоретических положений в качестве основы

*требует определенного развития технических средств познания

*должен проводиться людьми, имеющими достаточно высокую квалификацию

Основные характеристики экспери­ментальной стратегии, определяющей место и смысл разных (частных) видов эксперимента (исследовательский, провероч­ный, демонстрационный, качественный, решающий, модель­ный, мысленный), могут быть сведены к следующим:

1. Эксперимент исследует изменение состояния наблюдаемо­го объекта в зависимости от изменяющихся условий его су­ществования

2. В эксперименте происходит выход за предметный (опытный) горизонт исходной теории в мир новых (мыслимых) сущностей и одновременно опытное открытие этих сущностей как предельных (парадоксальных) форм опыта.

3. Эксперимент устремлен к пределу, в котором исследуемое явление (напр., падение тела, химическое превращение, жизнь популяции, реактивное поведение) выступает в «чистом виде», изолированно.

4. Мыслен­ный эксперимент в специальном смысле, т. е. принципиально
нереализуемый, воображаемый эксперимент (который сыграл столь существенную роль в уяснении смысла квантовой ре­альности

5. Эксперимент рассматривает технику как форму открытия сущностных законов природы и заранее открывает природу как возможную технику. Экс­периментальная техника (метод) однородна с воспроизводи­мым явлением (предмет), она представляет собой звено, че­рез которое теоретическое открытие становится техническим изобретением.

Эксперимент необходим как средство накопления и изучения фактов, составляющих эмпирический базис теории (исследовательские эксперименты); объективный критерий истинности тех или иных теоретических положений и гипотез (проверочные эксперименты).

Рассматривая особенности экспериментального метода исследования, следует упомянуть об очень важной проблеме планирования эксперимента. Еще в первой половине 20 столетия все экспериментальные исследования сводились к проведению так называемого однофакторного эксперимента, когда изменялся какой- то один фактор исследуемого процесса, а все остальные оставались неизменными. Но развитие науки требовало исследования процессов, зависящих от множества меняющихся факторов.

Социальный эксперимент используется в целях внедрения новых форм социальной организации и оптимизации управления. Сфера социального эксперимента ограничена моральными и правовыми нормами.

Эксперимент обладает преимуществами перед наблюдением:

1)изучаемые явления можно воспроизводить по желанию исследователя

2)в условиях эксперимента возможно обнаружение таких характеристик изучаемых явлений, которые нельзя наблюдать в естественных условиях. Именно таким путем в начале 40-х годов в физике (с нептуния) началось изучение трансурановых элементов.

3)варьирование условий дает возможность существенно изолировать изучаемое явления от всякого рода привходящих, усложняющих обстоятельств и приблизиться к тому, чтобы изучать его в чистом виде, при прочных равных условиях.

4)резко расширяется возможность использования приборов и, следовательно, автоматизации и компьютеризации эксперимента.

Модель – это искусственный объект (артефакт) или естественный объект, помещенный в искусственные или естественные условия, который обладает существенным с точки зрения цели познания (проектирования) сходством с объектом и может заменять объект.

Моделирование есть изучение некоторого объекта посредством наблюдений и экспериментов, проводимых с его моделью.

Таким образом, мы имеем 4 основных способа моделирования:

1)искусственный объект помещается в искусственные условия

2) искусственный объект помещается в естественные условия – т.е. в те, в которых пребывает изучаемый объект « сам по себе»

3)естественный объект помещается в искусственные условия

4)естественный объект помещается в естественные условия

1и 3 случаи называют модельным экспериментом. Термин «модель» имеет широкий спектр значений. Это может быть простой механический макет изучаемого явления или детальное построение в специальном формализованном языке.

Результаты эксперимента фиксируются с помощью описания – процедуры, состоящей в фиксации результатов наблюдений и экспериментов с помощью различных языковых средств, знаков, формул, наглядных графиков.

Источник

Поделиться с друзьями
Моя стройка
Adblock
detector