Позитивные изменения. Том 1, №1 (2021). Positive changes. Volume 1, Issue 1 (2021)
1 = (yB,2 – yB,1) – (yA,2 – yA,1), (2)
где А обозначает контрольную группу.
Таким образом, выборка в нашем исследовании также будет представлять две группы, которые будут выражаться в двух группах компаний, одна из которых являлась нарушителем закона (опытная) в одном из двух периодов, а другая подобных действий не осуществляла ни в одном из периодов (контрольная). Таким образом, переменная d2 в нашем уравнении характеризует соответствующий конкретному наблюдению период, а переменная dB будет представлять различие между опытной и контрольной группами. В итоге данный метод предоставляет нам возможность выявить чистое влияние программы на какой-либо индивидуальный социальный или экономический компонент.
Второй крупной работой Дэвида Карда было изучение влияния минимальной заработной платы на занятость. Проверялась гипотеза, что введение минимальной заработной платы окажет негативное влияние на занятость. Исследование базировалось на том, что 1 апреля 1992 года в Нью-Джерси должны были повысить минимальную заработную плату с 4,25 до 5,05 доллара в час. Исследователи собрали данные по уровню занятости в ресторанах быстрого питания в Нью-Джерси и Пенсильвании до и после указанного повышения в Нью-Джерси. Результат показал, что повышение минимальной заработной платы привело к увеличению занятости, так как в Нью-Джерси она фактически выросла.
Следующая фундаментальная задача, которая в общем виде выражается как поиск причинно-следственной связи между решениями (индивидуальными или государственными) и экономическими результатами, была взята в работу Джошуа Ангристом. Причинно-следственные вопросы требовали особого языка. Ангрист в своих работах опирался на придуманную в семидесятых годах Дональдом Рубиным модель «потенциальных исходов».
Исходные предпосылки модели: у каждого индивида есть набор потенциальных исходов, которые с ним могут произойти в зависимости от того, каким будет его решение. Например, если у человека болит зуб, то он может либо принять обезболивающую таблетку, либо пойти к стоматологу, либо ничего не делать. Каждое из этих решений приведет к какому-то потенциальному результату. В фактических данных мы наблюдаем только один из этих исходов, мы не знаем исход, если бы тот же самый индивид принял другое решение. Эта фундаментальная проблема причинно-следственного анализа не имеет решения, мы никогда не сможем измерить эффект воздействия для конкретного индивида. В то же время при определенных предпосылках мы можем измерить некоторый средний эффект.
Вместо придумывания потенциальных предпосылок, чтобы оценить эффект для всех, исследователи перевернули задачу и спросили, для кого мы можем оценить эффект при разумных предпосылках. Ответ оказался простым и интуитивным: средний эффект можно рассчитать для тех индивидов, которые изменили свое решение под воздействием инструмента.
В своей работе 1994 года Имбенс и Ангрист показывают, как применить эту методологию к инструментальными переменным. Вместо придумывания потенциальных предпосылок, чтобы оценить эффект для всех, исследователи перевернули задачу и спросили, для кого мы можем оценить эффект при разумных предпосылках. Ответ оказался простым и интуитивным: средний эффект можно рассчитать для тех индивидов, которые изменили свое решение под воздействием инструмента, – так называемый локальный средний эффект воздействия (Local Average Treatment Effect).
Опираясь на новую методику, Ангрист и Крюгер изучали влияние образования на заработную плату. Их задача состояла в исключении других влияющих факторов – способностей человека или его семейного происхождения. Ученые решили базироваться на данных о годе рождения учащихся, чтобы предсказать, сколько учащиеся будут учиться в школе. Предполагалось, что год рождения не связан с происхождением и врожденными способностями, соответственно, он не влияет на успешность и уровень заработной платы человека в будущем. На большой выборке они подсчитали, что влияние обучения на заработки по факту оказалось больше, чем предыдущие оценки с использованием традиционных методов. Так был установлен стандарт для такого рода анализа.
Новые идеи не сразу получили признание официальной науки. В начале девяностых работы Дэвида Карда вызывали много критики со стороны исследователей – и в том числе нобелевских лауреатов, как и подход Имбенса и Ангриста к анализу причинно-следственных связей. Но за прошедшие годы эти идеи выдержали свою проверку временем, и сегодня сложно представить себе эмпирическую работу, не опирающуюся в какой-то степени на исследования Карда, Имбенса и Ангриста. Такой подход к прикладным исследованиям получил название «революция достоверности» (credibility revolution). «Благодаря им роль эмпирических исследований в экономической науке претерпела революционные изменения. Их работы радикально изменили подход ученых к поиску ответов на эмпирические вопросы на основе данных естественных и полевых экспериментов», – сообщил Нобелевский комитет.
Экономические исследования за последние полвека сместились в зону эмпирической проверки гипотез. Изменилась и сама цель эмпирического исследования. Произошло смещение внимания науки от описания вариаций той или иной величины (дохода, безработицы и т. п.) в зону выявления причинно-следственных связей, от описания атрибутов – в зону экспериментов.
Мировая методология оценки импакт-эффектов в рамках социально-экономических процессов движется от атрибутивных подходов с постановкой контролируемого эксперимента в сторону естественных экспериментов и контрафактического моделирования. Здесь можно вспомнить другого нобелевского лауреата – Даниэля Канемана, который определил новое направление исследований в экономике – «поведенческую экономику». Канеман простым экспериментом доказал, что не некое абстрактное экономическое лицо, а реальный человек склонен к нерациональному выбору и что порядка 80–90 % людей не следуют рациональному выбору.
Стоит отметить, что рациональность в экономике отличается от этого понятия в быту. Под ней понимается набор некоторых аксиом, которые указывают, как сделать выбор. У нас есть все альтернативы, мы можем их сравнить с учетом всех значимых показателей и математически оценить выгоду от каждого варианта. И как показали эксперименты Канемана, реальные люди иначе оценивают вероятности тех или иных альтернатив. В случае выигрыша, например, люди склонны к гарантированному варианту чаще, чем к рискованному (менее вероятному), даже если в риск заложен более крупный выигрыш. При этом при потерях, эти же люди больше готовы рисковать в выборе, ожидая, что обойдется без потерь. Своими исследованиями Канеман как будто соединил математизированные подходы экономики со всеми строгими правилами и не всегда рациональные парадигмы социальных наук. Было положено начало новому широкому взгляду на социально-экономические процессы.
В заключение стоит отметить, что идею нерациональности человека отражали и другие ученые – Адам Смит, Джон Мейнард Кейнс, Герберт Саймон и Ричард Талер и многие другие. «Человек не настолько иррационален, чтобы действовать всегда рационально» (как отмечал автор теории ограниченной рациональности Саймон) – и это никак нельзя не учитывать в моделировании социально-экономических процессов.
Стоит ли проводить строгие эксперименты, задействовать на это значительные ресурсы, чтобы по факту получить цифры, на которые мы сами не склонны опираться? Однозначного ответа нет. Цифры – неумолимые аргументы во многих случаях, но, если мы решили на них опираться, нужно точно знать, из чего они сложились и какую часть или срез многогранного мира они оценивают. Цифры цифрам рознь. И то, что наши выводы и оценки на одних цифрах базироваться не могут, доказывает жизнь.
А наука дает нам все более интересные новые направления и методы исследования мира. Они дают нам возможность оценивать социальные процессы по понятной нам системе и находить, что еще можно изменить к лучшему в жизни общества.
* * *Информацию о нобелевских лауреатах по экономике 2021 года и их научном вкладе можно найти по ссылкам:
https://www.nobelprize.org/prizes/economic-sciences/2021/summary/
https://www.nobelprize.org/prizes/economic-sciences/2021/popular-information/
https://davidcard.berkeley.edu/papers/njmin-aer.pdf
https://www.gov.uk/government/publications/impacts-of-minimum-wages-review-of-the-international-evidence
https://www.sciencedirect.com/science/article/abs/pii/0304407686900382
https://www.aeaweb.org/articles?id=10.1257/jep.24.2.3
The 2021 Nobel Prize in Economics: a New Step in Assessing the Social Impact
Elena Avramenko
We have long been accustomed to the presence of complex scientific discoveries in our everyday life. Our habitual environment is when deep assimilation of everyday habits goes together with high technologies.
Elena Avramenko,
expert of the project "Development of a model for assessing the socio-economic impact of NGOs" of the Gladway Foundation, Lean 6 Sigma master of the Green Belt level
Converting many processes and spheres of life into digital environment numbers, do we think whose turn will be next? How to evaluate the success of new processes? And whether we can, digitize, evaluate, compare, and predict processes that have not yet been captured with the help of modern technologies and math canons?
One of the urgent tasks of the current time is assessing the social impact of modern business. Impact business should certainly be successful in two areas – in the economy as well as in its social mission implementation. And if the idea of the business economic efficiency assessment is clear enough, how can we assess whether life in society has become better as a result of the Impact mission implementation?
One of the urgent tasks of the current time is assessing the social impact of modern business. Impact business should certainly be successful in two areas – in the economy as well as in its social mission implementation.
The one who wants to do such assessment always faces a difficult task – to choose the right method and to base it on reliable data, which still needs to be identified and collected correctly in the process of Impact-influence.
The 2021 Nobel Prize in Economics winners, David Card, Hido Imbens and Joshua Angrist – three scientists from American universities – took an important step in this direction, showing to the world the ways to draw scientific conclusions based on seemingly unscientific experiments. This methodology can be used to evaluate complex social processes and to obtain, as the authors have shown, reliable results.
The complexity of organizing a controlled experiment is the main issue of social processes research. It is not possible to make a strict selection of people suitable for the experiment and to subject them to purposeful influence, for example, to put them to a healthy diet. We can only evaluate those whose conscious choice led them to such a diet. But what factors influenced the choice of those people? Can we fully correlate them with those who have not made such a choice? And what is our influence on such a choice if we regularly promote a healthy lifestyle? This is where the methodology for evaluating the results of natural experiments created by the Nobel award winners will help us. Scientists were able to introduce a scientific evidence base into experiments set by the life itself. If in one city or one country the minimum wage is suddenly raised, the working week is reduced or the hiring of migrants is expanded, and in neighboring countries they are not, then by measuring the results it will be possible to tell how this affects the well-being of people and the society as a whole. In other words, scientists suggested looking for two different groups of people, one of which has been randomly impacted by a social factor, and the second group avoided this impact.
David Card, using the method of natural experiments, analyzed the impact of the minimum wage, the level of immigration and education on the labor market trends. He found that raising the minimum wage does not always lead to a reduction in the number of jobs, and the secondary education has a higher value than it had been thought previously. In his research, Card showed that if basic models of economic theory are perceived as dogma and not tested empirically can lead to incorrect conclusions. Theoretically it is assumed that an employee's salary in the market is equal to his maximum productivity: on one hand, an organization can no longer pay an employee, focusing the cost limits, on the other hand, an employee will not agree to work for less and will move to another employer. Hence, any attempts of the state to set the minimum wage above the market are destructive. This paradigm is often used by those who are against raising the minimum wage.
If in one city or one country the minimum wage is suddenly raised, the working week is reduced or the hiring of migrants is expanded, and in neighboring countries they are not, then by measuring the results it will be possible to tell how this affects the well-being of people and the society as a whole
The second dogma that Card debunked in his research is the impact of the migrants influx on the employment of the indigenous population. This was indicated by the classical model of the balance of supply and demand in the market. In this model any increase in population (including due to migration) leads to an increase in the number of workers in the market, and if the number of jobs is fixed, it gives a decrease in wages and an increase in unemployment. David Card published two major papers on this topic. The first was the result of a study of how the inflow of more than 120,000 Cuban migrants in the 80s affected the Miami labor market. It was impossible to simply compare unemployment and wages in Miami “before and after” the migrants influx. The US economy experienced growth in 1979 and decline in 1981 for reasons that had nothing to do with these migrants. But Card analyzed average changes in wages and unemployment from the late 1970s to the 1980s in Atlanta, Houston, Los Angeles, Tampa and St. Petersburg. Then he subtracted these changes from the change in the results of the labor market in Miami and got the impact of the influx of immigrants on wages and unemployment in the city. Card found that this influx had virtually no effect on the wages of unskilled non-Cubans in Miami, nor did it increase unemployment among blacks or non-Cubans.
The methodological basis of the Card’s research was the “difference in differences” method. This method can be widely used to study the factors of influence in natural experiments. The essence of the method in its simplest implementation looks like the following: some outcomes are observed for two groups and two time periods. One of the groups is exposed, or participates in a program in one of the periods, and the second group is not affected in any of the periods. In the case when the same objects within the groups are observed in each period, the average change in outcome in the second (control) group is subtracted from the average change in outcome in the first (experimental) group. This eliminates the bias when comparing outcomes in the experimental and control groups only in the second period, which may be a consequence of constant differences between the groups, as well as the bias when comparing over time, which may be caused by time trends unrelated to the program.
The possibilities and potential of this methodology can be considered in more detail using the example given by Jeffrey Wooldridge in the paper “Evaluation by the method of “Difference of differences”: suppose that one of the US states implements a healthcare program for the elderly aged 65 years and older, and a certain health indicator is the dependent variable. One possibility is to use data only of residents of the state in which the program is implemented, both before and after its implementation, and take residents under the age of 65 (or between the ages of 55 and 64) as a control group, and residents aged 65 and older as an experimental group. A potential problem with an analysis of this kind is that other factors unrelated to the new state program may affect the health of older people compared to younger ones, for example, changes in health policy at the federal level. A different analysis strategy is to form a control group in another state where there is no such a health program. Thus, a constant change is imposed between the two groups, and later on the influence of the program itself on the studied indicator is measured.
So, let's return to the mathematical formula of this method.
If there are repeated samples over two time periods, the model tested using this method is written as follows:
y = B0 + BldB + 0d2 + 1d2dB + u (1)
where y is the outcome of interest,
d2 is a dummy variable for the second period, dB is a dummy variable for the experimental group.
The dummy variable d2 captures factors that would cause changes in y even in the absence of an impact or a program. The dummy variable dB captures possible differences between the experimental and control groups, respectively. The coefficient of interest 1 is found with the interaction variable d2dB, which coincides with the dummy variable equal to one for observations in the experimental group in the second period. Estimation 1 by the "difference of differences" method (PP-estimation) is the usual estimation of the least squares method for equation (1) based on a random sample of the studied groups. It can be written as
1 = (yB,2 – yB,1) – (yA,2 – yA,1), (2)
where A denotes the control group.
If there are repeated samples over two time periods, the model tested using this method is written as follows: y = B0 + e1dB + 0d2 + 1d2dB + u, where y is the outcome of interest, d2 is a dummy variable for the second period, dB is a dummy variable for the experimental group.
Thus, the sample in our study will also represent two groups, which will be expressed in the two groups of companies, one of which was a violator of the law (experimental) in one of the two periods, and the other did not carry out such actions in any of the periods (control). Thus, the variable d2 in our equation characterizes the period corresponding to a particular observation, and the variable dB will represent the difference between the experimental and control groups. As a result, this method gives us the opportunity to identify the net impact of the program on any individual social or economic component.
The second major work of David Card was the study of the impact of the minimum wage on employment. The hypothesis was tested that the introduction of the minimum wage would affect employment. The study was based on the fact that on April 1, 1992, New Jersey was supposed to raise the minimum wage from $4.25 to $5.05 per hour. The researchers collected data on the employment rate at fast food restaurants in New Jersey and Pennsylvania before and after the increase in New Jersey. The result showed that the increase in the minimum wage led to an increase in employment, since it actually increased in New Jersey.
Another fundamental task, which is generally expressed as the search for the causal relationship between decisions (individual or public) and economic results, was investigated by Joshua Angrist. “Cause-and-effect” issues required a special language. Angrist in his works relied on the model of “potential outcomes” invented in the seventies by Donald Rubin.
The initial assumptions of the model were the following: each individual has a set of potential outcomes that can happen to him, depending on what his decision will be. For example, if a person has a toothache, then he can either take an analgesic pill, or go to the dentist, or do nothing. Each of these solutions will lead to some potential result. The actual data show only one of these outcomes, we do not know the outcome if the same individual would have made a different decision. This fundamental problem of causal analysis has no solution, we will never be able to measure the impact effect for a particular individual. At the same time, under certain conditions, we can measure some average effect.
In their 1994 paper, Imbens and Angrist show how to apply this methodology to instrumental variables. Instead of coming up with potential prerequisites to evaluate the effect for everyone, the researchers turned the task around and asked for whom we can evaluate the effect with reasonable prerequisites. The answer turned out to be simple and intuitive: the average effect can be calculated for those individuals who changed their decision under the influence of the tool – the so-called Local Average Treatment Effect.
Based on the new methodology, Angrist and Kruger studied the impact of education on wages. Their task was to exclude other influencing factors – a person's abilities or his family background. Scientists decided to use data on the year of birth of students to predict how many students will study at school. It was assumed that the year of birth is not related to the origin and innate abilities, respectively, it does not affect the success and salary level of a person in the future. They calculated for a large sample that in fact the impact of training on earnings turned out to be greater than previously estimated using traditional methods. This is how the standard for this kind of analysis was established.
Instead of coming up with potential prerequisites to evaluate the effect for everyone, the researchers turned the task around and asked for whom we can evaluate the effect with reasonable prerequisites. The answer turned out to be simple and intuitive: the average effect can be calculated for those individuals who changed their decision under the influence of the tool.
New ideas were not immediately recognized by the official science. In the early nineties, the work of David Card caused a lot of criticism from researchers, including Nobel laureates, as well as the approach of Imbens and Angrist to the analysis of cause-and-effect relationships. But over the years, these ideas have stood the test of time, and today it is difficult to imagine empirical work that does not rely to some extent on the research of Card, Imbens and Angrist. This approach to applied research has been called the “credibility revolution". “Thanks to them, the role of empirical research in economics has undergone revolutionary changes. Their work has radically changed the approach of scientists to finding answers to empirical questions based on data from natural and field experiments," the Nobel Committee stated.
Economic research over the past half century has shifted into the zone of empirical hypothesis testing. The very purpose of empirical research has also changed. There has been a shift in the attention of science from the description of variations of a particular value (income, unemployment, etc.) to the zone of identification of cause-and-effect relationships, from the description of attributes to the zone of experiments.
The global methodology for assessing Impact effects of socio-economic processes is moving from attributive approaches with the formulation of a controlled experiment towards natural experiments and counterfeit modeling. Here we can recall another Nobel laureate, Daniel Kahneman, who defined a new direction of research in economics – “behavioral economics". Kahneman proved by a simple experiment that a real person, and not some abstract economic person, is prone to irrational choice and that about 80–90 % of people do not follow rational choice.
