When a Human Says “No” to a Computer: Frontline Oversight of the Profiling Algorithm in Public Employment Services in Poland
JOURNAL ARTICLE
Cite JOURNAL ARTICLE
Style
Format
When a Human Says “No” to a Computer: Frontline Oversight of the Profiling Algorithm in Public Employment Services in Poland
Sztandar-Sztanderska, Karolina | Zieleńska, Marianna
Sozialer Fortschritt, Vol. 71 (2022), Iss. 6–7 : pp. 465–487
2 Citations (CrossRef)
Additional Information
Article Details
Pricing
Author Details
Sztandar-Sztanderska, Dr. Karolina, Faculty of Sociology, University of Warsaw, ul. Karowa 18, 00-927 Warszawa.
Zieleńska, Dr. Marianna, Faculty of Sociology, University of Warsaw, ul. Karowa 18, 00-927 Warszawa.
Cited By
-
The stealth legitimization of a controversial policy tool: Statistical profiling in French Public Employment Service
Delpierre, Alizée | Demazière, Didier | El Fatihi, HajarRegulation & Governance, Vol. 18 (2024), Iss. 2 P.499
https://doi.org/10.1111/rego.12541 [Citations: 2] -
Que sait‐on du travail ?
Que sait‐on du travail ?
2023
https://doi.org/10.3917/scpo.colle.2023.01.0561 [Citations: 0]
References
-
[ACT] Sejm (2014). Ustawa z Dnia 14 Marca 2014 r. o Zmianie Ustawy o Promocji Zatrudnienia i Instytucjach Rynku Pracy Oraz Niektórych Innych Ustaw, Dz.U. 2014 poz. 598.
Google Scholar -
[AUDIT] Najwyższa Izba Kontroli (2019) Efektywność świadczenia usług rynku pracy. Informacja o wynikach kontroli, Delegatura w Lublinie.
Google Scholar -
[EVALUATION 1] Ministerstwo Pracy i Polityki Społecznej, (2014) Powody Zmiany Profilu Pomocy. Raport z Analizy Danych Jakościowych z Profilowania Osób Bezrobotnych w 2014 Roku.
Google Scholar -
[EVALUATION 2] Ministerstwo Rodziny Pracy i Polityki Społecznej (2016) Profilowanie pomocy dla osób bezrobotnych raport z analizy danych pochodzących z profilowania pomocy dla osób bezrobotnych w 2015 roku
Google Scholar -
[EVALUATION 3] Ministerstwo Rodziny Pracy i Polityki Społecznej (2016) Profilowanie pomocy dla osób bezrobotnych raport z analizy danych pochodzących z profilowania pomocy dla osób bezrobotnych w IV kwartale 2015 r. i I kwartale 2016 r.
Google Scholar -
[EVALUATION 4] Ministerstwo Rodziny Pracy i Polityki Społecznej (2016) Profilowanie pomocy dla osób bezrobotnych raport z analizy danych pochodzących z profilowania pomocy dla osób bezrobotnych w drugim i trzecim kwartale 2016 r.
Google Scholar -
[HANDBOOK 1] Ministerstwo Pracy i Polityki Społecznej (2014) Profilowanie Pomocy Dla Osób Bezrobotnych. Podręcznik Dla Pracowników Powiatowych Urzędów Pracy.
Google Scholar -
[HANDBOOK 2] Ministerstwo Rodziny Pracy i Polityki Społecznej (2016). Profilowanie pomocy dla osób bezrobotnych Podręcznik dla pracowników powiatowych urzędów pracy. Wersja 2 uaktualniona.
Google Scholar -
[LETTER 1] Pismo Ministra Pracy i Polityki Społecznej do Dyrektorów Powiatowych Urzędów Pracy, 3.11.2014.
Google Scholar -
[LETTER 2] Pismo Ministra Pracy i Polityki Społecznej do Dyrektorów Powiatowych Urzędów Pracy, 4.09.2015.
Google Scholar -
[QUESTIONNAIRE] Ministerstwo Pracy i Polityki Społecznej, Kwestionariusz profilowania z punktacją.
Google Scholar -
[REGULATION] Minister Pracy i Polityki Społecznej (2014), Rozporządzenie Ministra Pracy i Polityki Społecznej z dnia 14 maja 2014 r. w sprawie profilowania pomocy dla bezrobotnego, Dz.U. 2014 poz. 631.
Google Scholar -
[STATISTICS] Ministerstwo rodziny, Pracy i Polityki Społecznej, Informacja o bezrobotnych i poszukujących pracy w grudniu 2019 r.
Google Scholar -
AlgorithmWatch (2019): Automating Society – Taking Stock of Automated Decision-Making in the EU, Bertelsmann Stiftung.
Google Scholar -
Allhutter, D./Cech, F./Fischer, F./Grill, G./Mager, A. (2020): Algorithmic Profiling of Job Seekers in Austria: How Austerity Politics Are Made Effective, Frontiers in Big Data 3(5): S. 1–17.
Google Scholar -
Alon-Barkat, S./Busuioc, M. (2021): Decision-Makers’ Processing of AI Algorithmic Advice: “Automation Bias” versus Selective Adherence, https://arxiv.org/ftp/arxiv/papers/2103/2103.02381.pdf [31.08.2021].
Google Scholar -
Alston, P. (2019): Report of the Special Rapporteur on Extreme Poverty and Human Rights, A/74/48037, https://www.ohchr.org/EN/NewsEvents/Pages/DisplayNews.aspx?NewsID=25156 [31.08.2021].
Google Scholar -
Bovens, M./Zouridis, S. (2002): From Street-Level to System-Level Bureaucracies: How Information and Communication Technology Is Transforming Administrative Discretion and Constitutional Control, Public Administration Review 62(2), S. 174–84.
Google Scholar -
Brodkin, E. Z./Marston, G. (Hrsg.) (2013): Work and the Welfare State: Street-Level Organizations and Workfare Politics, Washington, D.C.
Google Scholar -
Busch, P. A./Henriksen, H. Z. (2018): Digital discretion: A systematic literature review of ICT and street-level discretion, Information Polity, 23, S. 3–28.
Google Scholar -
Dencik, L./Kaun, A. (2020): Datafication and the Welfare State, Global Perspectives 1(1):12912, S. 1–8.
Google Scholar -
Denzin, N. (1970): The Research Act: A Theoretical Introduction to Sociological Methods, Chicago.
Google Scholar -
Desiere, S./Langenbucher, K./Struyven, L. (2019): Statistical Profiling in Public Employment Services: An International Comparison, OECD Social, Employment and Migration Working Papers, 224.
Google Scholar -
Devlieghere, J./Bradt, L./Roose, R. (2017): Governmental Rationales for Installing Electronic Information Systems: A Quest for Responsive Social Work, Social Policy & Administration 51(7), S. 1488–1504.
Google Scholar -
Devlieghere, J./Roose, R. (2018): Electronic Information Systems: In search of responsive social work, Journal of Social Work, 9 (0), S. 1–16.
Google Scholar -
Eichhorst, W./Kaufmann, O./Konle-Seidl, R. (2008): Bringing the Jobless into Work?: Experiences with Activation Schemes in Europe and the US., Berlin.
Google Scholar -
Eubanks, V. (2017): Automating Inequality: How High-Tech Tools Profile, Police, and Punish the Poor, New York.
Google Scholar -
European Commission (2020): Labour market policy: Expenditure and participants: data 2018, https://ec.europa.eu/social/BlobServlet?docId=22753&langId=en [5.11.2021].
Google Scholar -
Evans, T. (2016): Professional Discretion in Welfare Services: Beyond Street-Level Bureaucracy, New York.
Google Scholar -
Flaszyńska, E. (2020): Profilowanie Pomocy Dla Osoby Bezrobotnej – Nieudany Eksperyment Czy Stracona Szansa?, Praca Socjalna 3(35), S. 109–29.
Google Scholar -
Garsten, C./Jacobsson, K./Sztandar-Sztanderska, K. (2016): Negotiating social citizenship at the street-level: Local activation policies and individualization in Sweden and Poland. In: Heidenreich, M./Rice, D. (Hrsg.), Integrating Social and Employment Policies in Europe, S. 265–294.
Google Scholar -
Green, B. (2021): The Flaws of Policies Requiring Human Oversight of Government Algorithms, SSRN Electronic Journal, https://www.ssrn.com/abstract=3921216 [9.11.2021].
Google Scholar -
Henman, P. (2004): Targeted! Population Segmentation, Electronic Surveillance and Governing the Unemployed in Australia, International Sociology 19(2), S. 173–91.
Google Scholar -
Herman-Pawłowska, K./Stronkowski, P./Bienias, S./Dybaś, M./Kolczyński, M./Kulawik-Dutkowska, J./Skórska, P. (2016): Ocena Skutków Regulacji Wybranych Aspektów Wdrażania Ustawy z Dnia 14 Marca 2014 r. o Zmianie Ustawy o Promocji Zatrudnienia i Instytucjach Rynku Pracy Oraz Niektórych Innych Ustaw.
Google Scholar -
Hildebrandt, M./Gutwirth, S. (Hrsg.) (2008): Profiling the European Citizen: Cross-Disciplinary Perspectives, New York.
Google Scholar -
Jorna, F./Wagenaar, P. (2007): The “Iron Cage” Strengthened? Discretion and Digital Discipline. Public Administration 85(1), S. 189–214.
Google Scholar -
Keymolen, E./Broeders, D. (2013): Innocence Lost: Care and Control in Dutch Digital Youth Care, The British Journal of Social Work, 43(1), S. 41–63.
Google Scholar -
Kukulak-Dolata, I. (2015): Kontraktacja Usług Rynku Pracy – Szanse i Zagrożenia, Polityka Społeczna, S. 17–22.
Google Scholar -
Larsson, B./Jacobsson, B. (2013): Discretion in the “Backyard of Law”: Case Handling of Debt Relief in Sweden, Professions and Professionalism, 3(1), S. 1–17.
Google Scholar -
Lipsky, M. (2010): Street-Level Bureaucracy: Dilemmas of the Individual in Public Services, Russelll Sage Foundation.
Google Scholar -
Mazur, J. (2019): Automated Decision-Making and the Precautionary Principle in EU Law, Baltic Journal of European Studies 9(4), S. 3–18.
Google Scholar -
Mittelstadt, B. D./Allo, P./Taddeo, M./Wachter, S./Floridi, L. (2016): The Ethics of Algorithms: Mapping the Debate, Big Data & Society 3(2), S. 1–21.
Google Scholar -
Mozzana, C. (2019): A Matter of Definitions: The Profiling of People in Italian Active Labour Market Policies’. Historical Social Research 44(2), S. 225–246.
Google Scholar -
Niklas, J./Sztandar-Sztanderska, K./Szymielewicz, K. (2015): Profiling the Unemployed in Poland: Social and Political Implications of Algorithmic Decison-Making, Fundacja Panoptykon, https://panoptykon.org/sites/default/files/leadimage-biblioteka/panoptykon_profiling_report_final.pdf [01.10.2017].
Google Scholar -
Pithouse, A./Broadhurst, K./Hall, C./Peckover, S./Wastell, D./White, S. (2011): Trust, Risk and the (Mis)Management of Contingency and Discretion through New Information Technologies in Children’s Services, Journal of Social Work 12(2), S. 158–78.
Google Scholar -
Skitka, L. J./Mosier, K. L./Burdick, M. (1999): Does Automation Bias Decision-Making?, International Journal in Human-Computer Studies 51, S. 991–1006.
Google Scholar -
Snellen, I. (1998): Street Level Bureaucracy in an Information Age. In: Snellen, I. & W. Van De Donk (Hrsg.), Public Administration in an Information Age. A Handbook, IOS Press, S. 497–504.
Google Scholar -
Sztandar-Sztanderska, K. (2016): Obywatel spotyka państwo: o urzędach pracy jako biurokracji pierwszego kontaktu [Citizen Meets State: On the Public Employment Services in Poland as Street-Level Bureaucracy], Wydawnictwo Naukowe Scholar, Warszawa.
Google Scholar -
Sztandar-Sztanderska, K./Kotnarowski, M./Zieleńska, M. (2021): Czy algorytmy wprowadzają w błąd? Metaanaliza algorytmu stosowanego do profilowania bezrobotnych w Polsce [Are the algorithms misleading? The Meta-analysis of the algorithm for profiling of the unemployed used in Poland], Studia Socjologiczne, 1(240), S. 89–116.
Google Scholar -
Sztandar-Sztanderska, K./Zieleńska, M. (2018): Changing social citizenship through information technology, Social Work & Society, an International Online Journal 16(2).
Google Scholar -
Sztandar-Sztanderska, K./Zieleńska, M. (2020): What Makes an Ideal Unemployed Person? Values and Norms Encapsulated in a Computerized Profiling Tool, Social Work & Society, an International Online Journal 18(1).
Google Scholar -
van Berkel, R. (2010): The Provision of Income Protection and Activation Services for the Unemployed in “Active” Welfare States. An International Comparison, Journal of Social Policy 39(1), S. 17–34.
Google Scholar -
van Berkel, R./Caswell D./Kupka P./Larsen F. (Hrsg.) (2017): Frontline Delivery of Welfare-to-Work-Policies in Europe. Activating the Unemployed, New York, London.
Google Scholar -
Wastell, D./White, S./Broadhurst, K./Peckover, S./Pithouse, A. (2010): Children’s Services in the Iron Cage of Performance Management: Street-Level Bureaucracy and the Spectre of Svejkism, International Journal of Social Welfare, 310–320.
Google Scholar -
Yeung, K. (2019): Why Worry about Decision-Making by Machine? In: Yeung K./Lodge, M. (Hrsg.), Algorithmic regulation, S. 21–48.
Google Scholar
Abstract
Based on the case study of profiling algorithm implemented in local Public Employment Services in Poland, the article analyses frontline oversight over the automated decision-making system (ADM). Putting humans in the decision-making loop is considered an accountability mechanism in a digital welfare state. Using evidence coming from interviews, documents, and statistics, the article takes a closer look at whether and why – despite critical attitude towards the algorithm – street-level bureaucrats were reluctant to say “no” to a computer. Research indicates that the reluctance to override automatic results at street-level is a context-dependent phenomenon, in which policy and organisational factors play a role, alongside invisible discretionary practices of working around ADM without overtly correcting it.
Table of Contents
Section Title | Page | Action | Price |
---|---|---|---|
Karolina Sztandar-Sztanderska / Marianna Zieleńska: When a Human Says “No” to a Computer: Frontline Oversight of the Profiling Algorithm in Public Employment Services in Poland | 1 | ||
Abstract | 1 | ||
Zusammenfassung: Wenn ein Mensch „Nein“ zu einem Computer sagt: Frontline-Überwachung des Profiling-Algorithmus in öffentlichen Arbeitsverwaltungen in Polen | 2 | ||
1. Introduction | 2 | ||
2. The Impact of ICTs on Decision-Making Processes at the Street-Level | 4 | ||
3. The Implementation of Computerised Profiling in Labour Market Policy in Poland | 5 | ||
4. Methods | 8 | ||
5. Frontline Oversight of the Profiling Algorithm in PES – the Results of the Study | 1 | ||
5.1 Policy-Level Factors – the Ambiguous Policy and Electronic Surveillance | 1 | ||
5.2 Organisational Factors – Management as a Policy-Intermediary and the Role of Working Conditions | 1 | ||
5.3 Individual Differences – Responsibility for Decision-Making and the Use of Workarounds | 1 | ||
6. Concluding Remarks | 1 | ||
7. Annex | 2 | ||
References | 2 |