서구 언론의 정치적 편향성에 대한 LLM 평가: 이스라엘-하마스 및 우크라이나-러시아 전쟁

An evaluation of LLMs for political bias in Western media: Israel-Hamas and Ukraine-Russia wars

언론의 정치적 편향은 공론 형성, 유권자 행동, 그리고 광범위한 민주적 담론에 중요한 역할을 합니다. 주관적인 의견과 정치적 편향은 신문과 같은 언론 매체에서 발견될 수 있으며, 이는 해당 매체의 자금 조달 방식 및 정치 정당과의 연관성에 따라 달라질 수 있습니다. 언론 콘텐츠의 정치적 편향을 자동 감지하는 기술은 선거 과정에서의 편향을 줄이는 데 기여할 수 있습니다. 대규모 언어 모델(LLM)이 정치 및 언론 연구에서 점점 더 중요한 역할을 하고 있습니다. 본 연구에서는 LLM을 활용하여 가디언(The Guardian)과 BBC가 표현하는 좌파, 우파, 그리고 중립적인 정치적 의견을 비교 분석했습니다. 러시아-우크라이나 전쟁 및 하마스-이스라엘 분쟁과 같은 주요 사건을 다룬 신문 보도를 검토하고, BERT, Gemini, DeepSeek를 포함한 다양한 LLM을 사용하여 각 의견의 비율을 분석하여 편향성을 파악했습니다. 연구 결과, 전쟁 발발 이후 서구 언론의 정치적 편향이 좌파로 이동하는 경향을 보였으며, 각 LLM은 서로 다른 결과를 제시했습니다. DeepSeek는 일관적으로 좌파 성향을 보였으며, BERT와 Gemini는 중립에 더 가까운 결과를 나타냈습니다. BBC와 가디언은 두 가지 분쟁 상황에서 뚜렷한 보도 경향을 보였습니다. 러시아-우크라이나 전쟁에서는 두 매체 모두 비교적 안정적인 입장을 유지했지만, 이스라엘-하마스 분쟁에서는 가디언의 보도에서 더 큰 정치적 편향 변화가 나타났으며, 이는 사건에 따른 보도 편향의 패턴을 시사합니다. 이러한 차이는 LLM이 단순히 학습 데이터와 구조에 의해 결정되는 것이 아니라, 근본적인 세계관과 관련된 정치적 편향에 의해 영향을 받는다는 것을 보여줍니다.

Political bias in media plays a critical role in shaping public opinion, voter behaviour, and broader democratic discourse. Subjective opinions and political bias can be found in media sources, such as newspapers, depending on their funding mechanisms and alliances with political parties. Automating the detection of political biases in media content can limit biases in elections. The impact of large language models (LLMs) in politics and media studies is becoming prominent. In this study, we utilise LLMs to compare the left-wing, right-wing, and neutral political opinions expressed in the Guardian and BBC. We review newspaper reporting that includes significant events such as the Russia-Ukraine war and the Hamas-Israel conflict. We analyse the proportion for each opinion to find the bias under different LLMs, including BERT, Gemini, and DeepSeek. Our results show that after the outbreak of the wars, the political bias of Western media shifts towards the left-wing and each LLM gives a different result. DeepSeek consistently showed a stable Left-leaning tendency, while BERT and Gemini remained closer to the Centre. The BBC and The Guardian showed distinct reporting behaviours across the two conflicts. In the Russia-Ukraine war, both outlets maintained relatively stable positions; however, in the Israel-Hamas conflict, we identified larger political bias shifts, particularly in Guardian coverage, suggesting a more event-driven pattern of reporting bias. These variations suggest that LLMs are shaped not only by their training data and architecture, but also by underlying worldviews with associated political biases.