20260928-20261006 maliweb.net 기사 스크랩 누락

[정민섭]

python sahel_analytics.py
db를 엑셀로 다운

sahel_news_export.csv: 기사 ID, URL, 발행일, 국가, 매체, 제목, 요약, 중요도, 감성(sentiment) 등 일반적이고 규격화된 기사 메타데이터를 모아둔 파일입니다. 지정된 기간(예: 360일) 동안 수집된 원본 기사 목록의 기본 정보가 담겨 있습니다.   

sahel_discourse_metrics.csv: 비판적 담론 분석(CDA) 등 논문 연구를 위해 개별 기사의 콘텐츠를 정량화한 데이터입니다. 각 기사마다 저항 프레임(외교, 디지털, 문화)과 모순 프레임(실존, 기술, 개혁) 수치를 산출하고, 프랑스, 러시아, 전략자원 등 특정 엔티티의 언급 여부를 0과 1로 수치화하여 기록합니다.   

sahel_discourse_metrics_daily_ratios.csv: 국가별, 날짜별 일일 기사 발행량의 편차를 보정하여 담론의 점유율(밀도)을 계산한 파일입니다. 특정 날짜에 발행된 전체 기사 수 대비 2대 통합 담론(총 저항 담론, 총 모순 담론)이 등장한 비율(%)을 산출합니다.   

sahel_network_edges.csv: 한 기사에 함께 언급된 엔티티(개체)들의 동시 출현 빈도를 분석하기 위한 담론 네트워크 엣지(연결망) 리스트입니다. 프랑스, 미국, CEDEAO 등 서방 개체가 포함된 연결에는 가중치 -1을, 그 외 비서방-사헬 개체 간 연결에는 가중치 +1을 부여하여 세력 간 관계 강도와 방향성을 나타냅니다.  

20260928-20261006 maliweb.net 기사 스크랩 누락

==> 논문이나 정량 리포트를 작성하실 때, 이 9일간의 데이터(9월 28일 ~ 10월 6일)를 포함하여 통계를 돌리면 결과가 크게 왜곡됩니다. 전체 분석 기간에서 해당 9일을 결측 구간(Missing Data Period)으로 지정하여 통계에서 제외(Drop) 하거나, 연구 방법론의 '한계점(Limitations)' 부분에 '현지 웹사이트 구조 개편으로 인한 특정 기간 수집 누락'을 명시하여 학술적 객관성을 방어하는 것이 좋습니다.

maliweb.net은 파이프라인 내에서 '말리(Mali)' 국가의 유일한 뉴스 출처로 설정되어 있습니다. 따라서 9월 28일부터 10월 6일까지 약 9일간 말리 지역의 데이터가 전면 누락(결측)되었으며, 이는 비판적 담론 분석(CDA) 및 정량 통계에 다음과 같은 치명적인 왜곡을 발생시킵니다.

1. sahel_news_export.csv (일반 기사 데이터)에 미치는 영향

• 시계열 단절 및 과소 표집: 해당 9일 구간 동안 말리(Mali) 국적으로 분류된 기사 볼륨(Volume)이 '0건'으로 뚝 떨어지는 현상이 발생합니다.

• 사헬 3국(부르키나파소, 니제르, 말리) 전체의 일일 기사 생산량 추세선을 그릴 때, 말리의 데이터가 빠지면서 전체 정세 흐름이 갑자기 잠잠해진 것처럼 보이는 통계적 착시를 유발합니다.

2. sahel_discourse_metrics.csv (개별 기사 정량화 데이터)에 미치는 영향

• 프레임 발생 빈도 축소: 말리 언론이 주도적으로 생산하는 특정 담론(예: AES 연합 주도권, 친러시아 프레임, 대불 외교 저항 등)의 절대적인 등장 횟수가 누락됩니다.

• 부르키나파소나 니제르의 담론(저항/모순)만 지속해서 카운트되므로, 해당 기간 동안 사헬 지역 내에서 말리의 외교적, 문화적 저항 강도가 실제 정세보다 훨씬 약했던 것처럼 지표가 과소평가됩니다.

3. sahel_discourse_metrics_daily_ratios.csv (일일 담론 점유율)에 미치는 영향 (가장 심각)

• 비율 계산 불가(결측치 발생): 이 파일은 '특정 담론 등장 횟수 / 그날의 전체 기사 수'로 밀도(%)를 계산합니다. 말리의 일일 기사 수(분모) 자체가 0이 되므로, 9일 동안 말리의 담론 점유율 지표는 아예 빈칸(Null)으로 처리되거나 단절됩니다.

• 결과적으로 국가 간 담론 밀도(비중)를 비교하는 차트나 교차 분석을 수행할 때 해당 구간의 연속성이 완전히 깨지게 됩니다.

4. sahel_network_edges.csv (네트워크 엣지 리스트)에 미치는 영향

• 관계망 가중치(Weight) 왜곡: 담론 네트워크 분석은 특정 엔티티(예: France, Russia, USA)가 기사 내에서 '동시 출현'할 때마다 가중치가 누적되는 구조입니다.

• 9일 동안 말리 관점에서 바라본 국가 간 관계망(예: 'Mali-France' 간의 갈등(-1), 'Mali-Russia' 간의 협력(+1)) 데이터가 더해지지 않습니다. 이로 인해 전체 사헬 네트워크 토폴로지에서 부르키나파소와 니제르의 관점만 과대 대표(Over-represented)되고, 말리 중심의 엣지 연결성은 실제보다 약하게 나타납니다.