서면 답변 · 2024-11-11 · 국회 14
소셜 미디어와 AI가 청년 급진화를 가속화함
의원의 질문은 소셜 미디어가 어떻게 청년 급진화를 가속화하고 있는지, AI가 향후 5년간 급진화에서 어떤 역할을 하게 될지, 그리고 대응 계획이 무엇인지에 초점을 맞추었습니다. 정부는 온라인 플랫폼과 알고리즘이 극단적 콘텐츠 확산을 조장하며, AI가 급진화를 가속화하고 테러 선전을 조력할 것이라고 지적했습니다. 정부는 입법 및 부처 간 협력을 통해 극단적 콘텐츠 차단 및 커뮤니티 아웃리치 등의 포괄적인 조치를 취하고 있습니다. 핵심 논쟁은 기술이 초래하는 급진화 속도 증가 및 콘텐츠 규제 난제에 있습니다.
핵심 요점
- • Social media amplifies extremist content
- • AI accelerates radicalisation and propaganda
- • Government uses multi-pronged counter-radicalisation
입법 강화 및 부처 간 협력으로 급진화 방지
정부의 대응 조치 및 향후 계획에 관한 질문
온라인 콘텐츠 규제 강화 및 급진화 방지
“AI can quickly auto-translate existing propaganda into multiple languages and create personalised messages at scale.”
참여자 (2)
전문 번역(한국어)
Hansard 원문 · 2026-05-02
8번 의원 주더밍 씨께서 내무부장관에게 묻습니다: (a) 소셜 미디어가 어떻게 청년의 급진화를 가속화하는가; (b) 인공지능(AI)이 향후 5년 내 청년의 급진화에서 어떻게 역할을 할 것인가; (c) 소셜 미디어와 인공지능이 청년 급진화에 미치는 부정적 영향에 대응하기 위한 어떤 계획들이 있는가.
샨무감 부장관: 청년 급진화는 긴급한 문제입니다. 2015년 이라크와 시리아 이슬람국가(ISIS)의 부상 이래로, 내무보안국(ISD)은 《내부보안법》에 따라 20세 이하 청년 14명의 사건을 처리했습니다. 이 중 6명은 싱가포르에서 공격을 감행하려는 의도가 있었습니다. 이 모든 사람들은 인터넷에서 찾은 폭력 극단주의 자료를 통해 자기주도적으로 급진화되었습니다.
인터넷은 즉시 사용 가능한 폭력 극단주의 자료와 테러 선전을 제공함으로써 급진화 과정을 용이하게 했으며, 이러한 내용은 우리의 디지털 네이티브 청년들이 쉽게 접근할 수 있습니다. 청년이 일단 이러한 내용을 검색하기 시작하면, 소셜 미디어 알고리즘은 더 많은 극단주의 내용을 추천할 수 있으므로 이러한 자료의 소비가 악화됩니다. 이러한 온라인 플랫폼들은 또한 에코 챔버의 역할을 하며, 뜻이 같은 사용자들과의 상호작용은 급진 신념을 강화할 수 있습니다. 극단주의자들과 테러분자들도 또한 소셜 미디어와 온라인 게임 플랫폼을 남용하여 청년들을 급진화시키고 모집합니다. 이러한 요인들은 급진화 속도를 가속화합니다. 청년이 이러한 온라인 자료에 접촉한 것부터 그들의 급진화까지, 그 과정은 몇 개월, 심지어는 몇 주 내에 일어날 수 있습니다.
인공지능(AI)은 급진화 과정을 더욱 가속화하고 테러와 관련된 활동을 촉진할 것입니다. 테러 조직들은 현재 인공지능 도구를 이용하여 온라인 선전을 생성하고 전파하고 있습니다. 인공지능은 기존의 선전을 신속하게 여러 언어로 자동 번역할 수 있으며, 대규모로 모집 활동을 촉진하기 위해 개인화된 메시지를 창작할 수 있습니다. 인공지능은 또한 훈련받은 눈으로도 구분하기 어려운 점점 더 현실적인 합성 멀티미디어를 제작하는 데 사용됩니다. 이러한 「딥페이크」는 악의적 행위자들에 의해 사회 내에 분열을 조장하고 폭력을 선동하기 위해 사용됩니다.
정부는 청년 온라인 급진화 위협에 대응하기 위해 통합적 접근을 취하고 있습니다. 최근 몇 년간, 우리는 인공지능이 생성한 콘텐츠를 포함하여 극단주의 및 테러 선전을 차단하거나 제거하기 위한 입법 수단을 강화했습니다. 예를 들어, 개정된 《방송법》(2023년 2월부터 발효)과 《온라인 범죄해악법》(2024년 2월부터 발효)은 정부가 극단주의적이거나 범죄적 내용에 대한 접근을 차단할 수 있도록 허용하며, 여기에는 테러를 선전하고 지도하며 폭력을 선동하는 내용이 포함됩니다. 그러나 모든 이러한 내용을 탐지하거나 제거하는 것은 가능하지 않습니다.
급진화 위협에 근원부터 대응하기 위해, 내무보안국(ISD)은 계속해서 다른 정부 기관 및 커뮤니티 파트너들과 협력하여 아웃리치 활동을 진행하고 있습니다. 예를 들어, 내무보안국(ISD)은 교육부와 협력하여 학교 지도자, 교사, 학교 상담사 및 학생 지도자들을 대상으로 반테러 및 반급진화 아웃리치 활동을 진행하고 있습니다. 또한 학교 커리큘럼을 통해 학생들의 미디어 리터러시를 강화하고 있습니다. 이러한 노력들은 청년과 교육자들이 급진화의 위험성에 대한 인식을 높이고, 의심되는 급진화 사례를 조기에 보고하는 것의 중요성을 알리는 것을 목표로 합니다.
영어 원문
SPRS Hansard 원본 기록 · 수집일: 2026-05-02
8 Mr Desmond Choo asked the Minister for Home Affairs (a) how has social media accelerated the radicalisation of youths; (b) how will artificial intelligence (AI) play a role in the radicalisation of youths in the next five years; and (c) what are the plans to address the adverse impact of social media and AI on youth radicalisation.
Mr K Shanmugam : Youth radicalisation is a pressing concern. Since 2015, following the rise of the Islamic State in Iraq and Syria (ISIS), the Internal Security Department (ISD) has dealt with 14 youths, aged 20 or below, under the Internal Security Act. Six had intentions to mount attacks in Singapore. All were self-radicalised through violent extremist materials they found online.
The Internet facilitates radicalisation by providing a ready source of violent extremist material and terrorist propaganda, easily accessed by our digital-native youth. Consumption of such material may be amplified by social media algorithms that recommend more extremist content once the youths start searching for such content. These online platforms also serve as echo chambers, where interactions with likeminded users may reinforce radical beliefs. Extremist and terrorist elements have also misused social media and online gaming platforms to radicalise and recruit youth. These factors have resulted in an acceleration in the speed of radicalisation. From the point where a youth encounters such online material, to the point of his or her radicalisation, the process can be as fast as a few months, if not weeks.
Artificial intelligence (AI) will further hasten the radicalisation process and facilitate terrorism-related activities. Terrorist groups are exploiting AI tools to generate and disseminate their online propaganda. AI can quickly auto-translate existing propaganda into multiple languages and create personalised messages at scale to facilitate recruitment efforts. AI is also being used to produce increasingly convincing synthetic multimedia, indistinguishable even to the trained eye. These "deepfakes" have been used by malicious parties to sow discord in society as well as incite violence.
The Government takes a holistic approach to tackle the threat of online radicalisation among youths. In recent years, we have strengthened our legislative levers to block or remove extremist and terrorist propaganda, including those generated by AI. For example, the amended Broadcasting Act (effective since February 2023) and the Online Criminal Harms Act (effective since February 2024) allow the Government to disable access to egregious or criminal content online, including those that advocate and instruct on terrorism and those that incite violence. However, it is not feasible to detect or remove all such content.
To tackle the radicalisation threat upstream, ISD has been working with other Government agencies and community partners to conduct outreach. For example, ISD has collaborated with the Ministry of Education, to conduct counter-terrorism and counter-radicalisation outreach to schools, including school leaders, teachers, school counsellors and student leaders. There are also efforts to enhance the students' media literacy through the school curriculum. These efforts aim to sensitise youths and educators to the dangers of radicalisation and the importance of early reporting of suspected radicalisation cases.