테슬라 FSD가 고속도로를 혼자 달리는 영상은 이제 흔하다. 웨이모 로보택시는 샌프란시스코 도심을 운전자 없이 운행 중이다. 그런데 막상 “저 차가 어떻게 움직이는 거야?”라고 물으면 제대로 아는 사람이 많지 않다. 센서가 여러 개라는 건 알겠는데, 그게 어떻게 조합돼서 판단을 내리는지, 레벨 2랑 레벨 4가 실제로 뭐가 다른지 — 이걸 한 번에 정리해본다.
자율주행차, 결국 세 가지 질문을 푸는 기계다
자율주행차가 스스로 달리려면 세 가지를 해결해야 한다. 지금 주변에 뭐가 있나, 어디로 가야 하나, 어떻게 움직이나. 이 세 질문에 실시간으로 답하는 게 자율주행의 전부다. 들으면 단순해 보이는데 실제론 엄청 복잡하다. 신호등 색 바뀌는 타이밍, 갑자기 뛰어드는 보행자, 도로 위 비닐봉지까지 — 이런 변수가 초당 수백 개씩 쏟아진다. 그걸 전부 처리해야 한다.
기술의 최종 목표는 운전 부담 제거와 교통사고 감소다. 사람보다 반응이 빠르고, 졸리지도 않고, 술도 안 마신다. 이론상으론 완벽한 운전자다. 이론상으론.
자율주행차의 눈과 귀 — 핵심 센서 기술
차가 세상을 인식하려면 감각이 있어야 한다. 자율주행차는 카메라·라이다·레이더·초음파·GPS를 조합해 사람의 오감을 대신한다. 각각 역할이 다르다.
- 카메라: 가장 기본적인 센서다. 차선, 신호등, 표지판, 보행자를 읽어낸다. 색과 형태 구분은 카메라가 제일 낫다. 단점은 야간, 역광, 폭우에서 성능이 뚝 떨어진다는 것. 테슬라는 카메라만 쓰는 방식을 고집하는데, 업계에서 논란이 꽤 된다.
- 라이다 (LiDAR): 레이저 펄스를 쏴서 반사 시간으로 3D 지도를 만든다. 거리·형태·속도를 센티미터 단위로 잰다. 웨이모가 대표적으로 쓰는 방식이다. 문제는 단가가 수백만 원대라 양산 차량에 얹기가 쉽지 않고, 짙은 안개에도 약하다.
- 레이더 (Radar): 전파로 물체와의 거리·속도를 측정한다. 악천후에 비교적 강하고, 100m 이상 원거리 탐지에 유리하다. 앞차 간격 유지나 충돌 방지 시스템에 주로 쓰인다. 형태 인식은 카메라나 라이다보다 떨어진다.
- 초음파 센서: 주차할 때 삑삑 소리 내는 그것이다. 단거리, 수 미터 이내 물체 감지용이다. 저렴하고 설치가 쉽지만 범위가 짧아서 저속 주차 보조 이상으론 쓰기 어렵다.
- GPS/IMU (관성 측정 장치): 차량의 위치를 잡고, 기울기·방향·속도 변화를 계속 측정한다. 고정밀 지도와 결합하면 현재 위치를 수십 센티미터 단위로 추정한다.
이 센서들을 따로따로 쓰면 의미가 없다. 카메라는 밤에 흐리고, 라이다는 안개에 약하고, 레이더는 형태를 못 읽는다. 그래서 이 모든 데이터를 하나로 합치는 센서 퓨전이 핵심이다. 눈·귀·손에서 온 정보를 종합해 판단하듯, 각 센서가 서로의 맹점을 메운다. 어느 하나가 오류를 내도 나머지가 버텨주는 구조다.
자율주행차의 두뇌 — AI와 소프트웨어
센서가 데이터를 모으면 AI가 해석한다. 인식 → 판단 → 제어, 세 단계다.
- 데이터 처리 및 환경 인식: AI가 도로 위 모든 객체를 분류한다. 저건 사람, 저건 자전거, 저건 공사 표지판. 딥러닝이 여기서 핵심이다. 수억 장의 실제 주행 이미지로 학습해 패턴을 익힌다. 2024년 기준, 주요 자율주행 업체들은 수십억 킬로미터의 주행 데이터를 보유 중이다.
- 경로 계획 및 의사 결정: 현재 위치에서 목적지까지, 실시간 교통 흐름과 주변 차량 움직임을 보면서 경로를 짠다. 옆 차가 3초 후에 끼어들 것 같다면 미리 속도를 줄인다. 이런 예측과 대응이 초당 수십 번씩 일어난다.
- 고정밀 지도 (HD Map): 일반 내비게이션 지도와 차원이 다르다. 차선 폭, 신호등 정확한 위치, 도로 경사도, 커브 곡률까지 센티미터 단위로 담겨 있다. 자율주행차가 GPS 오차를 보정하고 스스로 위치를 정밀하게 추정하는 기반이다.
- V2X (Vehicle-to-Everything) 통신: 차와 차, 차와 신호등, 차와 보행자 스마트폰이 서로 신호를 주고받는다. 앞에 트럭이 가려 교차로가 안 보여도, 교차로 너머 차량 정보를 미리 받아 대비한다. 센서만으론 볼 수 없는 영역을 커버한다.
AI 모델은 달리면 달릴수록 정교해진다. 실제 주행 데이터가 쌓이면 학습이 개선되고, 개선된 모델이 다시 차에 탑재된다. 이 순환 구조 덕분에 자율주행 시스템은 출시 후에도 계속 성장한다. 데이터가 곧 경쟁력인 이유다.
자율주행 기술 어디까지 왔나 — SAE 레벨 0~5
미국자동차공학회(SAE)가 정의한 6단계 분류가 업계 표준이다. 숫자가 올라갈수록 차가 알아서 하는 범위가 넓어진다.
- 레벨 0 (No Automation): 운전자가 전부 다 한다. 자동화 기능 없음.
- 레벨 1 (Driver Assistance): 기능 하나만 자동. 어댑티브 크루즈 컨트롤(ACC)이나 차선 유지 보조(LKA) 중 하나. 나머지는 운전자 몫이다.
- 레벨 2 (Partial Automation): ACC와 LKA를 동시에 쓰는 수준. 지금 팔리는 고급 세단 대부분이 여기다. 차가 핸들과 가속을 같이 제어하지만, 눈은 계속 도로에 있어야 한다. 손 놓으면 경고한다.
- 레벨 3 (Conditional Automation): 고속도로 정체 구간 같은 특정 조건에서는 차가 전부 알아서 한다. 운전자는 그 사이 다른 것을 봐도 된다. 단, 시스템이 “이제 네가 운전해”라고 요청하면 즉시 넘겨받아야 한다. 이 레벨이 기술적으로 가장 까다롭다. 사고 시 책임 소재 문제가 복잡해서 상용화가 느리게 진행 중이다.
- 레벨 4 (High Automation): 정해진 구역(ODD, Operational Design Domain) 안에서는 운전자가 아예 없어도 된다. 비상 상황도 차가 스스로 처리하거나 갓길에 선다. 웨이모 로보택시가 목표로 하는 레벨이다.
- 레벨 5 (Full Automation): 어디서든, 어떤 날씨든, 완전 자율 주행. 핸들이나 페달 자체가 필요 없다. 아직 연구 개발 단계다. 언제 상용화될지는 솔직히 아무도 모른다.
지금 시장은 레벨 2에서 레벨 3으로 넘어가는 과도기다. 레벨 4 상용화 테스트도 곳곳에서 진행 중이다. 단, 레벨 경계는 기술만으로 정해지지 않는다. 각국 도로교통법, 보험 제도, 사회적 합의가 다 맞아떨어져야 한다.
기술보다 어려운 것들
자율주행을 막는 건 센서 정밀도만이 아니다. 솔직히 지금 기술 수준은 꽤 왔다. 진짜 걸림돌은 따로 있다.
- 안전과 신뢰성: 99.99% 정확도로는 부족하다. 하루 수백만 대가 달리면, 0.01% 오류도 수천 건의 사고로 이어진다. 폭설, 역광, 공사 구간처럼 센서가 혼란스러운 환경에서도 버텨야 한다. 오류가 나더라도 백업 시스템이 작동해야 한다.
- 윤리적 딜레마: 피할 수 없는 사고에서 차가 어떤 판단을 내려야 하나. 보행자와 탑승자 중 하나를 선택해야 하는 순간이 오면? 기술 문제가 아니라 철학 문제다. 그 기준을 누가 정하느냐가 핵심이다.
- 법과 제도: 전 세계 교통법은 인간 운전자를 기준으로 만들어졌다. 자율주행 사고가 나면 책임은 운전자에게? 제조사에게? 소프트웨어 개발사에게? 이를 명확히 하는 법적 프레임이 대부분 나라에서 아직 미완성이다.
- 인프라와 사이버 보안: V2X 통신망, HD 지도 데이터베이스 — 이걸 깔아야 레벨 4가 제대로 굴러간다. 막대한 인프라 투자가 필요하다. 거기다 자율주행 시스템이 해킹당하면 어떻게 되나. 사이버 보안은 지금도 업계 최대 과제 중 하나다.
The Verge가 전한 바에 따르면, 우버가 자율주행 데이터 수집 전용 랩을 별도로 운영할 만큼 데이터 확보 경쟁은 치열하다. 정부·학계·기업이 협력하면서 기술은 분명 앞으로 나아가고 있다. 자율주행차는 운송 수단 이상이다. 도시 구조를 바꾸고, 물류를 재편하고, 노인과 장애인의 이동권을 확장한다. 그 변화가 언제 오느냐는 기술만큼 제도와 사회 합의에 달려 있다.
출처: The Verge
테크가이드팀
Home-In-One 테크가이드팀은 IT 기기 비교, 소프트웨어 추천, 트러블슈팅 가이드 등 실용적인 기술 콘텐츠를 제작합니다. 초보자도 쉽게 따라할 수 있는 단계별 가이드를 지향합니다.