← All reports

Always render DOM and WebGL in the GPU process on Cocoa platforms

Component: WebKit GPU Process | 12f9fee

Source/WebKit/GPUProcess/graphics/RemoteRenderingBackend.cpp

switch (renderingMode) {
- case RenderingMode::Accelerated:
-#if HAVE(IOSURFACE)
- if (auto backend = ImageBufferShareableMappedIOSurfaceBackend::create(parameters, WTF::move(*providedBackingStore), creationContext.useIOSurfaceWebKitBehavior))
- return ImageBuffer::create(parameters, creationContext, WTF::move(backend));
-#endif
- return nullptr;
case RenderingMode::Unaccelerated:
...
+ case RenderingMode::Accelerated:
case RenderingMode::PDFDocument:
case RenderingMode::DisplayList:
- // 넘겨줄 backing store가 없는 모드입니다.
+ // web process가 넘겨줄 수 있는 backing store가 없는 모드입니다.
return nullptr;

Source/WebKit/GPUProcess/GPUConnectionToWebProcess.cpp

MESSAGE_CHECK(!isLockdownModeEnabled());
+#if !PLATFORM(COCOA)
+ MESSAGE_CHECK(m_sharedPreferencesForWebProcess.useGPUProcessForWebGLEnabled);
+#endif

WebKit은 DOM content를 두 가지 방식으로 그릴 수 있습니다. 하나는 web process 안에서 IOSurface 기반 backing store를 사용하는 방식입니다. 다른 하나는 RemoteRenderingBackend와 RemoteImageBufferSet을 거쳐 GPU process로 display list를 전달하는 방식입니다. WebGL도 같은 구조로 나뉘는데, GPU process 쪽의 RemoteGraphicsContextGL이 stream IPC connection을 통해 구동됩니다. 다만 Cocoa에서는 web content sandbox가 이미 두 경우 모두 GPU process 사용을 요구하고 있었습니다. 결과적으로 preference로 선택되던 in-process 경로는 더 이상 동작할 수 없는 상태였습니다.

이 commit은 Cocoa에서 UseGPUProcessForDOMRenderingEnabled와 UseGPUProcessForWebGLEnabled를 컴파일 대상에서 제외했습니다. ENABLE_GPU_PROCESS_DOM_RENDERING_BY_DEFAULT, ENABLE_GPU_PROCESS_WEBGL_BY_DEFAULT 매크로도 함께 제거되었습니다. 이와 함께 RemoteLayerWithInProcessRenderingBackingStore와 RemoteLayerWithRemoteRenderingBackingStore는 RemoteLayerBackingStore로 통합되었고, ImageBufferSet은 RemoteImageBufferSet에 병합되었습니다.

한편 삭제된 항목도 있습니다. RemoteVideoFrameObjectHeap::PixelBuffer message와 GetVideoFrameBuffer의 canSendIOSurface 인자가 제거되었습니다. ImageBuffer::backendGeneration()과 BufferAndBackendInfo::fromImageBuffer()도 함께 삭제되었습니다. 마지막으로 allocateImageBuffer는 backing store가 제공된 Accelerated 요청에 대해 IOSurface를 감싸지 않고 nullptr를 반환하도록 변경되었습니다.

Before (Cocoa):                          After (Cocoa):
WebContent                               WebContent
 ├─ pref: DOM/WebGL in GPUP?              ├─ DOM: display lists
 │   ├─ no: in-process BackingStore       └─ WebGL: GL stream
 │   │     (IOSurface alloc in WCP)              │ IPC
 │   └─ yes: RemoteBackingStore                  ▼
 │          └─► GPUP                       GPU Process
 │ IPC                                      ├─ RemoteRenderingBackend
 ▼                                          │    (Accelerated + provided
GPU Process                                 │     backing store => nullptr)
 ├─ allocateImageBuffer accepts              ├─ RemoteImageBufferSet (merged)
 │   IOSurface-backed store                  └─ RemoteGraphicsContextGL
 └─ RemoteVideoFrameObjectHeap::PixelBuffer  (PixelBuffer msg removed)

Cocoa에서 in-process 경로는 사실상 dead code였습니다. 이를 삭제하면서 remote 경로가 유일한 구현으로 남게 되었습니다. 이제 Cocoa에서 남은 rendering trust boundary는 web process가 전달한 parameter를 GPU process가 검증하는 지점 하나뿐입니다. GPU process는 더 이상 web process로부터 IOSurface 기반 buffer를 받지 않습니다. 반대로 web process 역시 remote image buffer용 IOSurface를 직접 allocate하지 않게 되었습니다.

Rendering 코드를 process 경계에 걸쳐 대규모로 리팩터링하면, 작업의 초점이 아니었던 쪽에 낡은 전제가 남기 쉽습니다. 이번 commit에서 위험이 집중되는 지점은 다음과 같습니다.