내용

Drive already mounted at /content/drive; to attempt to forcibly remount, call drive.mount("/content/drive", force_remount=True).

Found 4020 images belonging to 5 classes.

Epoch 1/5

 92/503 [====>.........................] - ETA: 14:01 - loss: 3.9153 - accuracy: 0.1929

---------------------------------------------------------------------------

UnknownError                              Traceback (most recent call last)

<ipython-input-2-30c7b652f552> in <cell line: 67>()

     65 

     66 # Training the ANN model

---> 67 ann.fit(train_dataset, epochs=5)

     68 

     69 # Now, let's define and train the CNN model

1 frames

/usr/local/lib/python3.10/dist-packages/tensorflow/python/eager/execute.py in quick_execute(op_name, num_outputs, inputs, attrs, ctx, name)

     58         for t in inputs

     59     ]

---> 60     tensors = pywrap_tfe.TFE_Py_Execute(ctx._handle, device_name, op_name,

     61                                         inputs, attrs, num_outputs)

     62   except core._NotOkStatusException as e:

UnknownError: Graph execution error:

Detected at node PyFunc defined at (most recent call last):

<stack traces unavailable>

OSError: image file is truncated (0 bytes not processed)

Traceback (most recent call last):

  File "/usr/local/lib/python3.10/dist-packages/tensorflow/python/ops/script_ops.py", line 270, in __call__

    ret = func(*args)

  File "/usr/local/lib/python3.10/dist-packages/tensorflow/python/autograph/impl/api.py", line 643, in wrapper

    return func(*args, **kwargs)

  File "/usr/local/lib/python3.10/dist-packages/tensorflow/python/data/ops/from_generator_op.py", line 198, in generator_py_func

    values = next(generator_state.get_iterator(iterator_id))

  File "/usr/local/lib/python3.10/dist-packages/keras/src/engine/data_adapter.py", line 917, in wrapped_generator

    for data in generator_fn():

  File "/usr/local/lib/python3.10/dist-packages/keras/src/engine/data_adapter.py", line 1064, in generator_fn

    yield x[i]

  File "/usr/local/lib/python3.10/dist-packages/keras/src/preprocessing/image.py", line 116, in __getitem__

    return self._get_batches_of_transformed_samples(index_array)

  File "/usr/local/lib/python3.10/dist-packages/keras/src/preprocessing/image.py", line 370, in _get_batches_of_transformed_samples

    img = image_utils.load_img(

  File "/usr/local/lib/python3.10/dist-packages/keras/src/utils/image_utils.py", line 479, in load_img

    img = img.resize(width_height_tuple, resample)

  File "/usr/local/lib/python3.10/dist-packages/PIL/Image.py", line 2156, in resize

증상

• 위에 노란색 바탕 오류 메세지를 보면 1 epoch 에서 92 iteration 에서 오류가 발생함
• 위에 빨간색 오류 메세지를 보면 0 bytes not processed 라는 오류가 발생함

또한 학생들의 증상 이야기로

• 오류가 나는 시점이 위와 유사하나 그 때 그 때 다르다고 함

해결

• 일단 1 epoch 에서 92 iteration 을 수행한다는 것은 프로그램 자체에는 오류가 없다는 뜻임
• 왜냐하면 학습 과정을 다 거쳤다는 것이므로 (1 iteration 을 수행했음으로)

그러므로, 다른 곳에서 오류가 있을 가능성이 있음

• 그런데, 0 bytes not processed 라는 것을 보면 뭔가 처리가 안 되었음을 의미
• 이런 경우는 보통 하드 디스크 용량이 꽉 차서 파일을 못 만들거나 메모리가 꽉 차서 처리는 못하는 경우임!!!

이런 증상이 있을 경우 빠르게 확인하는 방법은

• 하드 디스크 용량을 확인 
• 하드 디스크 용량이 충분하면 처리하는 데이터의 개수를 줄여서 실행
• 잘 수행되면 메모리가 적어서 발생하는 문제임