У меня есть код ниже python3
:
docs = ['Well done!',
'Good work',
'Great effort',
'nice work',
'Excellent!',
'Weak',
'Poor effort!',
'not good',
'poor work',
'Could have done better.']
# define class labels
labels = np.array([1,1,1,1,1,0,0,0,0,0])
from keras import backend as K
# integer encode the documents
vocab_size = 50
encoded_docs = [K.one_hot(d, vocab_size) for d in docs]
print(encoded_docs)
В основном я пытаюсь закодировать каждое слово из списка, но я получил эту ошибку:
TypeError: Значение, переданное параметру 'indexes', имеет строку DataType, отсутствующую в списке допустимых значений: uint8, int32, int64 Код > .
Что не так в моем коде? Это похоже на ошибку типа, но я не понимаю, почему.
2 ответа
Метод Keras one_hot
ожидает, что первый аргумент будет целочисленным типом (в вашем регистре слов слов). Поэтому вам необходимо сначала сопоставить каждое слово уникальному целому числу, прежде чем использовать метод one_hot
.
docs = ['Well done!',
'Good work',
'Great effort',
'nice work',
'Excellent!',
'Weak',
'Poor effort!',
'not good',
'poor work',
'Could have done better.']
all_words = set()
for s in docs:
for word in s.split():
all_words.add(word)
all_words = list(all_words)
# define class labels
labels = np.array([1,1,1,1,1,0,0,0,0,0])
from keras import backend as K
# integer encode the documents
vocab_size = len(all_words)
encoded_docs = [[K.one_hot(all_words.index(word), vocab_size) for word in d.split()] for d in docs]
print(encoded_docs)
Если вы хотите закодировать пунктуацию как отдельные слова, то вы можете использовать модуль re
для разделения слов.
import re
import string
encoded_docs = [[K.one_hot(all_words.index(word), vocab_size) for word in re.findall("[\w]+|["+string.punctuation+"]", d) for d in docs]
Без преобразования в целое число я использовал:
encoded_docs = [keras.preprocessing.text.one_hot(d,vocab_size)for d in docs]
Оно работает !
Похожие вопросы
Новые вопросы
python
Python - это многопарадигмальный, динамически типизированный, многоцелевой язык программирования. Он разработан для быстрого изучения, понимания и использования, а также для обеспечения чистого и единообразного синтаксиса. Обратите внимание, что Python 2 официально не поддерживается с 01.01.2020. Тем не менее, для вопросов о Python, связанных с версией, добавьте тег [python-2.7] или [python-3.x]. При использовании варианта Python (например, Jython, PyPy) или библиотеки (например, Pandas и NumPy) включите его в теги.