Подвожу промежуточные итоги по моделям оценки полярности предложений в отзывах
(продолжение этих экспериментов)
1. Точность разных моделей на корпусе в 100,000 предложений
NLTK.NaiveBayerClassifier acc = 0.6793
SklearnClassifier+MultinomialNB acc = 0.7114
SklearnClassifier+LogisticRegression acc = 0.7324
SklearnClassifier+SVC acc = 0.5251
SklearnClassifier+LinearSVC acc = 0.7259
feedforward deep network using word2vec embeddings --> val_acc: 0.8561
feedforward deep network using word2vec embeddings + char-rnn vectors --> val_acc: 0.8626
convolutional network -> val_acc: 0.9347
Я пока не понял, почему последний вариант настолько хорош, опережает ближайшего конкурента на 10 процентов.
2. Примеры классификации предложений по полярности
Привожу результаты прогона для последней модели (convolutional network). Показанные предложения модель не видела в ходе обучения. Полярность соответствует цвету фона. Видны и ошибки, и хорошие обобщения.
Еда в основном однообразная, иногда добавлялись какие-то новые блюда.
Полотенца старые,выцветшие.
Номера тихие.
Завтраки немного однообразные но хорошего качества.
Интернет платный - приобретаешь карточку на определенное количество минут.
Пляж очень маленький, вода в море грязная, очень много водорослей.
Бассейны маленькие , народу много.
В номере убирают плохо.
Соки химические мерзкие, но дают питьевую воду.
Сейф платный, достаточно дорогой, закрывается обычным ключом.
Интернет работает очень плохо.
Недостатки: -вообще никакое питание.
Про пляж - пляж маленький и грязный.
Очень слабая анимация, над этим стоит поработать.
Мебель старовата, сантехника тоже - но мы в номере только спали.
Мебель не новая, но достаточно прочная.
Завтраки средние ( в других отелях и получше были).
Коктейли в баре делаются тоже из соков-юпи - поэтому невкусные.
Питание в отеле никакое.
Недостатки: Как везде в Греции, маленькая душевая кабина.
Недостатки:Были комары, неудобный душ в номере, грязноват пляж.
Персонал отеля очень грубый.
Питание: кошмар.
Бассейн не очень большой.
Питание: очень-очень плохое!!!
Во время ужина напитки платные в ресторане отеля.
Питание среднее.
Ковролин старенький, обои тоже.
КОФЕ НЕВКУСНЫЙ, ЛУЧШЕ ВЗЯТЬ СВОЙ!
Интернет платный.
Номер очень староват.
Напитки неплохие, особенно если соки брать у барменов.
В общем, отель вполне приличный и недорогой.
В ресторане всегда свежий сок, в барах только разведённый парашок.
Крайне не плохая для 3 звезд еда.
Море чистое.
Очень хороший пляж с хорошим заходом в море.
Зелени мало, так как отель новый.
Я могла бы порекомендовать этот отель для семейного отдыха.
Отличный пляж, самый лучший в Пафосе.
Приятный обслуживающий персонал.
Отель отличный, соответствует описанию.
Вкусная, хрустящая картошка-фри.
Лежаки бесплатные, полотенца тоже (под залог).
Качественный завтрак.
Обслуживание нормальное, телевизоры с кучей всяких разных развлекательных программ работали.
Хороший отель для молодежного отдыха.
Меню разнообразное.
Персонал в отеле дружелюбный, говорит по-английски.
Питание было отличным, не было такого чтобы все не нравилось.
Мясо готовили очень вкусно.
Для взрослых кухня хорошая, для малышей не все подходит.
Хороший ресторан, тратторию нужно найти.
Номер очень просторный, мне показалось метров 40 всего.
Персонал приветливый, номер убирали регулярно.
Еда вкусная, ее много.
Достоинства: Отель спокойный, без суеты, без очередей.
Засели в отличный номер ( Скандинавский корпус).
1. Точность разных моделей на корпусе в 100,000 предложений
NLTK.NaiveBayerClassifier acc = 0.6793
SklearnClassifier+MultinomialNB acc = 0.7114
SklearnClassifier+LogisticRegression acc = 0.7324
SklearnClassifier+SVC acc = 0.5251
SklearnClassifier+LinearSVC acc = 0.7259
feedforward deep network using word2vec embeddings --> val_acc: 0.8561
feedforward deep network using word2vec embeddings + char-rnn vectors --> val_acc: 0.8626
convolutional network -> val_acc: 0.9347
Я пока не понял, почему последний вариант настолько хорош, опережает ближайшего конкурента на 10 процентов.
2. Примеры классификации предложений по полярности
Привожу результаты прогона для последней модели (convolutional network). Показанные предложения модель не видела в ходе обучения. Полярность соответствует цвету фона. Видны и ошибки, и хорошие обобщения.
Еда в основном однообразная, иногда добавлялись какие-то новые блюда.
Полотенца старые,выцветшие.
Номера тихие.
Завтраки немного однообразные но хорошего качества.
Интернет платный - приобретаешь карточку на определенное количество минут.
Пляж очень маленький, вода в море грязная, очень много водорослей.
Бассейны маленькие , народу много.
В номере убирают плохо.
Соки химические мерзкие, но дают питьевую воду.
Сейф платный, достаточно дорогой, закрывается обычным ключом.
Интернет работает очень плохо.
Недостатки: -вообще никакое питание.
Про пляж - пляж маленький и грязный.
Очень слабая анимация, над этим стоит поработать.
Мебель старовата, сантехника тоже - но мы в номере только спали.
Мебель не новая, но достаточно прочная.
Завтраки средние ( в других отелях и получше были).
Коктейли в баре делаются тоже из соков-юпи - поэтому невкусные.
Питание в отеле никакое.
Недостатки: Как везде в Греции, маленькая душевая кабина.
Недостатки:Были комары, неудобный душ в номере, грязноват пляж.
Персонал отеля очень грубый.
Питание: кошмар.
Бассейн не очень большой.
Питание: очень-очень плохое!!!
Во время ужина напитки платные в ресторане отеля.
Питание среднее.
Ковролин старенький, обои тоже.
КОФЕ НЕВКУСНЫЙ, ЛУЧШЕ ВЗЯТЬ СВОЙ!
Интернет платный.
Номер очень староват.
Напитки неплохие, особенно если соки брать у барменов.
В общем, отель вполне приличный и недорогой.
В ресторане всегда свежий сок, в барах только разведённый парашок.
Крайне не плохая для 3 звезд еда.
Море чистое.
Очень хороший пляж с хорошим заходом в море.
Зелени мало, так как отель новый.
Я могла бы порекомендовать этот отель для семейного отдыха.
Отличный пляж, самый лучший в Пафосе.
Приятный обслуживающий персонал.
Отель отличный, соответствует описанию.
Вкусная, хрустящая картошка-фри.
Лежаки бесплатные, полотенца тоже (под залог).
Качественный завтрак.
Обслуживание нормальное, телевизоры с кучей всяких разных развлекательных программ работали.
Хороший отель для молодежного отдыха.
Меню разнообразное.
Персонал в отеле дружелюбный, говорит по-английски.
Питание было отличным, не было такого чтобы все не нравилось.
Мясо готовили очень вкусно.
Для взрослых кухня хорошая, для малышей не все подходит.
Хороший ресторан, тратторию нужно найти.
Номер очень просторный, мне показалось метров 40 всего.
Персонал приветливый, номер убирали регулярно.
Еда вкусная, ее много.
Достоинства: Отель спокойный, без суеты, без очередей.
Засели в отличный номер ( Скандинавский корпус).