Continuando con el artículo anterior Evaluación de las capacidades de escritura de novelas de DeepSeek V4 (I), en este artículo vamos a profundizar un poco más en las habilidades de DeepSeek V4 para la escritura de novelas.

En primer lugar, queremos evaluar la capacidad de DeepSeek para seguir instrucciones. Las habilidades son un elemento crucial en los agentes de FeelFish, y es importante que el modelo pueda utilizarlas y seguirlas adecuadamente para satisfacer nuestras necesidades creativas.

Hemos iniciado un nuevo proyecto de novela e intentamos añadir una habilidad para el inicio:

Después de añadirla, pedimos al agente que comience la novela, utilizando el modo de pensamiento de DeepSeek V4 Flash para probarlo:

La habilidad se invocó correctamente, y el proceso de pensamiento fue el siguiente:

Proceso de pensamiento
Ocultar
El usuario quiere crear una novela web, el nombre del proyecto es "Cruzar a la Dinastía Tang para Abrir un Restaurante", y su seudónimo es Gu Zhidao. Este es un proyecto nuevo, por lo que no hay ningún archivo aún.

Necesito guiar al usuario paso a paso:
1. Entender las intenciones y preferencias del usuario - a través de preguntas en una conversación
2. Ayudar a construir el esquema general de la novela
3. Definir la configuración de los personajes principales
4. Establecer el estilo general y las reglas de creación de la novela
5. Finalmente, crear el contenido del primer capítulo

Sin embargo, el usuario ya ha proporcionado un título para el proyecto, "Cruzar a la Dinastía Tang para Abrir un Restaurante", lo que sugiere que será una novela ligera y relacionada con la gastronomía.

Pero el usuario ha dicho "por favor, ayúdame a través de una conversación", por lo que debería empezar hablando con él para entender sus ideas, en lugar de decidir todo por mi cuenta.

Espera, déjame revisar esto. El usuario ha dicho "guíame paso a paso", así que puedo comenzar haciendo preguntas para entender sus preferencias y luego construir basándome en sus respuestas.

Como el usuario no ha proporcionado más información, puedo empezar preguntando sobre sus preferencias.

Dado que el título del proyecto ya está determinado, "Cruzar a la Dinastía Tang para Abrir un Restaurante", y también tiene un seudónimo, es probable que el usuario ya tenga algunas ideas.

Voy a ver si hay algún archivo de habilidades que necesite leer.

El sistema me indica que, cuando la conversación se vuelve demasiado larga, el usuario puede iniciar una nueva conversación o resumir la actual. Para usar una habilidad específica, debo leer el archivo de la habilidad.

Aquí se menciona la habilidad de "construcción de árbol de trama", que dice: "debe usarse para la inicialización de la novela, el inicio, y la construcción de cada capítulo".

Entonces, debería leer primero el archivo de esta habilidad.

Sin embargo, prefiero hablar con el usuario primero para entender sus ideas, y luego proceder paso a paso.

Voy a ver qué hay en el proyecto actual y luego comenzaré a conversar con el usuario.

De hecho, el mensaje del usuario ya está incluido en <user_query>, por lo que debo responderle directamente.

Voy a leer el archivo de la habilidad primero para entender el contenido de la construcción de árbol de trama.

Bien, voy a leer el archivo de la habilidad y luego comenzaré a conversar con el usuario.

Parece que el agente considera adecuadamente todos los aspectos que hemos establecido. Ahora, veamos cómo sigue las instrucciones de la habilidad. No mostraremos el proceso intermedio, pero diremos que, en general, el resultado final cumple bastante bien con los requisitos de la habilidad, aunque hay algunos detalles que se han pasado por alto. En general, el resultado es aceptable, pero aún hay margen de mejora.

Por ejemplo, el formato de la creación del esquema general es correcto:

Sin embargo, se pasaron por alto algunas de las sugerencias finales de la habilidad:

En total, hicimos que el agente construyera un esquema de cien capítulos basándose en la habilidad de construcción de árbol de trama, pero el esquema general estaba diseñado para cinco volúmenes, y en estos cien capítulos se incluyeron los contenidos que originalmente se iban a distribuir en los cinco volúmenes, desviándose de la estructura inicial. Sin embargo, si se consideran solo estos cien capítulos, el diseño es lógico y cumple con las expectativas.

En resumen, DeepSeek-V4-Flash obtiene 80 puntos en el control de palabras y el seguimiento de habilidades, perdiendo 20 puntos en algunos detalles. En cuanto a la memoria, obtiene 70 puntos, lo cual es suficiente, pero aún hay mucho espacio para mejorar. En la creación de contenido, sin ninguna habilidad o indicaciones, probablemente obtendría solo 60 puntos, especialmente en el manejo de los finales de los capítulos, que resultan un poco forzados, y en la creación de suspense y ganchos, que están algo deficientes, por lo que aún se necesita la guía de las habilidades.

Recomendamos a los usuarios que, si utilizan DeepSeek V4, prueben la versión Pro con pensamiento, que probablemente ofrecerá mejores resultados. La versión Flash todavía requiere habilidades o indicaciones para guiarla, y es difícil confiar completamente en ella. Sin embargo, según las reacciones de la comunidad, la versión Pro de V4 no ha mostrado un gran avance en las capacidades de escritura, y en el corto plazo, aún no es realista esperar que un AI genere contenido excelente por sí solo. Sin embargo, con las habilidades y las indicaciones adecuadas, el AI puede completar eficientemente tareas relacionadas. Seguiremos evaluando y proporcionando habilidades útiles para guiar a DeepSeek V4 en la creación de contenido de mayor calidad.