IBM Personality Insights的最佳数据清理实践
IBM Personality Insights是IBM Watson的一个服务，它通过分析文本数据来揭示个人的心理特征和行为特点。在使用IBM Personality Insights之前，进行数据清理是非常重要的，以下是一些最佳的数据清理实践：
- 数据预处理：在使用IBM Personality Insights之前，需要对原始数据进行预处理。这包括去除特殊字符、标点符号和HTML标签，以及处理缺失值和重复数据。
- 文本分词：将文本数据分割成单词或短语，以便更好地理解每个单词的含义和上下文。
- 停用词过滤：去除常见的停用词，如“a”、“an”、“the”等，这些词对于分析个人特征没有太大的帮助。
- 词干提取：将单词还原为其原始形式，例如将“running”还原为“run”。这有助于减少数据的维度，并提高分析的准确性。
- 情感分析：使用情感分析技术来识别文本中的情感倾向，例如积极、消极或中性。这可以帮助更好地理解个人的情感状态。
- 数据标准化：对数据进行标准化，例如将所有文本转换为小写字母，以确保一致性和准确性。
- 数据采样：如果数据量非常大，可以考虑对数据进行采样，以减少计算资源的使用，并加快分析的速度。
- 数据验证：在使用IBM Personality Insights之前，对数据进行验证和检查，确保数据的完整性和准确性。
总结起来，最佳的数据清理实践包括数据预处理、文本分词、停用词过滤、词干提取、情感分析、数据标准化、数据采样和数据验证。这些步骤可以帮助提高IBM Personality Insights的分析准确性和效果。
关于IBM Watson的Personality Insights服务，它可以应用于多个领域，例如市场调研、社交媒体分析、人才招聘和个性化推荐等。通过分析个人的心理特征和行为特点，可以更好地了解用户需求、个性化定制产品和服务，并提供更好的用户体验。
腾讯云提供了类似的自然语言处理服务，可以用于文本分析和情感分析等任务。您可以了解腾讯云的自然语言处理服务（https://cloud.tencent.com/product/nlp）来获取更多相关信息。
相关·内容
我在IBM cloud中进行了搜索，在他们的错误处理中，他们说服务器不支持这种类型的文件 from ibm_watson import PersonalityInsightsV3
from ibm_cloud_sdk_core.authenticators import IAMAuthenticator
authenticator = IAMAuthenticator('xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx')
personality_insights = PersonalityInsightsV3(
version='2
浏览 17提问于2019-10-13得票数 0
回答已采纳
我正在构建一个Web应用程序，并希望集成IBM Watson Personality Insights API。我正在使用PHP，并且必须使用Curl库才能实现同样的目的
下面是IBM文档中提到的使用Curl的代码
curl -X POST --user {username}:{password}
--header "Content-Type: text/plain;charset=utf-8"
--header "Accept: application/json"
--data-binary @<filename>
"https://gat
浏览 0提问于2017-04-03得票数 0
我正在测试Personality Insights，我很好奇在将一串twitter profile的时间线发送到IBM之前，我是否需要进行任何数据清理。
例如，我是否应该删除推文中包含的urls以及单个推文中包含的其他twitter功能(如标签或个人资料名称)。
我目前没有删除任何数据。但是，我目前正在使用text+=". "+tweetfulltext连接带有句号和空格的tweet。
浏览 12提问于2017-07-09得票数 1
在IBM Watson Personality Insights API于今年年底关闭之前，我正在尝试了解它的基本工作原理。我有一个基本的文本文件，我想要分析，但我有问题的代码正常运行。，但我被卡住了我做错了什么？(我在下面的代码中涂掉了我的密钥)。
from ibm_watson import PersonalityInsightsV3
from ibm_cloud_sdk_core.authenticators import IAMAuthenticator
authenticator = IAMAuthenticator('BlottedOutKey')
persona
浏览 1提问于2021-03-11得票数 0
我目前正在尝试通过Cloud Foundry CLI在我的Bluemix组织中创建Watson Personality Insights服务。但是，可用的服务计划中有空格，导致我的命令被误解。我的命令id如下：
$ cf create-service personality_insights IBM Watson Personality Insights Monthly Plan personality-insights-box
我尝试将计划名称与加号、连字符和下划线连接在一起，但无济于事。有人能让我知道这是不是可能的，如果是的话，我会怎么做？
浏览 2提问于2015-06-07得票数 0
我试图从我的Python web应用程序调用Personality Insights API，但它总是返回禁止错误403，但是当我从Postman Chrome扩展调用它时，它成功地工作了。
这是我的python代码：
def generatePersonalDescription(request):
import requests
from requests.auth import HTTPBasicAuth
IBM_API_URL = "https://gateway.watsonplatform.net/personality-insights/api/v
浏览 1提问于2016-07-11得票数 0
回答已采纳
1回答
这条线是什么意思？
另外，我在这一行中出现了错误，错误上写着：“意外字符，一行接一行，连续字符”
我是新来的，我无法解决这个问题。
任何帮助都将不胜感激。谢谢
我的代码-从ibm_watson导入PersonalityInsightsV3
from ibm_cloud_sdk_core.authenticators import IAMAuthenticator
from os.path import join, dirname
import json
import os
authenticator =
IAMAuthenticator('{api key')
pe
浏览 2提问于2021-01-13得票数 0
回答已采纳
我正在写一个watson程序来获取个性特征。但是，我遇到了jar文件问题的错误。
import com.ibm.watson.developer_cloud.personality_insights.v3.PersonalityInsights;
import com.ibm.watson.developer_cloud.personality_insights.v3.model.Profile;
public JSONArray getPersonalityTraitsFromWatson(String text) {
JSONArray retval = null;
P
浏览 5提问于2017-06-27得票数 0
2回答
我正在跟踪个性洞察力入门，但总是在下面得到错误消息的API调用
{"help":"http:\/\/www.ibm.com\/smarterplanet\/us\/en\/ibmwatson\/developercloud\/doc\/personality-insights\/#overviewInput","code":400,"sub_code":"S00014","error":"The number of words 2 is less than the minimum numbe
浏览 0提问于2017-11-14得票数 1
回答已采纳
我正在使用IBM工具来确定包含自然语言的不同文件的音调(https://tone-analyzer-demo.mybluemix.net/)和个性分数(https://personality-insights-livedemo.mybluemix.net/)。建议的战略和在以下两者之间作出选择的理由：
从不同的文件中获取分数并平均/操纵它们。
在聚合数据上获得一个原始分数并使用它。
浏览 0提问于2017-10-24得票数 4
我在一个学术研究项目的背景下使用IBM Watson Personality Insights。
从到目前为止的分析，我注意到相同推文的原始分数和百分位数分数通常有很大的差异，在某些情况下，分数甚至在相反的两端(例如，宜人性原始分数: 0.21，宜人性百分位数分数0.76)。此外，在我的样本群体的总体水平上，百分位数得分的人格特质内的方差要高得多，而原始得分的方差非常低(每个性状的所有观察值都在0.1-0.2的范围内)。
我知道百分位数是归一化分数，对分数的解释是不同的。我的问题是，旨在将其应用于回归分析的研究人员通常使用哪个分数(例如，个人的个性特征-成功)？在我看到的应用人格洞察力的论文中
浏览 1提问于2018-09-07得票数 0
1回答
PHP个性洞察
、、、
<?php
$curl = curl_init();
$post_args = array('body' => $data );
$header_args = array(
'Content-Type: text/plain',
'Accept: application/json'
);
curl_setopt($curl, CURLOPT_POST, true);
curl_setopt($curl, CURLOPT_POSTFIELDS, $
浏览 3提问于2016-09-11得票数 0
1回答
所以这是第一次使用任何bluemix服务，我得到了以下错误，并且找不到任何与此相关的在线帮助。我是不是错过了一些基本的设置？
感谢您的帮助，谢谢。
错误是：
> Error: Could not find or load main class
> com.ibm.watson.developer_cloud.personality_insights.v3.Main
屏幕截图：
代码：
package com.ibm.watson.developer_cloud.personality_insights.v3;
import com.ibm.watson.developer_clo
浏览 7提问于2017-08-01得票数 0
谁能告诉我从哪里可以获得提供的Chef Watson API的授权密钥
或者，是否有针对此API的测试API Explorer，例如 for Personality Insights，其中不需要放置凭据？
我也在Bluemix目录中寻找了这个(Chef Watson API)，但没有找到，那么有没有办法解决这个问题，或者IBM已经关闭了这个API支持？
谢谢。
任何帮助都将受到高度的感谢。
浏览 24提问于2017-05-10得票数 1
回答已采纳
我已经将watson-developer-cloud/personality-insights-python模块部署到Bluemix中，并在bluemix中创建了一个应用程序。我的应用程序的链接运行非常好。但是，当我想使用post请求调用/v2/profile api时，我将得到一个错误。下面是我在Python中使用的代码。
import requests, json
payload = {'id': 'my-id',
'userid': 'id-here',
'sourceid' : 'twit
浏览 3提问于2015-06-06得票数 0
回答已采纳
2回答
var express = require('express');
var app = express();
var http = require('http').Server(app);
var cfenv = require("cfenv");
var appEnv = cfenv.getAppEnv();
http.listen(appEnv.port, appEnv.bind);
var PersonalityInsightsV2 = require('watson-developer-cloud/personality-i
浏览 0提问于2016-09-05得票数 0
回答已采纳
我想使用Watson Personality Insights API来分析特定Twitter用户的个性特征。这个用户有1000条推文。我需要调用Personality Insights API 1000次才能做到这一点吗？
浏览 0提问于2015-11-24得票数 1
我已经从Bluemix下载了Personality Insights，我可以在我的命令行上成功运行它，但是我如何将它插入到我的网页上并在本地运行它？
有没有人有index.js的示例代码？我已经设置了服务器，但我发现很难将其集成到我的页面上。
var express = require('express');
var app = express();
var http = require('http').Server(app);
var cfenv = require("cfenv");
var appEnv = cfenv.getAppEnv
浏览 4提问于2016-09-07得票数 0
回答已采纳
1回答
var PersonalityInsightsV2 = require('watson-developer-cloud/personality-insights/v2');
var personality_insights = new PersonalityInsightsV2({
username: '<username>',
password: '<password>'
});
personality_insights.profile({
text: '<?php echo $_Sessi
浏览 2提问于2016-09-03得票数 1
回答已采纳
1回答
我正在创建一个web react服务，它需要IBM个性洞察服务。
这是我的要求
var test = "some string";
var myHeaders = new Headers();
myHeaders.append("authorization",config.ibmCredential);
myHeaders.append("Content-type", "text/plain");
myHeaders.append("Accept", "application/json");
myH
浏览 2提问于2017-07-11得票数 1
1回答
我正在使用Watson Personality Insights从文本正文中获取结果。我从Node.js Personality insights演示中得到的结果与我使用Python SDK时得到的结果不同。
Python脚本：
with open('input_file.txt', encoding='utf-8') as input_file:
profile = personality_insights.profile(
input_file.read(), content_type='text/plain;charset=
浏览 0提问于2017-09-12得票数 1
我一直在尝试在我的React JS应用程序中实现Watson PersonalityInsightsV3 API。为了避免使用凭证时出现的CORS错误，我让flask/python服务器请求令牌。然后，我在React JS文件中使用fetch来接收令牌，并尝试将其传递给我的Watson配置文件请求。尽管如此，我仍然收到CORS错误，并且不确定如何使用令牌完成请求。
try { axios.get('http://project1-m6.c9users.io:8080/token')
.then(result => { console.log(&#
浏览 0提问于2018-02-08得票数 0
我刚刚完成了CodeAcademyIBM沃森课程，他们在python2中编程，当我在python3中把文件带过来时，我一直收到这个错误。文件脚本和所有凭据在CodeAcademy中运行良好。这是因为我在Python 3中工作，还是因为代码中有问题。
Traceback (most recent call last):
File "c:\Users\Guppy\Programs\PythonCode\Celebrity Match\CelebrityMatch.py", line 58, in <module>
user_result = anal
浏览 4提问于2018-01-13得票数 1
回答已采纳
目前，我正在使用以下代码对一个网站进行分析：
import json
from os.path import join, dirname
from watson_developer_cloud import AlchemyLanguageV1
alchemy_language = AlchemyLanguageV1(api_key='YOUR API KEY')
url = 'https://developer.ibm.com/watson/blog/2015/11/03/price-reduction-
for-watson-personality-insight
浏览 10提问于2016-06-23得票数 0
目前，我正在处理的node.js项目有问题，但我不知道如何将从下面的代码中获得的json.stringify响应存储在可以访问jSON数据的文件中，或者是否有更好的方法不将其存储在文件中。
这是我的代码：
var watson = require('watson-developer-cloud');
var personality_insights = watson.personality_insights({
username: '...',
password: '...',
version: 'v2'
浏览 4提问于2015-07-30得票数 0
回答已采纳
2回答
我把这个放在Node.JS文件里。
var express = require('express');
var app = express();
var http = require('http').Server(app);
var cfenv = require("cfenv");
var appEnv = cfenv.getAppEnv();
http.listen(appEnv.port, appEnv.bind);
var PersonalityInsightsV2 = require('watson-developer-c
浏览 1提问于2017-11-28得票数 1
回答已采纳
我正在尝试运行示例java应用程序，如
我已经能够正确地设置我的自由服务器，我已经能够创建一个应用程序的布鲁米克斯服务器与我的帐户。当我尝试在Eclipse中运行示例代码时，我可以看到watson Q&一个应用程序界面。但是当我按下问询按钮时，我得到了
Error: Connect to gateway.watsonplatform.net:443 [gateway.watsonplatform.net/23.246.237.54] failed: Connection timed out: connect
除了输入我的服务的url值以及用户名和密码外，我没有对代码做任何更改。
我需
浏览 5提问于2015-10-20得票数 1
回答已采纳
我正在尝试编写一个Notes插件，并一直在跟踪来自ICONUK2014的Ulrich的幻灯片。我已经安装了Eclipse3.4.2，6.2.3，并在“hello，world”插件中获得了部分成功。这是可行的，但接下来的地点是德语，我不想要。
我试图查看运行配置，但找不到覆盖区域设置的位置。你能帮上忙吗？
osgi> 2015/01/11 20:30:08.259 KONFIG eclipse.buildId=20131002-1404
java.fullversion=JRE 1.6.0 IBM J9 2.4 Windows 7 x86-32 jvmwi3260sr14-20130704
浏览 2提问于2015-01-11得票数 0
回答已采纳
4回答
IBM_DB Gem问题
、、、
当我尝试将我的应用程序部署到Bluemix时，我会得到以下错误。我的manifest.yml文件如下所示。
applications:
- path: .
memory: 512M
instances: 1
domain: mybluemix.net
name: KnowYourBrand
host: kyb
command: bundle exec rake db:setup && bundle exec rails s -p $PORT
disk_quota: 1024M
services:
- Personality Insights-
浏览 4提问于2015-11-20得票数 2
作为应用程序测试的一部分，我对Watson personality API进行了测试，发现当我使用只包含数字的输入文本进行测试时，Watson PI返回了正确的摘要。
我想把它通知给Watson Personality Insights Dev团队，因为这个bug可能会让人们怀疑Watson理解输入的能力。
浏览 1提问于2016-05-02得票数 0
当使用Twitter源作为输入时，Personality Insights是否使用转发？如果是这样，有没有办法把它们排除在外？
浏览 1提问于2015-07-10得票数 3
使用Flask和BlueMix部署web应用程序。有一些js的问题，我似乎无法弄清楚。在浏览器控制台中，我一直收到相同的错误。我不知道任何js，所以任何帮助都会非常感谢！
jquery-1.11.1.min.js:4 POST http://newfla.mybluemix.net/ 405 (Method Not Allowed)
send @ jquery-1.11.1.min.js:4
m.extend.ajax @ jquery-1.11.1.min.js:4
(anonymous function) @ demo.js:66
m.event.dispatch @ jquery-1
浏览 0提问于2015-11-08得票数 0
2回答
我在python中有这样的代码
response = requests.post(
"https://gateway.watsonplatform.net/personality-insights/api/v2/profile",
auth = ("username", "password"),
headers = {"content-type": "text/plain"},
data = "your text goes here"
)
jsonProfile =
浏览 4提问于2015-08-26得票数 0
回答已采纳
1回答
我想使用IBM的个性洞察服务。我下载了Hello 示例代码，并试图在其中集成个性洞察服务。
我的代码如下。
MainActivity.java
package com.ibm.bms.samples.android.helloworld;
import android.app.Activity;
import android.os.Bundle;
import android.util.Log;
import android.view.View;
import android.widget.TextView;
import com.ibm.mobilefirstplatform.clien
浏览 8提问于2016-01-19得票数 1
回答已采纳
我已经在Bluemix中部署了我的个性洞察力服务应用程序，我可以调用post命令发送文本。我想把数据的输出保存到csv，我已经看过了Personality的API文档，但是我不知道我哪里出错了。谁能帮我把输出存储到csv文件。
下面是我在Python中使用的代码。
#!/usr/bin/env python
# coding: utf-8
import requests
import json
import csv
response = requests.post("https://gateway.watsonplatform.net/personality-insights/ap
浏览 5提问于2015-06-07得票数 0
1回答
有没有清理"dojox/mvc/Output“类型的dojo小部件的最佳实践？我的这类输出小部件有诸如innerHTML之类的数据道具，但我无法找出内存泄漏的根本原因。对于这种特定类型的小部件，是否有通用的最佳实践？
浏览 1提问于2016-03-04得票数 0
1回答
我想要一个字符串来代替代码
我有一个这样的字符串
<strong>WHAT IS YOUR BIRTH DATE?</strong><br />
WE BEGIN THE GREATEST JOURNEY OF OUR LIFE AT THE MOMENT OF OUR BIRTH. OUR
VIBRATIONAL PATTERNS ARE THEN SET IN MOTION. THEY ARE FIXED AND
UNCHANGEABLE, NOT LIKE YOUR NAME WHICH CAN BE CHANGED AT ANY TIME DURIN
浏览 0提问于2010-02-23得票数 0
回答已采纳
1回答
我很难在PHP中使用cURL。我不确定我需要做什么来“翻译”这个：
curl -X POST -u "{username}:{password}" --header "Content-Type: application/json" --data-binary @profile.json "https://gateway.watsonplatform.net/personality-insights/api/v3/profile?version=2016-10-20&consumption_preferences=true&raw_scor
浏览 0提问于2017-02-21得票数 0
从一个页面导航到另一个页面时，经常会出现以下错误。错误与我的任何代码无关，至少与堆栈跟踪无关。从调试打印看，它似乎发生在页面加载之后。
有什么想法吗？
com.ibm.xsp.FacesExceptionEx: java.io.NotSerializableException: org.openntf.domino.impl.Document
com.ibm.xsp.application.AbstractStateManager.saveSerializedView(AbstractStateManager.java:121)
com.ibm.xsp.application.
浏览 2提问于2016-06-01得票数 1
配置IBM Maximo Worker Insights实例的步骤有哪些。
我正在尝试使用该产品的API和仪表板。
浏览 28提问于2019-02-27得票数 0
我正在尝试使用IBM DataScienceExperience中的对象存储将数据从DataFrame文件发布到Watson Personality Insights API。
我已经将txt文件加载到ObjectStorage中并创建了一个DataFrame。工作正常。不了解如何将dataframe中的数据发布到API。提供的文档没有将我引向正确的方向。
这就是我所做的
from io import StringIO
import requests
import json
import pandas as pd
def get_object_storage_file_with_creden
浏览 0提问于2017-09-10得票数 0
2回答
因此，我正在尝试使IBM上的代码现代化，我正在考虑子文件和打印文件。
除去本机I/O操作之外，我可以想到三种方法来使用嵌入式SQL来填充数据。
游标取法
一页记录数的MultiOccurance数据结构
保存多页数据的大得多的MultiOccurance数据结构。
什么是最佳实践方法？有什么意见吗？
浏览 2提问于2018-07-02得票数 0
2回答
如何从.net核心调用
、、、
我试图将沃森个性洞察力api称为“沃森个性洞察力api”，在环顾四周之后，解决方案似乎是将.net等效为下面的curl请求。我对此非常陌生，我想知道我是否能得到指导或被指点到相关的教程。
curl -X POST -u "{username}:{password}"
--header "Content-Type: application/json"
--data-binary @profile
"https://gateway.watsonplatform.net/personality-insights/api/v3/profile?version=2
浏览 6提问于2017-03-25得票数 5
假设有10个队列需要创建。配置的利弊是什么：
10个IBM队列管理器，每个管理单个队列
一个IBM队列管理器，它将管理所有10个队列。
就IBM最佳实践而言，推荐哪一种？
谢谢。
浏览 3提问于2014-12-29得票数 1
如果我在IBM Watson IoT Driver Insights中多次提交作业，会发生什么情况？旧的分析结果是否被新的分析结果覆盖？
浏览 2提问于2016-03-25得票数 0
1回答
我需要帮助，以水平显示在卡中的元素比较默认(一个在另一个下方) 目前，我的卡片如下图所示： 但是，我需要它来内联显示元素。 <div class="ibm-col-12-2 card1" >
<div class="ibm-card">
<div class="ibm-card__image">
浏览 10提问于2020-07-14得票数 1
回答已采纳
在过去的几天里，我的Designer (9.0.1)“忘记”了在我的应用程序Eclipse视图中显示的应用程序。一开始是零星的，所以不是每天都有，我原以为是一次性的，暂时的。现在它正在抛出一个有趣的错误。
我还应该补充一点，在一个同事的建议下，我重新命名了我的工作区文件夹，这允许我从头开始重新构建它，并且它回到了工作状态。因此，这不再是一个直接的危机(这将阻止我使用设计人员与nsf交互)，更多的是：
好奇，而不是停止表演
训练时刻，这样我才能知道这一切到底意味着什么
希望我的一些博学的开发人员能够在排除和读取此错误方面留下一些优秀的技能(因为我所看到的只是一个与我的com
浏览 2提问于2014-03-06得票数 1
回答已采纳
我使用OpenNTF早期版本的extlib设计了一个应用程序。现在，我已经更新了extlib，当我试图在数据库中打开Xpage时，我得到了以下错误：*注意，在Designer中打开Xpage时会发生这种情况。数据库是在一个完美的浏览器中打开的。
Could not open the editor: An unexpected exception was thrown.
java.lang.NullPointerException
at com.ibm.designer.domino.xsp.editpart.XFacesEditPartFactory.createEditPart(Unkno
浏览 0提问于2012-05-15得票数 1
1回答
在IBM Real-Time Insights中，我有一个设备，我正在为其创建一个具有虚拟数据点的模式，该虚拟数据点的值来自该设备的一个数据点(压力除以100)。然而，当试图在仪表板上可视化数据时，它会显示为“不可用”。为了让虚拟数据点正常工作，除了架构定义之外，我还需要做什么吗？
浏览 3提问于2016-04-30得票数 0
我有一个JSON输出，即使经过多次尝试，也无法解析它。我对这件事不熟悉。我正在从IBM个性洞察中获得JSON字符串。输出如下，任何人都可以帮助我如何解析这个？我需要它中所有JSON对象的名称、id、百分比和采样错误。我如何在Android中实现这一点呢？有什么帮助吗？
{
"id": "*UNKNOWN*",
"source": "*UNKNOWN*",
"word_count": 2196,
"tree": {
"id": "r",
"nam
浏览 2提问于2015-06-13得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
